Арктическая Лаборатория +6

админ панель всегда закрывается от индексации чтобы исключить её попадание в индекс
это делается в интересах продвижения, чтобы исключить "мусор" из индекса и предотвратить его попадание в дальнейшем
наличие "мусора" в индексе принято считать негативным фактором, как и мусора в доме (:

Робот физически не сможет найти админку и проиндексировать её. Вы же на пишите на главной странице сайта АДМИНКА НАХОДИТСЯ ТУТ :)

но если есть внешние ссылки на страницу то сможет.
посмотрите другие сайты в коммерческих тематиках, не может же большинство ошибаться (:

Вы на внешних веб-сайтах указываете ссылку на вашу админку?)
Это как минимум странно.

Мы – нет. Но robots.txt для того и нужен, чтобы настроить индексацию, чтобы исключить попадание в индекс всего существующего и потенциально возможного “мусора”. Это же основы поисковой оптимизации (:

Ну тогда обьясните мне каким образом админка попадет в индексацию?
Она может попасть только если вы сами физически укажите ссылку !

Один из примеров того, как админ панель может попасть в индекс мы уже приводили выше, причины могут быть различные.
Запрет индексации всех конфиденциальных данных это базовый процесс поисковой оптимизации.
Адреса админ панелей чаще всего стандартные и найти их расположение не составляет труда, а далее вы можете делать с этой информацией всё что захотите (:

Посмотрите другие сайты в коммерческих тематиках, у большинства админ панель закрыта в robots, не могут же все ошибаться.

Мы рекомендуем вам статьи:
Требования поисковой оптимизации при разработке сайта, от агентства “пиксель плюс” http://www.pixelplus.ru/samostoyatelno/stati/indeksatsiya/seo-i-razrabotka-sayta.html
10 нестандартных способов использовать файл robots
https://devaka.ru/articles/robots-txt-for-humans

Также может быть полезна “Энциклопедия поискового продвижения“ от Ingate http://www.ozon.ru/context/detail/id/24752138/