Запрет обхода не удаление
Google может показать известный ему адрес даже без обхода страницы. robots.txt не заменяет управление индексацией.
FinFly Explains / IT
robots.txt: правила обхода, а не замок
Файл сообщает поддерживающим его роботам, какие адреса можно обходить.
Приватность отдельно
Для закрытого кабинета нужна проверка доступа. Публичный список Disallow не скрывает секретные файлы от людей или роботов, игнорирующих правила.
Практика FinFly
Перед изменением проверьте, не блокируются ли нужные изображения и стили. Не совмещайте правила вслепую: робот должен увидеть noindex, чтобы учесть его.
Методология
Первоисточники
Факты и механизмы в разборе сверены с этими институциональными и отраслевыми источниками.