Что такое robots.txt в PHP-разработке и зачем это спрашивают на собеседовании?
Что хотят услышать интервьюеры:
robots.txt — файл инструкций для поисковых роботов.
- не является механизмом безопасности
- управляет crawling
- важен для CMS
Ответ:
Почему спрашивают: тема показывает, понимает ли кандидат не только синтаксис, но и последствия для реального PHP-проекта: поддержку, безопасность, производительность и читаемость.
Типичная ошибка: прятать секретные URL через robots.txt и считать их защищенными.
Как отвечать на собеседовании: дать определение, коротко назвать 2–3 практических эффекта и привести пример из проекта.