Robots.txt

Вопрос: что такое robots.txt?

Определение

Robots.txt – файл, ответственный за отображение или скрытие страниц/разделов сайта в поисковых системах

Материалы позаимствованы с сайта "Википедия" или других открытых источников информации.