Web designer Blog

«Дизайнер понимает, что достиг совершенства не тогда, когда ему нечего добавить, а тогда, когда нечего убрать» Antoine de Saint-Exupéry

Заметка

Как составить минимальный robots.txt

Файл robots.txt — специальный текстовый файл, расположенный в корневом каталоге сайта и содержащий инструкции для поисковых систем. Он является одним из самых важных при оптимизации любого сайта. Его отсутствие может привести к высокой нагрузке на сайт со стороны поисковых роботов и медленной индексации, а неправильная настройка к тому, что сайт полностью пропадет из поиска илиЧитать больше проКак составить минимальный robots.txt[…]

© 2018 madeas.ru . Все права защищены.