Robots.txt

Cпециальный файл, который используется для регулирования процесса индексации сайта поисковыми системами. Место его размещения – корневой каталог. Различные разделы этого файла содержат директивы, которые открывают или закрывают доступ индексирующим ботам к разделам и страницам сайта.

     Просмотров: 22
Поделитесь
Подпишитесь на наш Telegram канал