Как Bing интерпретирует robots.txt
Если вы продвигаете свои сайты в Буржунете, тогда эта заметка точно для вас. Впрочем, и рунетчикам может быть полезно узнать, как второй по значимости американский поисковик читает файл robots.txt.На днях представитель Bing Фредерик Дюбуа (Frederic Dubut) рассказал сеошникам, что отдельная группа команд в robots.txt, созданная специально под Bing, является приоритетной для Бингбота. То есть, он выполняет исключительно то, что прописано в этой секции:
"Если в файле robots.txt вы создаете отдельную секцию под #Bingbot, в таком случае все другие директивы по умолчанию, которые не прописаны в этой секции команд, будут игнорироваться Бингботом. Помните об этом! Хотите, чтобы наш бот выполнял те или иные команды, тогда намеренно пропишите их в его секции в robots.txt".
Напомним, что Google действует иначе. При наличии многих директив в различных секциях упомянутого файла Гуглбот примет за основу некую совокупность запрещающих команд и будет отталкиваться от них, взаимодействуя с сайтом. То есть, предписания под Google для Гуглбота приоритетом не являются.
6 Января 2019
Апдейты
- Яндекс ИКС
24.05.2019 (27 дней назад) - Яндекс выдача
19.06.2019 (вчера)
Доска объявлений
Купить / Продать
Работа / Услуги
Интересные темы
Интернет новости
Инструменты
Разделы