Как Bing интерпретирует robots.txt

Если вы продвигаете свои сайты в Буржунете, тогда эта заметка точно для вас. Впрочем, и рунетчикам может быть полезно узнать, как второй по значимости американский поисковик читает файл robots.txt.

На днях представитель Bing Фредерик Дюбуа (Frederic Dubut) рассказал сеошникам, что отдельная группа команд в robots.txt, созданная специально под Bing, является приоритетной для Бингбота. То есть, он выполняет исключительно то, что прописано в этой секции:

"Если в файле robots.txt вы создаете отдельную секцию под #Bingbot, в таком случае все другие директивы по умолчанию, которые не прописаны в этой секции команд, будут игнорироваться Бингботом. Помните об этом! Хотите, чтобы наш бот выполнял те или иные команды, тогда намеренно пропишите их в его секции в robots.txt".

Напомним, что Google действует иначе. При наличии многих директив в различных секциях упомянутого файла Гуглбот примет за основу некую совокупность запрещающих команд и будет отталкиваться от них, взаимодействуя с сайтом. То есть, предписания под Google для Гуглбота приоритетом не являются.

6 Января 2019

Возврат к списку

Новые темы	Объявления	Свободное общение
17:29 Как продвигать сайт с неуникальным контентом 13:54 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 14:50 Индексация страниц 12:36 У кого новостник, дайте пару советов плиз 13:53 AviTool - мощный инструмент для автоматизации работы с Avito 17:01 Absence в Армении 23:19 Ребята подскажите какими сервисами и прогами вы пользуетесь для SEO продвижения?	04:05 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 21:57 Обменник криптовалюты OnlyCrypto 20:55 Скрипт обменника валют 20:47 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 14:49 TETChange-Обменник криптовалют 13:53 MintChange — Быстрый и надёжный обмен криптовалюты 18:46 Аккаунты Avito (юр.лица)	19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор 22:08 Накрутка поисковых подсказок 05:04 Точные прогнозы на футбол 14:01 Union Pharm - топовая фарма-партнерка для профессионалов! 10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 12:23 150+ хакерских поисковых систем и инструментов 17:41 Стряхнуть обыденность - об Агасфере