Google о типах контента в Robots.txt
Google о типах контента в Robots.txtОказывается, поисковик благосклонно относится к разным типам контента, представленного в файле Robots.txt.

Это следует из недавней переписки с представителем поиска в Твиттере. Один сеошник поинтересовался у Джона Мюллера (John Mueller):

"У меня к вам один актуальный вопрос: мне всегда казалось, что в Robots.txt приветствуется лишь один тип контента – обычный текст (TEXT/PLAIN), а не текст плюс HTML. Однако в последнее время при проверке этого файла на корректность я вижу, что конфликта из-за подобных комбинаций (TEXT/HTML) нет. Правда ли это?"

Ответ эксперта поисковой системы:

"По моему мнению, в этом документе может использоваться любой тип контента. Важно понимать, что ключевое – не тип, а сам контент".

К слову, создать корректный Robots.txt можно при помощи нашего инструмента.

2 Июня 2020
Комментарии:  1

Возврат к списку



Комментарии пользователей:


Это нравится:0Да/0Нет
Eye
Кто, как и зачем засовывает в robots HTML? smile:eek:
Новые темыОбъявленияСвободное общение
20:05 1 июля 2020 АПдейт Яндекс выдача 
19:14 Контент в интернет магазине? 
15:22 Adtrafico - Правильная партнёрская сеть под бурж трафик 
10:52 В поиске страниц 0 
08:28 TeaserNet - тизерная сеть нового поколения! Высокие доходы, стабильные выплаты 
08:20 Kokos.click - народная тизерная сеть! 
08:03 Обновление поисковой базы 2020-07-03 
21:22 Ищутся люди знающие программирование на С++! Хорошая оплата! 
21:05 Размещу анкорные Трастовые ссылки на ваш сайт с ИКС от 10. 
18:08 Технический аудит сайта - бесплатно 
17:49 Pinflux2Pro -супер мощный комбайн для Pinterest | Работает на полном автомате. 
15:10 Продажа аккаунтов Adsense 
13:57 ПРОДАМ САЙТ /ДОМЕН 
13:33 BestChange – обменивать электронную валюту можно быстро и выгодно 
21:35 Шашлыки в 2012-2020 году 
15:33 [b]Webvork [/b]- международная товарная СРА сеть с сертифицированными офферами на Европу. 
11:03 Повышение ИКС сайта - мое наблюдение 
21:47 форекс 
17:03 Осторожно кидалово, svk-native.ru не платит партнерам 
14:45 Бесплатный Аудит от Кролика 
22:00 Рыболовы "постапокалипсиса"