Robots.txt
Страницы: 1
Robots.txt
Подскажите обязательно ли прописывать файл роботс или можно оставить разрешение индексировать все для вордпресс?

Если не трудно, напишите robots.txt для вордпрес 3.1

И еще вопрос, вот я создал файл роботс в корне домена, будет ли он расспростроняться на поддомены созданные по технологии мультисайт на вордпресс( эти суб домны не отображаются почему то на хостинге и прописать роботс на каждый нет возможности, поэтому еще проблема с внесением урл карты сайта для поддоменов, сейчас роботс автоматический разрешающий индексировать все для всех пауков и автоматически размещает карту сайта для каждого поддомена в нем.)

Спасибо!

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

вот мой роботs
Насчет субдоменов не знаю-не практиковал такого)
Я вот посмотрел, у вас теги и фиды коментариев все равно гогл индексирует smile:mad:
viktor2011, потому что закрыл недавно и сопли еще остались и эти страницы, со временем выпасть должны)
А яндекс индексирует page,

А какие последствия дублирования контента сайта, тем же сайтом? Т.Е. если все же оставить разрешение на индексацию всего на сайте?
В целом вроде бы разобрался, залил роботс на каждый поддомен, спасибо за шаблон роботса!

Подскажите еще нужно ли поддомену прописывать директиву host типа aaa.aaaa.aa или на основной домен типо aaaa.aa?

Спасибо! smile:confused:
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
05:39 Изображения уходят за пределы контенты 
04:38 Апдейт яндекс 24.01.2017 
04:23 Adsense личный опыт 
02:35 Апдейт яндекс 20.01.2017 
00:52 Выдача Яндекс. Стремятся ребята к качественной выдаче. Как это понимать? 
00:31 Партнерская программа Сервиса 1PS.RU 
23:35 Можно ли отобразить группу ВК у себя на сайте 
03:07 Продается сайт юридической тематики 
02:39 Изготовление Логотипов,Баннеров,Интро видео и многое другое 
02:30 Buy/Sell Itunes-Onevanilla-Moneypak-Target-Amazon-Ebay 
02:03 Раскрутка в соц.сетях - Instagram, Twitter, Periscope 
01:49 Качественный прогон Хрумером всего 10 WMZ 
01:22 Помогите оценить домены с большим тицем 
23:07 Кто оценивает сайты? 
04:43 Актуально для новичков! Как продвинуть сайт в интернете бесплатно! 20 простых способов. 
22:31 Почему 98% текстов на ваших сайтах не работают. Вообще. И как это починить 
21:52 Что такое прямые заходы в Яндекс Метрике или история о неуловимых IP у Hetzner Online AG 
19:25 Способ навсегда удалить рефспам из аналитики. 
19:22 Вот подумал... 
16:37 Деверсификация трафика 
15:46 Redis и Tarantool - нужно ли мне это?