Robots.txt
Страницы: 1
Robots.txt
Подскажите обязательно ли прописывать файл роботс или можно оставить разрешение индексировать все для вордпресс?

Если не трудно, напишите robots.txt для вордпрес 3.1

И еще вопрос, вот я создал файл роботс в корне домена, будет ли он расспростроняться на поддомены созданные по технологии мультисайт на вордпресс( эти суб домны не отображаются почему то на хостинге и прописать роботс на каждый нет возможности, поэтому еще проблема с внесением урл карты сайта для поддоменов, сейчас роботс автоматический разрешающий индексировать все для всех пауков и автоматически размещает карту сайта для каждого поддомена в нем.)

Спасибо!

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

вот мой роботs
Насчет субдоменов не знаю-не практиковал такого)
Я вот посмотрел, у вас теги и фиды коментариев все равно гогл индексирует smile:mad:
viktor2011, потому что закрыл недавно и сопли еще остались и эти страницы, со временем выпасть должны)
А яндекс индексирует page,

А какие последствия дублирования контента сайта, тем же сайтом? Т.Е. если все же оставить разрешение на индексацию всего на сайте?
В целом вроде бы разобрался, залил роботс на каждый поддомен, спасибо за шаблон роботса!

Подскажите еще нужно ли поддомену прописывать директиву host типа aaa.aaaa.aa или на основной домен типо aaaa.aa?

Спасибо! smile:confused:
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
21:38 Не идет трафик из Google на англоязычный сайт 
20:07 Помогите решить вопрос, нету трафика с гугла 
19:51 Adsense личный опыт 
19:19 Ошибка при валидации 
18:22 Partnerearn.net - прибыльная гемблинг партнерка 
18:00 Как лучше распределить беклинки 
17:56 26 апреля 2017 Яндекс выдача 
21:23 Web-мастер (wordpress, joomla, dle, ucoz, modx, соц сети и прочие) 
20:29 Комплексный прогон по трастовым сайтам, статейное размещение. Рост НЧ-СЧ, Тиц-пр. 
20:08 Продам сайт на тему игры "Моя кофейня" 
19:13 Услуги и работа в ZennoPoster|Zebroid|KeyCollector|Content downloader 
19:10 Едем в топ 
19:09 Парсинг сайтов|обработка данных|Сбор баз|беклинков для крауд-маркетинга 
18:54 Контентное развитие и продвижение|Наполнение форумов|Партизанский маркетинг 
21:29 Статьи с ошибками на медицинском сайте. Как влияют на продвижение ошибки? 
21:29 Советую вместо дом2 послушать аудиокнигу "Мани, или Азбука денег" Автор: Бодо Шефер 
20:48 Ищем не на чем сэкономить, а на чем заработать! 
18:32 Создание и продвижение пиратских сайтов 
18:14 Навеянные форумом картинки 
17:22 Как сделать ПРОГНОЗ КЛЕВА 
15:05 Где вы работаете онлайн (физическое нахождение вашего тела)?