Robots.txt
Страницы: 1
Robots.txt
Подскажите обязательно ли прописывать файл роботс или можно оставить разрешение индексировать все для вордпресс?

Если не трудно, напишите robots.txt для вордпрес 3.1

И еще вопрос, вот я создал файл роботс в корне домена, будет ли он расспростроняться на поддомены созданные по технологии мультисайт на вордпресс( эти суб домны не отображаются почему то на хостинге и прописать роботс на каждый нет возможности, поэтому еще проблема с внесением урл карты сайта для поддоменов, сейчас роботс автоматический разрешающий индексировать все для всех пауков и автоматически размещает карту сайта для каждого поддомена в нем.)

Спасибо!

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

вот мой роботs
Насчет субдоменов не знаю-не практиковал такого)
Я вот посмотрел, у вас теги и фиды коментариев все равно гогл индексирует smile:mad:
viktor2011, потому что закрыл недавно и сопли еще остались и эти страницы, со временем выпасть должны)
А яндекс индексирует page,

А какие последствия дублирования контента сайта, тем же сайтом? Т.Е. если все же оставить разрешение на индексацию всего на сайте?
В целом вроде бы разобрался, залил роботс на каждый поддомен, спасибо за шаблон роботса!

Подскажите еще нужно ли поддомену прописывать директиву host типа aaa.aaaa.aa или на основной домен типо aaaa.aa?

Спасибо! smile:confused:
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
20:29 Adsense личный опыт 
20:00 Ошибка при вставке скрипта - "Браузер Chrome обнаружил на этой странице необычный код и заблокировал его" 
19:05 Может кто подскажет 
18:51 Рекламная сеть яндекса личный опыт 
17:52 Нетематические разделы на сайте - мешают или помогают? 
17:31 Ошибка 500 после обновления WP 
16:53 Как переехать на другой движок и сохранить позиции 
20:20 Статейное продвижение ваших сайтов 
19:17 RIP/Создание сайтов - минимальные цены 
17:57 Профессиональное ведение каналов в Ютубе, Белое продвижение, Услуги в соц. сетях 
17:33 Продам 8 сайтов в ГГЛ 
17:29 100 000 подписчиков за 4000 рублей 
17:04 Ищу работу рерайтером\копирайтером, наполнение сайтов и др. 
16:30 Разработка качественных сайтов по доступной стоимости. 
20:31 Активация windows 7 
16:59 Провайдер который вышибает слезу 
15:57 Зелёный замочек в SSL 
15:09 Осенний чат на форуме / говорите о своём 
14:57 Ищем вебмастеров с высоким тИЦ 
13:42 Конференция Blockchain Life 2017 (26 сентября, г. Санкт-Петербург) 
11:04 Трудовой стаж для фрилансеров в Украине?