Robots.txt
Страницы: 1
Robots.txt
Подскажите обязательно ли прописывать файл роботс или можно оставить разрешение индексировать все для вордпресс?

Если не трудно, напишите robots.txt для вордпрес 3.1

И еще вопрос, вот я создал файл роботс в корне домена, будет ли он расспростроняться на поддомены созданные по технологии мультисайт на вордпресс( эти суб домны не отображаются почему то на хостинге и прописать роботс на каждый нет возможности, поэтому еще проблема с внесением урл карты сайта для поддоменов, сейчас роботс автоматический разрешающий индексировать все для всех пауков и автоматически размещает карту сайта для каждого поддомена в нем.)

Спасибо!

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

вот мой роботs
Насчет субдоменов не знаю-не практиковал такого)
Я вот посмотрел, у вас теги и фиды коментариев все равно гогл индексирует smile:mad:
viktor2011, потому что закрыл недавно и сопли еще остались и эти страницы, со временем выпасть должны)
А яндекс индексирует page,

А какие последствия дублирования контента сайта, тем же сайтом? Т.Е. если все же оставить разрешение на индексацию всего на сайте?
В целом вроде бы разобрался, залил роботс на каждый поддомен, спасибо за шаблон роботса!

Подскажите еще нужно ли поддомену прописывать директиву host типа aaa.aaaa.aa или на основной домен типо aaaa.aa?

Спасибо! smile:confused:
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
21:03 Гугл выдаёт другой титл 
20:58 Оцените сайт 
20:02 Засчитываются ли клики с внутренних, закрытых страниц 
19:52 как прописать метатеги и кейвордс на вордпресс? 
19:30 Перенести сайт В Яндекс новостях с Вордпресса на ДЛЕ 
18:28 на чем можно создать форум? 
18:08 Весёлый опыт с Вебартексом 
20:06 Продвижение сайтов «прогоны xrumer, статейный» большой выбор тарифов 
19:44 Блог полезных советов 
19:42 Программ Reg Organizer с лицензионным ключом. 
19:27 Куплю ненужный новостной сайт 
18:44 Команда постеров 
17:59 Статья или ссылка с сайта 40тиц футбольная тематика 
17:01 Прогон по твиттеру, постинг в 1500 аккунтов, ускорение индексации и переиндексация сайтов, сателлитов, дорвеев и ссылок с прогонов 
21:00 ZerocooL 
20:58 Халява, почти. Текст более 3 млн.сим., ~200 тИЦ, до 10 тыс.твиттер прогон (значения указаны суммарно) БЕСПЛАТНО 
19:05 Nintendo вновь запустит в продажу оригинальную приставку Dendy 
19:03 Помогите доворовать дизайн мобильной версии плз 
12:05 Как может повлиять большое количество ссылок на странице 
11:25 В чём ошибка? Почему люди не хотят заработать ~24 500 руб.?) 
11:14 Нужен баннер для популяризации раздела "Интересные темы" (безвозмездно)