Robots.txt
Страницы: 1
Robots.txt
Подскажите обязательно ли прописывать файл роботс или можно оставить разрешение индексировать все для вордпресс?

Если не трудно, напишите robots.txt для вордпрес 3.1

И еще вопрос, вот я создал файл роботс в корне домена, будет ли он расспростроняться на поддомены созданные по технологии мультисайт на вордпресс( эти суб домны не отображаются почему то на хостинге и прописать роботс на каждый нет возможности, поэтому еще проблема с внесением урл карты сайта для поддоменов, сейчас роботс автоматический разрешающий индексировать все для всех пауков и автоматически размещает карту сайта для каждого поддомена в нем.)

Спасибо!

Бесплатная контекстная реклама

вот мой роботs
Насчет субдоменов не знаю-не практиковал такого)
Я вот посмотрел, у вас теги и фиды коментариев все равно гогл индексирует smile:mad:
viktor2011, потому что закрыл недавно и сопли еще остались и эти страницы, со временем выпасть должны)
А яндекс индексирует page,

А какие последствия дублирования контента сайта, тем же сайтом? Т.Е. если все же оставить разрешение на индексацию всего на сайте?
В целом вроде бы разобрался, залил роботс на каждый поддомен, спасибо за шаблон роботса!

Подскажите еще нужно ли поддомену прописывать директиву host типа aaa.aaaa.aa или на основной домен типо aaaa.aa?

Спасибо! smile:confused:
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
07:56 Апдейт 27 июня 2017 
06:34 Яндекс каталог - усыхает? 
06:32 29 июня текстовый апдейт Яндекса 
02:51 Пожалуйста помогите: низкая скорость загрузки сайта 
02:47 Адсенс спер 1500$ 
02:14 Аптейт тИЦ от 17 мая 2017 года 
23:01 Trastik - кто что скажет, ссылки там путёвые? 
06:49 Базовый SEO-Аудит за 1000 руб 
04:11 хостинг игровых серверов 
03:53 Качественный прогон по трастовым сайтам и форумам. Рост ТИЦ, посещаемости и позиций. Множество отзывов, недорого + скидки 
02:50 Анонимные, быстрые прокси и VPN сервер 
01:31 Предоставляю услуги по верстке, программированию и поддержке ваших сайтов 
00:34 Комплексная раскрутка сайтов. Качественные услуги, прогоны и прочее. (3000+ отзывов) 
23:37 Семантическое ядро с ручной группировкой и НК ключами 
03:18 Всё о крипто-валюте 
03:06 Продвинуть сайт за 2 месяца 
23:41 Первый документальный фильм о SEO ( переведен на русский ) 
18:46 Что скажите про Сеопульт? 
14:49 Зарабатываем криптовалюту, слушая любимое радио 
10:32 title и вкладка браузера 
09:18 Как выйти из под фильтра fred ?