Помогите настроить robots.txt для двуязычного сайта
Страницы: 1
Помогите настроить robots.txt для двуязычного сайта
Здравствуйте уважаемые вебмастера!
Очень нужна ваша помощь в настройке файла robots.txt для двуязычного сайта в которого второй язык сделан в директории. Тоесть на основной движок еще установлен один для второго языка. ПОлучается вот что: site.com/ru/
Карты сайта site.com/sitemap.xml и site.com/ru/sitemap.xml нормально добавились в гугл и яшу. Вот теперь постает вопрос с robots.txt, что там нужно дописать? Просто роботы гугл и яндекс не заходят на страницы и посты на втором языке сайта.
Правильным ли будет просто продублировать записи в данном файле, только в начало добавить адрес директории, в результать получится что-то такое:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /ru/cgi-bin
Disallow: /ru/wp-admin
Disallow: /ru/wp-includes
Життєво необхідний блог | Отличный VPS хостинг 5$/мес (512MB, 20GB SSD). При регистрации по ссылке 10$ в подарок!

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

Неужели никто никогда с таким не сталкивался? Дайте хоть какие-то рекомендации.
все очень просто - это никаму НЕИНТЕРЕСНО smile:D
- кроме тебя, разумеется

Ответ, на твой вопрос, прост:
если движок одик к одному, то как у тебя:
Цитата
Oleksandr Dadak пишет:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /ru/cgi-bin
Disallow: /ru/wp-admin
Disallow: /ru/wp-includes
Изменено: xmediasoft.ru - 16 Июня 2011 13:08
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
04:42 Рекламная сеть яндекса личный опыт 
04:26 Показ резервных объявлений 
04:24 Дубли страниц 
01:25 Закупка ссылок для лендинга. Стоит ли делать или нет? 
01:15 Перелинковка сайтов 
23:51 Использование Tor для продвижения сайта 
23:45 2017-01-16 АП Яндекса. 
02:49 что может быть с сайтом? 
01:43 Вакансии: Операторы и редакторы по обработке статей из вебархива 
01:29 Размещение ссылок на сайте с ТИЦ 1 100 PR 6 
01:00 Мультиязычный download сайт 
21:45 По настоящему, комплексное продвижение сайтов 
21:24 Старый варезник в сапе под развитие 
21:23 Кто оценит стоимость? 
00:09 Навеянные форумом картинки 
22:17 Работа для детей ) 
20:27 Роскомнадзор ограничил доступ к крупнейшему в Восточной Европе VPN-сервису 
20:14 Твиттер 
20:12 Программа для регистрации в каталогах. 
19:13 Появился список самых опасных паролей 2016 года 
16:00 Проблема с телефоном