Помогите настроить robots.txt для двуязычного сайта
Страницы: 1
Помогите настроить robots.txt для двуязычного сайта
Здравствуйте уважаемые вебмастера!
Очень нужна ваша помощь в настройке файла robots.txt для двуязычного сайта в которого второй язык сделан в директории. Тоесть на основной движок еще установлен один для второго языка. ПОлучается вот что: site.com/ru/
Карты сайта site.com/sitemap.xml и site.com/ru/sitemap.xml нормально добавились в гугл и яшу. Вот теперь постает вопрос с robots.txt, что там нужно дописать? Просто роботы гугл и яндекс не заходят на страницы и посты на втором языке сайта.
Правильным ли будет просто продублировать записи в данном файле, только в начало добавить адрес директории, в результать получится что-то такое:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /ru/cgi-bin
Disallow: /ru/wp-admin
Disallow: /ru/wp-includes
Життєво необхідний блог | Отличный VPS хостинг 5$/мес (512MB, 20GB SSD). При регистрации по ссылке 10$ в подарок!

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

Неужели никто никогда с таким не сталкивался? Дайте хоть какие-то рекомендации.
все очень просто - это никаму НЕИНТЕРЕСНО smile:D
- кроме тебя, разумеется

Ответ, на твой вопрос, прост:
если движок одик к одному, то как у тебя:
Цитата
Oleksandr Dadak пишет:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /ru/cgi-bin
Disallow: /ru/wp-admin
Disallow: /ru/wp-includes
Изменено: xmediasoft.ru - 16 Июня 2011 13:08
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
07:41 24 июля текстовый апдейт Яндекса: индекс по 21 июля 
07:28 Bodyclick.net - рекламная партнерская сеть. 
06:49 Установить политику конфиденциальности и пользовательское соглашение на сайт (Битрикс) 
04:49 Ссылочная масса 
02:58 Нет трафика с Google - в чем проблема? 
21:28 Можно на сайте о ремонте квартир добавить раздел "ремонт бытовой техники"? 
20:24 Аптейт тИЦ от 17 мая 2017 года 
07:19 Копирайтинг, Рерайтинг, СЕО - от 80/1000 
05:31 SocksHub.net - proxy, которые подходят всем 
00:18 Составление Семантического Ядра для вашего сайта 
21:58 Домены Авиабилетов по 1500руб 
21:48 Качественный прогон Хрумером, Zennoposterом всего 10 WMZ, Большой опыт работы. Статьи, комментарии, профиля, гостевые. 
21:36 Дизайн: сайтов, баннеров, шапок, логотипов,оформление групп вконтакте 
20:37 Куплю игровой портал 
07:55 Переезд сайта на SSL (Полезно знать) 
05:55 Зерокул наказан за мошенничество 
00:48 Может изменить аккаунт? 
19:25 Велотренажёр дома? 
15:44 Свободные домены с ТИЦ - минимум 50 
11:11 Бесплатная графика! 
23:29 Какой фильм посмотреть сегодня вечером?