Помогите настроить robots.txt для двуязычного сайта
Страницы: 1
Помогите настроить robots.txt для двуязычного сайта
Здравствуйте уважаемые вебмастера!
Очень нужна ваша помощь в настройке файла robots.txt для двуязычного сайта в которого второй язык сделан в директории. Тоесть на основной движок еще установлен один для второго языка. ПОлучается вот что: site.com/ru/
Карты сайта site.com/sitemap.xml и site.com/ru/sitemap.xml нормально добавились в гугл и яшу. Вот теперь постает вопрос с robots.txt, что там нужно дописать? Просто роботы гугл и яндекс не заходят на страницы и посты на втором языке сайта.
Правильным ли будет просто продублировать записи в данном файле, только в начало добавить адрес директории, в результать получится что-то такое:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /ru/cgi-bin
Disallow: /ru/wp-admin
Disallow: /ru/wp-includes
Життєво необхідний блог | Отличный VPS хостинг 5$/мес (512MB, 20GB SSD). При регистрации по ссылке 10$ в подарок!

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

Неужели никто никогда с таким не сталкивался? Дайте хоть какие-то рекомендации.
все очень просто - это никаму НЕИНТЕРЕСНО smile:D
- кроме тебя, разумеется

Ответ, на твой вопрос, прост:
если движок одик к одному, то как у тебя:
Цитата
Oleksandr Dadak пишет:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /ru/cgi-bin
Disallow: /ru/wp-admin
Disallow: /ru/wp-includes
Изменено: xmediasoft.ru - 16 Июня 2011 13:08
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
00:04 Авто обмен ссылками с сайтами от Тиц 10 
23:52 Сайт падает в выдаче яндекса, теперь совсем упал! 
23:28 Adsense личный опыт 
23:23 на чем можно создать форум? 
22:11 Битрикс малый бизнес за 25к 
21:54 DreamCash.tl - заработок на онлайн-видео. До 95% отчислений, отличный конверт! 
19:54 Апдейт 27.09.16 
01:57 Куплю сайт на музыкальной тематике с модулями для автонаполнения(парсеры) 
00:10 Программа для ддос атак. 
23:57 Сервис по YouTube, Вконтакте, Twitter, Instagram, Facebook, G+, ОД 
23:48 Куплю сайты Download тематики 
23:25 Комплексная раскрутка сайтов. Качественные услуги, прогоны и прочее. (2000+ отзывов) 
22:33 Куплю игровые сайты, можно несколько сразу. 
22:31 Пишу уникальные тексты - ищу постоянку - удаленно! 
00:20 Что за внешние ссылки 
23:31 ZerocooL 
22:10 Халява, почти. Текст более 3 млн.сим., ~200 тИЦ, до 10 тыс.твиттер прогон (значения указаны суммарно) БЕСПЛАТНО 
19:57 В чём ошибка? Почему люди не хотят заработать ~24 500 руб.?) 
18:44 Получение контента бесплатно 
17:49 "Блогосфера" отторгается? 
17:12 Нужно 800 рублей яндексденег!