Помогите настроить robots.txt для двуязычного сайта
Страницы: 1
Помогите настроить robots.txt для двуязычного сайта
Здравствуйте уважаемые вебмастера!
Очень нужна ваша помощь в настройке файла robots.txt для двуязычного сайта в которого второй язык сделан в директории. Тоесть на основной движок еще установлен один для второго языка. ПОлучается вот что: site.com/ru/
Карты сайта site.com/sitemap.xml и site.com/ru/sitemap.xml нормально добавились в гугл и яшу. Вот теперь постает вопрос с robots.txt, что там нужно дописать? Просто роботы гугл и яндекс не заходят на страницы и посты на втором языке сайта.
Правильным ли будет просто продублировать записи в данном файле, только в начало добавить адрес директории, в результать получится что-то такое:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /ru/cgi-bin
Disallow: /ru/wp-admin
Disallow: /ru/wp-includes
Життєво необхідний блог | Отличный VPS хостинг 5$/мес (512MB, 20GB SSD). При регистрации по ссылке 10$ в подарок!

Бесплатная контекстная реклама

Неужели никто никогда с таким не сталкивался? Дайте хоть какие-то рекомендации.
все очень просто - это никаму НЕИНТЕРЕСНО smile:D
- кроме тебя, разумеется

Ответ, на твой вопрос, прост:
если движок одик к одному, то как у тебя:
Цитата
Oleksandr Dadak пишет:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /ru/cgi-bin
Disallow: /ru/wp-admin
Disallow: /ru/wp-includes
Изменено: xmediasoft.ru - 16 Июня 2011 13:08
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
22:50 Апдейт 26 февраля 2017 года 
22:35 где ошибка Parse error: syntax error, unexpected 'VALUES' (T_STRING) in E:\OpenServer\domains\test.ru\mysql NSERT.php on line 14 
22:29 Позиция в поисковой выдаче 
22:27 Сайт упал в позициях яндекса 
21:54 WebSite или WebPage? 
20:41 Рекламная сеть яндекса личный опыт 
20:06 Заходы ботов, вредно ли это для сайта? 
21:49 Отличные русские домены под ваши проекты. Успейте приобрести по своей цене! 
21:34 Продам домен чувствуй.рф 
21:20 куплю сайты принятые в РСЯ 
21:02 Сколько стоит аккаунт seosprint? 
20:52 Продам сайт с тИЦ 10 (софт, программы) 
20:49 Я новичек помогие оцените мой сайт 
19:57 Высокое качество по доступным ценам 
21:24 Госзакупки - продления домена за 100 т.р. 
21:09 2domains совсем обнаглели. Куда свалить? 
20:09 Реф. ссылку надо обязательно обойти и зарегистрироваться по прямой! 
17:14 продолжение романа Пелевина поколение "П" 
13:48 отзывы constructiontop100plus.ru / Топ 100 сайтов о строительстве - прям крутотенюшка-крутота!) 
13:17 Грамотное Сео описание категорий для сайта Фотографа 
12:04 Надо с сервака парсить сайт один с разных IP