Помогите настроить robots.txt для двуязычного сайта
Страницы: 1
Помогите настроить robots.txt для двуязычного сайта
Здравствуйте уважаемые вебмастера!
Очень нужна ваша помощь в настройке файла robots.txt для двуязычного сайта в которого второй язык сделан в директории. Тоесть на основной движок еще установлен один для второго языка. ПОлучается вот что: site.com/ru/
Карты сайта site.com/sitemap.xml и site.com/ru/sitemap.xml нормально добавились в гугл и яшу. Вот теперь постает вопрос с robots.txt, что там нужно дописать? Просто роботы гугл и яндекс не заходят на страницы и посты на втором языке сайта.
Правильным ли будет просто продублировать записи в данном файле, только в начало добавить адрес директории, в результать получится что-то такое:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /ru/cgi-bin
Disallow: /ru/wp-admin
Disallow: /ru/wp-includes
Життєво необхідний блог | Отличный VPS хостинг 5$/мес (512MB, 20GB SSD). При регистрации по ссылке 10$ в подарок!

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

Неужели никто никогда с таким не сталкивался? Дайте хоть какие-то рекомендации.
все очень просто - это никаму НЕИНТЕРЕСНО smile:D
- кроме тебя, разумеется

Ответ, на твой вопрос, прост:
если движок одик к одному, то как у тебя:
Цитата
Oleksandr Dadak пишет:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /ru/cgi-bin
Disallow: /ru/wp-admin
Disallow: /ru/wp-includes
Изменено: xmediasoft.ru - 16 Июня 2011 13:08
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
12:28 Можни ли заработать на Эдсенс на малопосещаемом сайте? 
12:26 Апдейт 30.09.16 
12:24 Вопрос по рекламе Google Adsense. 
12:10 Google Penguin 4.0: сайты смогут выйти из-под фильтра в ближайшие дни 
11:55 на чем можно создать форум? 
11:12 Собственная кнопка поделится для JomSocial 
11:00 Весёлый опыт с Вебартексом 
14:06 Программ Reg Organizer с лицензионным ключом. 
14:05 Занимаюсь продвижением сайтов по доступным ценам. 
13:44 Качественный прогон по трастовым сайтам и форумам. Рост ТИЦ, посещаемости и позиций. Множество отзывов, недорого + скидки 
13:32 Куплю пару сайтов бюджет до 5000 
13:20 Статейный прогон, цена 20$ 
12:29 Обмен ссылками 
12:22 Ссылки на сайтах с полезными советами 
12:24 Халява, почти. Текст более 3 млн.сим., ~200 тИЦ, до 10 тыс.твиттер прогон (значения указаны суммарно) БЕСПЛАТНО 
12:05 Как может повлиять большое количество ссылок на странице 
11:42 ZerocooL 
11:25 В чём ошибка? Почему люди не хотят заработать ~24 500 руб.?) 
11:14 Нужен баннер для популяризации раздела "Интересные темы" (безвозмездно) 
10:59 Помогите в поиске нужного сборника музыки. Есть ли вообще такое? 
10:42 Nintendo вновь запустит в продажу оригинальную приставку Dendy