Прошу помощи с robots.txt
Страницы: 1
Прошу помощи с robots.txt
Здравствуйте,помогите, пожалуйста составить правильный файл robots.txt для сайта жены : www.kids-help.ru 
сайт давно был в запустении, сейчас начал им заниматься. Гугл начал индексировать сразу, а яндекс не хочет. Возможно проблема в robots.txt
сейчас он в таком виде (так понимаю по умолчанию):


User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/


Он полностью корректен, или его можно доработать (в яндексе в индексе всего 3 страницы)? Робот страницы добавляет, но в индекс не попадают...
Изменено: aglinsky - 3 Февраля 2014 20:13
Вы не указали версию движка. Вот пример для 1.5

Код
 User-agent: *

Disallow: /administrator/

Disallow: /cache/

Disallow: /components/

Disallow: /includes/

Disallow: /installation/

Disallow: /language/

Disallow: /libraries/

Disallow: /logs/

Disallow: /media/

Disallow: /modules/

Disallow: /plugins/

Disallow: /templates/

Disallow: /tmp/

Disallow: /xmlrpc/

Disallow: /component/

Disallow: /ssylki/

Disallow: /poll-results/

Disallow: /contact

Disallow: /view-your

Disallow: /view-detail-of-order

Disallow: /vmchk/

Disallow: /*vmchk

Disallow: /otpravit-soobschenie/

Disallow: /view-your-cart-content

Disallow: /javascript

Disallow: /*feed/

Disallow: /*poisk

Disallow: /index.php

Disallow:/index2.php

Disallow: /*index.php

Disallow: /*?

Disallow: /*.xls$

Disallow: /*.doc$

Disallow: /*.pdf$

Disallow: /*.rtf$

Disallow: /*.zip$

Disallow: /*.rar$

Disallow: /*.css$

Disallow: /*.js$

Disallow: /*.htm$

Disallow: /*.html$

Allow: /

Host: ваш сайт.ru

Sitemap: http://ваш сайт.ru/Sitemap.xml


Ну и смотря какие урлы стоят по отношениям к строчкам
 Disallow: /index.php
Disallow:/index2.php
Disallow: /*index.php
И
Disallow: /*.htm$
Disallow: /*.html$
Изменено: The Undertaker - 3 Февраля 2014 21:01
Уникальный контент выбирайте »тут« за недорого
на первый взгляд, без знания движка, нужно убрать
Disallow: /images/
Disallow: /media/
ⓥ Три колечка цепляются друг за друга: ненависть от гнева, гнев от гордости
Парсер контента для Wordpress
Записник WP http://wpcodeblog.wordpress.com/
Штырлиц, ну на счет images в большинстве случаев согласен. А вот media зачем отклывать - там же стандартные картинки от Joomla+модулей.
Да, версия Joomla 1.5.26
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
13:54 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
14:50 Индексация страниц 
12:36 У кого новостник, дайте пару советов плиз 
13:53 AviTool - мощный инструмент для автоматизации работы с Avito 
17:01 Absence в Армении 
23:19 Ребята подскажите какими сервисами и прогами вы пользуетесь для SEO продвижения? 
14:50 Какую выбрать тему/нишу для сайта? 
22:45 Обменник криптовалюты OnlyCrypto 
21:36 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
20:19 Cryptonet.pro - быстрый и надежный обмен электронных валют! 
16:18 swapsfera.com 
14:35 garantcoin.io - быстрый и надёжный сервис обмена криптовалюты GarantCoin 
13:20 GoodsMoney.io 
12:50 SpaceSwap.cc - Быстрый и надежный обменник криптовалют 
19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор 
22:08 Накрутка поисковых подсказок 
05:04 Точные прогнозы на футбол 
14:01 Union Pharm - топовая фарма-партнерка для профессионалов! 
10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 
12:23 150+ хакерских поисковых систем и инструментов 
17:41 Стряхнуть обыденность - об Агасфере