Прошу помощи с robots.txt

Сообщений: 2 Регистрация: Янв 2014

3 Февраля 2014 20:13

Здравствуйте,помогите, пожалуйста составить правильный файл robots.txt для сайта жены : www.kids-help.ru
сайт давно был в запустении, сейчас начал им заниматься. Гугл начал индексировать сразу, а яндекс не хочет. Возможно проблема в robots.txt
сейчас он в таком виде (так понимаю по умолчанию):

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/

Он полностью корректен, или его можно доработать (в яндексе в индексе всего 3 страницы)? Робот страницы добавляет, но в индекс не попадают...

Изменено: aglinsky - 3 Февраля 2014 20:13

The Undertaker

Сообщений: 1526 Регистрация: Мар 2011

3 Февраля 2014 20:58

Вы не указали версию движка. Вот пример для 1.5

Код

 User-agent: *

Disallow: /administrator/

Disallow: /cache/

Disallow: /components/

Disallow: /includes/

Disallow: /installation/

Disallow: /language/

Disallow: /libraries/

Disallow: /logs/

Disallow: /media/

Disallow: /modules/

Disallow: /plugins/

Disallow: /templates/

Disallow: /tmp/

Disallow: /xmlrpc/

Disallow: /component/

Disallow: /ssylki/

Disallow: /poll-results/

Disallow: /contact

Disallow: /view-your

Disallow: /view-detail-of-order

Disallow: /vmchk/

Disallow: /*vmchk

Disallow: /otpravit-soobschenie/

Disallow: /view-your-cart-content

Disallow: /javascript

Disallow: /*feed/

Disallow: /*poisk

Disallow: /index.php

Disallow:/index2.php

Disallow: /*index.php

Disallow: /*?

Disallow: /*.xls$

Disallow: /*.doc$

Disallow: /*.pdf$

Disallow: /*.rtf$

Disallow: /*.zip$

Disallow: /*.rar$

Disallow: /*.css$

Disallow: /*.js$

Disallow: /*.htm$

Disallow: /*.html$

Allow: /

Host: ваш сайт.ru

Sitemap: http://ваш сайт.ru/Sitemap.xml

Ну и смотря какие урлы стоят по отношениям к строчкам
Disallow: /index.php
Disallow:/index2.php
Disallow: /*index.php
И
Disallow: /*.htm$
Disallow: /*.html$

Изменено: The Undertaker - 3 Февраля 2014 21:01

Уникальный контент выбирайте »тут« за недорого

Штырлиц

Сообщений: 858 Регистрация: Апр 2011

3 Февраля 2014 21:39

на первый взгляд, без знания движка, нужно убрать
Disallow: /images/
Disallow: /media/

ⓥ Три колечка цепляются друг за друга: ненависть от гнева, гнев от гордости
☠ Парсер контента для Wordpress
Записник WP http://wpcodeblog.wordpress.com/

WSairus

Сообщений: 1432 Регистрация: Июн 2010

3 Февраля 2014 22:11

Штырлиц, ну на счет images в большинстве случаев согласен. А вот media зачем отклывать - там же стандартные картинки от Joomla+модулей.

Партнёрки для заработка!

aglinsky Сообщений: 2 Регистрация: Янв 2014	#5 3 Февраля 2014 22:17 Да, версия Joomla 1.5.26

Новые темы	Объявления	Свободное общение
23:46 adsense в 2026: кто реально выводит копейку через киргизию? 22:09 Как поймать партнера на «сливе» бренда? 22:05 Очередной взлом через плагин. Хакеры получают админку без пароля 20:40 Мошенники-копирайтеры 17:52 Подскажите ТОП 5-10 ИМ с современным дизайном? 17:42 Биржи ссылок в 2026 - реально ли новичку с одним сайтом поднять копейку? 17:38 Яндекс Нейро и выдача в 2026 - остались ли лазейки для маленьких сайтов?	23:48 GoodsMoney.io 23:46 Volna.money 22:37 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 18:14 Bardo — Бюро развития и координации цифровых операций. 17:32 Вериф аккаунты АВИТО + платежи 13:09 Продажа аккаунтов HH.RU 12:03 garantcoin.io - быстрый и надёжный сервис обмена криптовалюты GarantCoin	22:13 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 19:04 Какой фильм вы любите посмотреть перед сном? 19:03 О природе путешествий. 19:02 Огородники 01:47 Точные прогнозы на футбол 17:45 молодильные яблоки и живая вода 15:04 Сайты Рунета

Новые темы

Объявления

Свободное общение

23:46 adsense в 2026: кто реально выводит копейку через киргизию?
22:09 Как поймать партнера на «сливе» бренда?
22:05 Очередной взлом через плагин. Хакеры получают админку без пароля
20:40 Мошенники-копирайтеры
17:52 Подскажите ТОП 5-10 ИМ с современным дизайном?
17:42 Биржи ссылок в 2026 - реально ли новичку с одним сайтом поднять копейку?
17:38 Яндекс Нейро и выдача в 2026 - остались ли лазейки для маленьких сайтов?

23:48 GoodsMoney.io
23:46 Volna.money
22:37 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств
18:14 Bardo — Бюро развития и координации цифровых операций.
17:32 Вериф аккаунты АВИТО + платежи
13:09 Продажа аккаунтов HH.RU
12:03 garantcoin.io - быстрый и надёжный сервис обмена криптовалюты GarantCoin

22:13 8 марта: желаю аптайма 99.9% и e-e-a-t без локов
19:04 Какой фильм вы любите посмотреть перед сном?
19:03 О природе путешествий.
19:02 Огородники
01:47 Точные прогнозы на футбол
17:45 молодильные яблоки и живая вода
15:04 Сайты Рунета

06.12.2014 10:05	Опять прошу помощи...
30.08.2014 00:41	Как заменить шапку в шаблоне beez red на картинку??? Очень срочно, прошу помочь)
09.02.2014 21:29	Прошу помочь советом!
25.09.2013 18:18	Прощу помощи! Плагин фотогалереи Phoca Gallery. Возникла проблема.