Помогите пожалуйста настоить robots.txt

Помогите пожалуйста настоить robots.txt, Я пока новичок и не понимаю как правильно настроить robots.txt

Сообщений: 8 Регистрация: Апр 2014

22 Апреля 2014 12:54

Яндекс не идентифицирует мой сайт уже долгое время я думаю это из за robots.txt Он на данный момент выгладит так
User-Agent: *
Disallow:
Host: pro100azart.pw
Sitemap: pro100azart.pw/sitemap.xml
Но сайт не хочет индексироваться
Кто подскажет как сделать чтобы робот не индексировал партнерские ссылки
И что надо изменить в роботе буду очень благодарен!!

Влад Мищенко

Сообщений: 7178 Регистрация: Дек 2011

22 Апреля 2014 13:04

Движок сайта? и еще много вопросов нужно, Вы лучше подробней опишите сайт, и в роботс нужно закрывать старницы которые не должны попадать в поиск (админка, комменты, и прочая лажа, а так же страницы дублирующие контент) подробней тут _http://help.yandex.ru/webmaster/controlling-robot/robots-txt.xml

50 т.р. в месяц на киносайте РЕГИСТРАЦИЯ - обучаю рефералов, в ЛС

Лучшая партнерка - 25 т.р. в месяц РЕГИСТРАЦИЯ

Качественные дешевые статьи КУПИТЬ

Aleksandr Shutov

Сообщений: 8 Регистрация: Апр 2014

22 Апреля 2014 13:11

Сайт создан в www.reg.ru хостинг я использую их бесплатный.Я самый юмор не знаю как прописать запрет идентификации в робот
Как я понял запрещает Disallow:[FONT=Tahoma, Arial, Helvetica, sans-serif]А что дальше писать я на знаю)[/FONT]

Aleksandr Shutov

Сообщений: 8 Регистрация: Апр 2014

22 Апреля 2014 13:16

Как мне сделать например чтобы он не индексировал это rating.openstat.ru/site/2352375

seoledi

Сообщений: 314 Регистрация: Июл 2011

22 Апреля 2014 19:25

Могу помочь, стучитесь в личку.

Консультации по СЕО: помогу сделать СДЛ, помогу избавиться от фильтра. Стучитесь в личку!

Шикарный VPN

Banned

Сообщений: 678 Регистрация: Мар 2014

22 Апреля 2014 21:00

Цитата
User-agent: * Disallow: Sitemap: http://domain.name/sitemap.xml

Такой должОн быть роботс)

продам подпись : 5$ / месяц

Дмитрий Глущенко

Сообщений: 232 Регистрация: Май 2012

22 Апреля 2014 22:31

User-agent: * - для всех роботов
Disallow: /index.html - закрывает ссылку от поисковиков
Disallow: /admin.html - закрывает ссылку от поисковиков
Disallow: /mail.html - закрывает ссылку от поисковиков
Sitemap: http://site.com/sitemap.xml - адрес карты сайта для робота
Host: www.site.com - главное зеркало сайта

Это пример.

Цитата
Aleksandr Shutov пишет: rating.openstat.ru/site/2352375

Это ваш сайт?

Дмитрий Глущенко

Сообщений: 232 Регистрация: Май 2012

22 Апреля 2014 22:36

Ой мамочки, это конечно не мое дело, но всё же... зачем вам так много счетчиков на сайте?

Максим

Сообщений: 2212 Регистрация: Мар 2013

22 Апреля 2014 22:45

Цитата
Дмитрий Глущенко пишет: Ой мамочки, это конечно не мое дело, но всё же... зачем вам так много счетчиков на сайте?

Наверное что бы точнее было, среднее арифметическое считает, что бы узнать точную посещаемость)

Aleksandr Shutov

Сообщений: 8 Регистрация: Апр 2014

#10

23 Апреля 2014 02:23

Цитата

Максим пишет:

Цитата
Дмитрий Глущенко пишет: Ой мамочки, это конечно не мое дело, но всё же... зачем вам так много счетчиков на сайте?

Наверное что бы точнее было, среднее арифметическое считает, что бы узнать точную посещаемость)

Я же говорю я нуб пока еще ))) Как мне решить проблему с яндеком?

Aleksandr Shutov

Сообщений: 8 Регистрация: Апр 2014

#11

23 Апреля 2014 02:25

Цитата

Дмитрий Глущенко пишет:
User-agent: * - для всех роботов
Disallow: /index.html - закрывает ссылку от поисковиков
Disallow: /admin.html - закрывает ссылку от поисковиков
Disallow: /mail.html - закрывает ссылку от поисковиков
Sitemap: site.com/sitemap.xml - адрес карты сайта для робота
Host: www.site.com - главное зеркало сайта

Это пример.

Цитата
Aleksandr Shutov пишет: rating.openstat.ru/site/2352375

Это ваш сайт?

Сайт pro100azart.pw/

Aleksandr Shutov

Сообщений: 8 Регистрация: Апр 2014

#12

23 Апреля 2014 02:25

Цитата
seoledi пишет: Могу помочь, стучитесь в личку.

Написал

Aleksandr Shutov

Сообщений: 8 Регистрация: Апр 2014

#13

24 Апреля 2014 00:03

Aleksandr Shutov,

Цитата

Aleksandr Shutov пишет:

Цитата

Цитата
Aleksandr Shutov пишет: rating.openstat.ru/site/2352375

Это ваш сайт?

Сайт pro100azart.pw/

Цитата
Да совершенно верно rating.openstat.ru/site/2352375 мой сайт

Цитата
Мне получается надо прописать

User-agent: *
Disallow: /index.html
Disallow: /admin.html
Disallow: /mail.html
Sitemap: pro100azart.pw/sitemap.xml
Host: pro100azart.pw[COLOR=#373737]Так?[/COLOR]

Похожие темы:

06.09.2021 16:24	Помогите с каноническими, не каноническими...
15.11.2018 22:19	Помогите с сайтом
06.11.2018 15:10	Помогите понять цифры из яндекс директа
29.10.2018 16:59	Помогите решить проблему в Яндексе
13.10.2018 22:44	Вопрос по контенту, помогите плиз

Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)

Новые темы	Объявления	Свободное общение
18:38 Ссылки с сайтов РБ 15:54 25.12.25 Апдейт Яндекс выдача 08:50 "Осталось 5 дн. до НГ" АПдейт Яндекс выдача 08:48 Стоит ли добавлять сайт в Rambler топ 100? 08:46 С наступающим Новым годом! АП Яндекс ИКС 23.12.2025 08:36 Супер-партнерка PayV: избранные офферы в топовых нишах 08:11 Волна банов за ПФ под Новый год? Кого еще зацепило?	16:14 xpoint.pro - быстрый и надежный криптообменный сервис Xpoint 16:05 Продвижение на Авито 14:59 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру 10:06 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 08:53 Размещение статей, ссылок и постовых на качественных ресурсах 08:22 Мониторинг обменников Сrypto-scout.io 04:17 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка	15:55 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 11:18 Стряхнуть обыденность - об Агасфере 23:08 Физические сим-карты 22:52 37 противникам прививок от COVID грозят уголовные дела 21:44 С юмором по жизни! 13:34 Компьютерная мышь 13:13 Куплю проигрышные букмекерские аккаунты