Помогите пожалуйста настоить robots.txt

Помогите пожалуйста настоить robots.txt, Я пока новичок и не понимаю как правильно настроить robots.txt

Сообщений: 8 Регистрация: Апр 2014

22 Апреля 2014 12:54

Яндекс не идентифицирует мой сайт уже долгое время я думаю это из за robots.txt Он на данный момент выгладит так
User-Agent: *
Disallow:
Host: pro100azart.pw
Sitemap: pro100azart.pw/sitemap.xml
Но сайт не хочет индексироваться
Кто подскажет как сделать чтобы робот не индексировал партнерские ссылки
И что надо изменить в роботе буду очень благодарен!!

Влад Мищенко

Сообщений: 7178 Регистрация: Дек 2011

22 Апреля 2014 13:04

Движок сайта? и еще много вопросов нужно, Вы лучше подробней опишите сайт, и в роботс нужно закрывать старницы которые не должны попадать в поиск (админка, комменты, и прочая лажа, а так же страницы дублирующие контент) подробней тут _http://help.yandex.ru/webmaster/controlling-robot/robots-txt.xml

50 т.р. в месяц на киносайте РЕГИСТРАЦИЯ - обучаю рефералов, в ЛС

Лучшая партнерка - 25 т.р. в месяц РЕГИСТРАЦИЯ

Качественные дешевые статьи КУПИТЬ

Aleksandr Shutov

Сообщений: 8 Регистрация: Апр 2014

22 Апреля 2014 13:11

Сайт создан в www.reg.ru хостинг я использую их бесплатный.Я самый юмор не знаю как прописать запрет идентификации в робот
Как я понял запрещает Disallow:[FONT=Tahoma, Arial, Helvetica, sans-serif]А что дальше писать я на знаю)[/FONT]

Aleksandr Shutov

Сообщений: 8 Регистрация: Апр 2014

22 Апреля 2014 13:16

Как мне сделать например чтобы он не индексировал это rating.openstat.ru/site/2352375

seoledi

Сообщений: 314 Регистрация: Июл 2011

22 Апреля 2014 19:25

Могу помочь, стучитесь в личку.

Консультации по СЕО: помогу сделать СДЛ, помогу избавиться от фильтра. Стучитесь в личку!

Шикарный VPN

Banned

Сообщений: 678 Регистрация: Мар 2014

22 Апреля 2014 21:00

Цитата
User-agent: * Disallow: Sitemap: http://domain.name/sitemap.xml

Такой должОн быть роботс)

продам подпись : 5$ / месяц

Дмитрий Глущенко

Сообщений: 232 Регистрация: Май 2012

22 Апреля 2014 22:31

User-agent: * - для всех роботов
Disallow: /index.html - закрывает ссылку от поисковиков
Disallow: /admin.html - закрывает ссылку от поисковиков
Disallow: /mail.html - закрывает ссылку от поисковиков
Sitemap: http://site.com/sitemap.xml - адрес карты сайта для робота
Host: www.site.com - главное зеркало сайта

Это пример.

Цитата
Aleksandr Shutov пишет: rating.openstat.ru/site/2352375

Это ваш сайт?

Дмитрий Глущенко

Сообщений: 232 Регистрация: Май 2012

22 Апреля 2014 22:36

Ой мамочки, это конечно не мое дело, но всё же... зачем вам так много счетчиков на сайте?

Максим

Сообщений: 2212 Регистрация: Мар 2013

22 Апреля 2014 22:45

Цитата
Дмитрий Глущенко пишет: Ой мамочки, это конечно не мое дело, но всё же... зачем вам так много счетчиков на сайте?

Наверное что бы точнее было, среднее арифметическое считает, что бы узнать точную посещаемость)

Aleksandr Shutov

Сообщений: 8 Регистрация: Апр 2014

#10

23 Апреля 2014 02:23

Цитата

Максим пишет:

Цитата
Дмитрий Глущенко пишет: Ой мамочки, это конечно не мое дело, но всё же... зачем вам так много счетчиков на сайте?

Наверное что бы точнее было, среднее арифметическое считает, что бы узнать точную посещаемость)

Я же говорю я нуб пока еще ))) Как мне решить проблему с яндеком?

Aleksandr Shutov

Сообщений: 8 Регистрация: Апр 2014

#11

23 Апреля 2014 02:25

Цитата

Дмитрий Глущенко пишет:
User-agent: * - для всех роботов
Disallow: /index.html - закрывает ссылку от поисковиков
Disallow: /admin.html - закрывает ссылку от поисковиков
Disallow: /mail.html - закрывает ссылку от поисковиков
Sitemap: site.com/sitemap.xml - адрес карты сайта для робота
Host: www.site.com - главное зеркало сайта

Это пример.

Цитата
Aleksandr Shutov пишет: rating.openstat.ru/site/2352375

Это ваш сайт?

Сайт pro100azart.pw/

Aleksandr Shutov

Сообщений: 8 Регистрация: Апр 2014

#12

23 Апреля 2014 02:25

Цитата
seoledi пишет: Могу помочь, стучитесь в личку.

Написал

Aleksandr Shutov

Сообщений: 8 Регистрация: Апр 2014

#13

24 Апреля 2014 00:03

Aleksandr Shutov,

Цитата

Aleksandr Shutov пишет:

Цитата

Цитата
Aleksandr Shutov пишет: rating.openstat.ru/site/2352375

Это ваш сайт?

Сайт pro100azart.pw/

Цитата
Да совершенно верно rating.openstat.ru/site/2352375 мой сайт

Цитата
Мне получается надо прописать

User-agent: *
Disallow: /index.html
Disallow: /admin.html
Disallow: /mail.html
Sitemap: pro100azart.pw/sitemap.xml
Host: pro100azart.pw[COLOR=#373737]Так?[/COLOR]

Похожие темы:

06.09.2021 16:24	Помогите с каноническими, не каноническими...
15.11.2018 22:19	Помогите с сайтом
06.11.2018 15:10	Помогите понять цифры из яндекс директа
29.10.2018 16:59	Помогите решить проблему в Яндексе
13.10.2018 22:44	Вопрос по контенту, помогите плиз

Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)

Новые темы	Объявления	Свободное общение
21:31 Всем привет! 20:37 Яндекс-ап 20 марта и похороны ChatGPT, Claude и Gemini. Считаем убытки 14:06 Слипание слов в блоке 14:02 APK на паузе. Google убивает быстрый конверт 11:34 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 19:37 Xrumer-полезный софт или нет? 17:26 AI под надзором. Минцифры готовят клеймо для контента	23:14 E-currency.exchange — ваш помощник в мире обменов 22:34 UltraXchina: Современный сервис обмена Alipay, USDT, Наличные 17:33 Продам жирный аккаунт fl.ru 17:25 Подключение к API слотов! Connecting to the slots API! 14:10 Авито аккаунты ИП и физик 13:34 AllCharge.online. Современный, быстрый и надёжный обменник 13:14 TETChange-Обменник криптовалют	21:02 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 17:45 молодильные яблоки и живая вода 15:04 Сайты Рунета 01:42 Точные прогнозы на футбол 08:52 Чак Норрис ушел - 19 марта 2026, 86 лет, семья подтвердила 20:23 Панель Кнопки соцсетей 14:03 Огородники