Вопрос по robots.txt
Страницы: 1
Вопрос по robots.txt
Помогите немного, я правильно настроил его?

User-agent: *
Disallow:

User-agent: Yandex
Disallow: /septik_helix.html
Host: -----(тут адрес главного сайта)

----
Нужно что бы индексировалось все кроме 1 страницы.

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

Дмитрий Глущенко,
вы запрещаете индексацию страницы /septik_helix.html только для яндекса?
Сори поправил. Всем) тобишь вот так. smile:)

User-agent: *
Disallow: /septik_helix.html

User-agent: Yandex
Disallow: /septik_helix.html
Host: kolodec-leningradka.ru
да, все верно
Можно вот так.
User-agent: *
Disallow: /septik_helix.html
Host: kolodec-leningradka.ru

необязательно юзер агент яндекс писать.
Спасибо. Просто там статья которая на 17 сайтах, а ее нужно обязательно выставить (требование было выставлено)

P.S. Тему можно закрывать... smile:)
f1rstblood ну это мои прихоти)) smile:D
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
10:46 Adsense личный опыт 
09:25 Рекламная сеть яндекса личный опыт 
08:50 Яндекс тИЦ 16.02.2017 
07:03 Апдейт 26 февраля 2017 года 
01:27 Сервис анализа сайтов 
00:05 Сайт упал в позициях яндекса 
22:35 где ошибка Parse error: syntax error, unexpected 'VALUES' (T_STRING) in E:\OpenServer\domains\test.ru\mysql NSERT.php on line 14 
10:11 Качественный прогон Хрумером всего 10 WMZ 
10:10 Подними свой сайт в топ 
09:47 Сколько стоит аккаунт seosprint? 
09:20 Пишу королевский контент! Не верите? Проверьте! 
08:55 Списки доменов, История Whois, Аналитические выборки 
00:38 Качественные профильные и статейные прогоны хрумером по своим базам! 
23:45 Продам канал на ютуб 
10:45 Госзакупки - продления домена за 100 т.р. 
10:01 2domains совсем обнаглели. Куда свалить? 
08:25 Продам аккаунт Яндекс.Диск с объемом 210 ГБ (навсегда) 
06:37 Почему нет новых вебмастеров? И почему обленились старые 
00:23 Надо с сервака парсить сайт один с разных IP 
20:09 Реф. ссылку надо обязательно обойти и зарегистрироваться по прямой! 
17:14 продолжение романа Пелевина поколение "П"