Подскажите с robots.txt

Al Capone

Сообщений: 864 Регистрация: Мар 2014

5 Августа 2014 20:44

Приветствую уважаемые форумчане.
Скажите пожалуйста, правильный ли роботс у меня на сайте ukrainesite.com/robots.txt ?

Изменено: Al Capone - 5 Августа 2014 20:44

Ошибка 404

Сообщений: 2221 Регистрация: Окт 2011

5 Августа 2014 22:45

Рекомендуемый роботс для вп этот:

Код

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments 
Host: ukrainesite.com
 Sitemap: http://ukrainesite.com//sitemap.xml

а уже сами чере disallow указывайте какие страницы дополнительно закрыть

Есть мобильный трафик ? Получай до 91% отчислений и 35р за автовыкуп. Ребил от 56 рублей.Регистрация. Мануал и помощь рефералам в ЛС.

Al Capone

Сообщений: 864 Регистрация: Мар 2014

5 Августа 2014 22:50

Ошибка 404, спасибо, скопировал то что вы дали и обновил у себя smile:)

SynyAlex

Сообщений: 1305 Регистрация: Июл 2012

5 Августа 2014 22:59

Цитата
Al Capone пишет: Приветствую уважаемые форумчане. Скажите пожалуйста, правильный ли роботс у меня на сайте ukrainesite.com/robots.txt ?

несовсем: Sitemap: http://ukrainesite.com//sitemap.xml --> Сторінку не знайдено

Новые темы	Объявления	Свободное общение
10:14 Хватит ныть про смерть сайтов и нейроответы - почему мы всё еще в деле 10:10 Бесплатное расширение для Chrome — проверка ссылок прямо на странице 05:55 Яху Скаут и китайцы - есть там вообще жизнь для новичка в 2026? 01:56 Popunder - крупнейшая биржа трафика, стабильные выплаты с 2007 года! 12 рекламных форматов, 15 таргетингов, 20 способов пополнения баланса 01:29 2Index - быстрая индексация страниц сайта и обратных ссылок 21:32 Ап выдачи Яндекса 8 апреля - есть движение, но интереснее что творится с AI-ответами Google 21:28 С чего сейчас проще начать?	09:40 GhostRocket.pro — Взлетаем в новую эру криптообмена! 09:33 От $0.015 за IP \| $0.68 за ГБ \| 9PROXY.COM \| 20+ млн резидентных прокси \| 99,95% аптайм \| Без чёрных списков 08:22 Мониторинг обменников Сrypto-scout.io 06:06 TUNNEL-to-PROXY: превращает тысячи публичных сетевых конфигураций - в стабильные SOCKS5-прокси! 01:51 BITzaBIT.com - обмен криптовалют, выплаты EUR, CAD, GBP, AZN, TJS, UZS 22:41 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 18:55 Mixmasters - Exchange without AML and KYC	10:21 Список обновленных тем пуст... 06:12 Ставки на супер тренды в спорте 04:29 Точные прогнозы на футбол 02:12 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 01:54 Курс доллара упал ниже 85 рублей 01:19 молодильные яблоки и живая вода 21:09 Во Франции начали штрафовать за IPTV - до 300-400 евро уже прилетает обычным пользователям

Новые темы

Объявления

Свободное общение

10:14 Хватит ныть про смерть сайтов и нейроответы - почему мы всё еще в деле
10:10 Бесплатное расширение для Chrome — проверка ссылок прямо на странице
05:55 Яху Скаут и китайцы - есть там вообще жизнь для новичка в 2026?
01:56 Popunder - крупнейшая биржа трафика, стабильные выплаты с 2007 года! 12 рекламных форматов, 15 таргетингов, 20 способов пополнения баланса
01:29 2Index - быстрая индексация страниц сайта и обратных ссылок
21:32 Ап выдачи Яндекса 8 апреля - есть движение, но интереснее что творится с AI-ответами Google
21:28 С чего сейчас проще начать?

09:40 GhostRocket.pro — Взлетаем в новую эру криптообмена!
09:33 От $0.015 за IP | $0.68 за ГБ | 9PROXY.COM | 20+ млн резидентных прокси | 99,95% аптайм | Без чёрных списков
08:22 Мониторинг обменников Сrypto-scout.io
06:06 TUNNEL-to-PROXY: превращает тысячи публичных сетевых конфигураций - в стабильные SOCKS5-прокси!
01:51 BITzaBIT.com - обмен криптовалют, выплаты EUR, CAD, GBP, AZN, TJS, UZS
22:41 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств
18:55 Mixmasters - Exchange without AML and KYC

10:21 Список обновленных тем пуст...
06:12 Ставки на супер тренды в спорте
04:29 Точные прогнозы на футбол
02:12 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди
01:54 Курс доллара упал ниже 85 рублей
01:19 молодильные яблоки и живая вода
21:09 Во Франции начали штрафовать за IPTV - до 300-400 евро уже прилетает обычным пользователям

03.12.2023 18:57	Подскажите сервис. Выполнение заданий за деньги
03.03.2022 18:43	Подскажите сервисы заработка на группе Вк
22.10.2021 09:04	Подскажите оператора номеров 8-800
08.12.2020 00:07	Подскажите, что за cms на сайте
27.02.2020 09:28	Подскажите партнерки для соц. сетей