wordpress и robots.tst
Страницы: 1 2 След.
wordpress и robots.tst
Всем привет, у меня яндекс-вебмастер говорит "наш робот получил полный запрет на индексирование сайта в Вашем файле robots.txt. Пожалуйста, воспользуйтесь формой проверки. Если запрет все еще присутствует, то по вопросу устранения этой проблемы Вам нужно обратиться к администратору Вашего сайта или хостеру. Если сейчас запрет отсутствует, то сообщение обновится в течение 2–3 дней."

У меня все ссылки вида mysite.ru/statya1/, mysite.ru/category/love/.
sitemap валидный загружен, там пока 13 ссылок, яндекс проиндексировал две
Я всё правильно сделал?))

Содержание robots.txt:


User-agent: YandexBlog
Allow: /

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /author/
Disallow: /search/
Disallow: /wp-content
Disallow: /tag/
Disallow: /trackback/
Disallow: /feed/
Disallow: /comments/
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Allow: /wp-content/uploads/

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /author/
Disallow: /search/
Disallow: /wp-content
Disallow: /tag/
Disallow: /trackback/
Disallow: /feed/
Disallow: /comments/
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Allow: /wp-content/uploads/

Sitemap: mysite.ru/sitemap.xml
Host: mysite.ru
Изменено: Booster - 15 Февраля 2012 23:43
Прошу помочь....smile:)
По идее да, этот роботс более-менее верный.
я нармальный, не маньяк, чесна.
пытаюсь поднять сайт о гороскопах csrtife.ru
То есть это у всех такое сообщение, если Wordpress?))
Для примера - вот мой роботс


Код
User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
 
User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
Host: csrtife.ru
 
Sitemap:блаблабла




У меня открыты категории, потому что они у меня и есть движущая сила. Никаких санкций не имею и все нормально индексируется
ВОТ! Где у меня закрывваются категории?
Мне тоже нужны категории!
Цитата
Booster пишет:
Мне тоже нужны категории!
Тогда забирайте мой роботс, далее по ходу подкорректируете. У вас открыты категории
Загляните в header.php шаблона через редактор. Там иногда вставляют мета-тег Robots.  Удалите его из  header.php
Цитата
igorys пишет:
Загляните в header.php шаблона через редактор. Там иногда вставляют мета-тег Robots. Удалите его из header.php
О да, есть такое в паблик шаблонах.Последние пару сайтов заказываю шаблоны, и поэтому как то выкинул из головы такую вероятность
Цитата
igorys пишет:
Загляните в header.php шаблона через редактор. Там иногда вставляют мета-тег Robots. Удалите его из header.php
А чем он плох?
у меня <meta name="robots" content="noodp,noydir" />
Цитата
Booster пишет:
у меня <meta name="robots" content="noodp,noydir" />
Удали вообще эту запись,  у тебя есть robots.txt
Дайте сайт в личку
Я уже...но только, чем она плоха? nodp - не брать описание из DMOZ noydir - не брать описание из каталога yahoo
Цитата
Booster пишет:
Я уже...но только, чем она плоха? nodp - не брать описание из DMOZ noydir - не брать описание из каталога yahoo
Все равно, нефиг таким тегам в хедере стоять)
Страницы: 1 2 След.
Похожие темы:
Читают тему (гостей: 2, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
12:29 РСЯ и тормоза сайта: Яндекс начал штрафовать за плохой PageSpeed? 
12:22 WB и Ozon - новые "русские поисковики"? Яндекс теряет коммерческую выдачу 
11:52 [AI] 90% против нейросетей? Красивые цифры от DuckDuckGo (с подвохом) 
11:48 Дзен окончательно всё? Или у кого-то еще «стреляет» белый контент? 
11:45 [AI] Хаби Лейм и сделка на $1 млрд. Гений или его развели на фантики? 
11:41 Трафик пробил дно? Худший январь за 10 лет и внезапный рост продаж с Bing 
11:38 Плагин ответа 
11:21 Trustpilot Reviews | Подниму рейтинг вашей компании 
11:19 №1 Рассылка / Инвайтинг [TELEGRAM] | Приватный метод 
11:16 Продвижение YouTube видео в топ поиска | Любой тип контента | Гарантия результата 
11:15 Продвижение сайта: [SEO-трафик][Вывод в ТОП][Крауд-маркетинг + SEO] 
11:13 Установка|Настройка|Доработка|Наполнение сайтов|Дизайн|3D|Видеомонтаж 
10:32 garantcoin.io - быстрый и надёжный сервис обмена криптовалюты GarantCoin 
08:45 Мониторинг обменников Сrypto-scout.io 
11:55 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем 
11:50 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 
11:43 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
08:25 Отвратительное поведение 
05:31 Точные прогнозы на футбол 
11:00 Кто может дать инвайт на WebMasters? 
17:58 Список обновленных тем пуст...