wordpress и robots.tst
Страницы: 1 2 След.
wordpress и robots.tst
Всем привет, у меня яндекс-вебмастер говорит "наш робот получил полный запрет на индексирование сайта в Вашем файле robots.txt. Пожалуйста, воспользуйтесь формой проверки. Если запрет все еще присутствует, то по вопросу устранения этой проблемы Вам нужно обратиться к администратору Вашего сайта или хостеру. Если сейчас запрет отсутствует, то сообщение обновится в течение 2–3 дней."

У меня все ссылки вида mysite.ru/statya1/, mysite.ru/category/love/.
sitemap валидный загружен, там пока 13 ссылок, яндекс проиндексировал две
Я всё правильно сделал?))

Содержание robots.txt:


User-agent: YandexBlog
Allow: /

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /author/
Disallow: /search/
Disallow: /wp-content
Disallow: /tag/
Disallow: /trackback/
Disallow: /feed/
Disallow: /comments/
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Allow: /wp-content/uploads/

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /author/
Disallow: /search/
Disallow: /wp-content
Disallow: /tag/
Disallow: /trackback/
Disallow: /feed/
Disallow: /comments/
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Allow: /wp-content/uploads/

Sitemap: mysite.ru/sitemap.xml
Host: mysite.ru
Изменено: Booster - 15 Февраля 2012 23:43
Прошу помочь....smile:)
По идее да, этот роботс более-менее верный.
я нармальный, не маньяк, чесна.
пытаюсь поднять сайт о гороскопах csrtife.ru
То есть это у всех такое сообщение, если Wordpress?))
Для примера - вот мой роботс


Код
User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
 
User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
Host: csrtife.ru
 
Sitemap:блаблабла




У меня открыты категории, потому что они у меня и есть движущая сила. Никаких санкций не имею и все нормально индексируется
ВОТ! Где у меня закрывваются категории?
Мне тоже нужны категории!
Цитата
Booster пишет:
Мне тоже нужны категории!
Тогда забирайте мой роботс, далее по ходу подкорректируете. У вас открыты категории
Загляните в header.php шаблона через редактор. Там иногда вставляют мета-тег Robots.  Удалите его из  header.php
Цитата
igorys пишет:
Загляните в header.php шаблона через редактор. Там иногда вставляют мета-тег Robots. Удалите его из header.php
О да, есть такое в паблик шаблонах.Последние пару сайтов заказываю шаблоны, и поэтому как то выкинул из головы такую вероятность
Цитата
igorys пишет:
Загляните в header.php шаблона через редактор. Там иногда вставляют мета-тег Robots. Удалите его из header.php
А чем он плох?
у меня <meta name="robots" content="noodp,noydir" />
Цитата
Booster пишет:
у меня <meta name="robots" content="noodp,noydir" />
Удали вообще эту запись,  у тебя есть robots.txt
Дайте сайт в личку
Я уже...но только, чем она плоха? nodp - не брать описание из DMOZ noydir - не брать описание из каталога yahoo
Цитата
Booster пишет:
Я уже...но только, чем она плоха? nodp - не брать описание из DMOZ noydir - не брать описание из каталога yahoo
Все равно, нефиг таким тегам в хедере стоять)
Страницы: 1 2 След.
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
15:35 Яндекс-ап 20 марта и похороны ChatGPT, Claude и Gemini. Считаем убытки 
14:07 AI под надзором. Минцифры готовят клеймо для контента 
00:12 XEvil - софт для разгадывания капчи. Бесплатная демо-версия. Привязка к SEO/SMM-софту. 
23:11 APK на паузе. Google убивает быстрый конверт 
16:58 MAX попер в бурж: 40 стран, ведение каналов и горы дешевого трафика 
15:38 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
15:09 А+ в MAX: Квитанция на получение денег 
21:57 Volna.money 
16:32 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру 
15:49 Европейский эквайринг 
13:23 Trustpilot Reviews | Подниму рейтинг вашей компании 
13:22 №1 Рассылка / Инвайтинг [TELEGRAM] | Приватный метод 
13:22 Продвижение YouTube видео в топ поиска | Любой тип контента | Гарантия результата 
13:21 Установка|Настройка|Доработка|Наполнение сайтов|Дизайн|3D|Видеомонтаж 
19:00 Панель Кнопки соцсетей 
18:12 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 
18:11 Чак Норрис ушел - 19 марта 2026, 86 лет, семья подтвердила 
17:28 С юмором по жизни! 
17:16 молодильные яблоки и живая вода 
06:03 Точные прогнозы на футбол 
15:29 Компьютерная мышь