robots на wp
Страницы: 1
robots на wp
Добрый вечер, сколько делал robots , но постоянно что то ни так то страницы закроются от индексации, то дубли индексируются, дайте пожалуйста правильно настроенный robots. Спасибо.
Посмотрите:
_http://search.toolbars.alexa.com/?ver=alxf-2.18&src=bc&aid=ZUqHh1tRCs00yD&q=%D0%BF%D1%80%D0%B0%D0%B2%D0%B8%D0%BB%D1%8C%D0%BD%D1%8B%D0%B9+robots+%D0%B4%D0%BB%D1%8F+wordpress

_https://www.google.com.cy/search?q=%D0%BF%D1%80%D0%B0%D0%B2%D0%B8%D0%BB%D1%8C%D0%BD%D1%8B%D0%B9+robots+%D0%B4%D0%BB%D1%8F+wordpress&ie=utf-8&oe=utf-8&rls=org.mozilla:ru:official&client=firefox-a&channel=fflb&gws_rd=cr&ei=uf9OUp2RMuWp4ASy14Bw

_http://www.cy-pr.com/search/?tags=&q=robots+%D0%B4%D0%BB%D1­%8F+Wordpress
У меня с этим все нормально индексируется


User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /tag

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /tag
Host: сайт.ru
Sitemap: http://сайт/sitemap.xml.gz
Sitemap: http://сайт.ru/sitemap.xml
Академик ( www.cy-pr.com/forum/f64/t57244/m623668?result=new#96942 ), спасибо попробую.
У меня точно такой же, с яшки норм идут а с глугла ваще никого, как так то?
Уникальный контент выбирайте »тут« за недорого
о спасибо сайту 3 года решил проверить что у меня  в роботсе написано)) а атм  все открыто  было))))) пустой роботс)))
Цитата
Академик пишет:
У меня с этим все нормально индексируется
А странички комментариев не закрываете? Очень странно сначала определять правило для всех поисковиков, а потом для Яндекса - обычно делают наоборот (скорее всего Яндекс проигнорирует отведенную ему часть, т.к. уже вначале встретит *)

Ну и по 3 раза trackback в роботсе - шедеврально. Можно еще добавить Disallow: */*/*/*/*/*/trackback  - на всякий случай. Аналогично с feed.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
20:57 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 
20:20 кликните сюда 
14:13 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
13:38 2Index - быстрая индексация страниц сайта и обратных ссылок 
12:44 РСЯ и тормоза сайта: Яндекс начал штрафовать за плохой PageSpeed? 
23:09 Как безопасно купить Гугл почту? 
13:45 Какой движок выбрать для форума? 
04:20 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
23:26 Sova.gg - надежный обменник криптовалюты. 
19:23 Mixmasters - Exchange without AML and KYC 
15:54 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old 
14:05 TETChange-Обменник криптовалют 
12:36 Nexulume.com Обменник без AML и KYC 
09:12 Swapwatch.org — Мониторинг криптовалютных обменников 
04:51 Точные прогнозы на футбол 
02:12 Ставки на супер тренды в спорте 
12:41 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось? 
22:31 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 
13:38 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
07:11 Список обновленных тем пуст... 
17:02 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем