robots на wp
Страницы: 1
robots на wp
Добрый вечер, сколько делал robots , но постоянно что то ни так то страницы закроются от индексации, то дубли индексируются, дайте пожалуйста правильно настроенный robots. Спасибо.
Посмотрите:
_http://search.toolbars.alexa.com/?ver=alxf-2.18&src=bc&aid=ZUqHh1tRCs00yD&q=%D0%BF%D1%80%D0%B0%D0%B2%D0%B8%D0%BB%D1%8C%D0%BD%D1%8B%D0%B9+robots+%D0%B4%D0%BB%D1%8F+wordpress

_https://www.google.com.cy/search?q=%D0%BF%D1%80%D0%B0%D0%B2%D0%B8%D0%BB%D1%8C%D0%BD%D1%8B%D0%B9+robots+%D0%B4%D0%BB%D1%8F+wordpress&ie=utf-8&oe=utf-8&rls=org.mozilla:ru:official&client=firefox-a&channel=fflb&gws_rd=cr&ei=uf9OUp2RMuWp4ASy14Bw

_http://www.cy-pr.com/search/?tags=&q=robots+%D0%B4%D0%BB%D1­%8F+Wordpress
У меня с этим все нормально индексируется


User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /tag

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /tag
Host: сайт.ru
Sitemap: http://сайт/sitemap.xml.gz
Sitemap: http://сайт.ru/sitemap.xml
Академик ( www.cy-pr.com/forum/f64/t57244/m623668?result=new#96942 ), спасибо попробую.
У меня точно такой же, с яшки норм идут а с глугла ваще никого, как так то?
Уникальный контент выбирайте »тут« за недорого
о спасибо сайту 3 года решил проверить что у меня  в роботсе написано)) а атм  все открыто  было))))) пустой роботс)))
Цитата
Академик пишет:
У меня с этим все нормально индексируется
А странички комментариев не закрываете? Очень странно сначала определять правило для всех поисковиков, а потом для Яндекса - обычно делают наоборот (скорее всего Яндекс проигнорирует отведенную ему часть, т.к. уже вначале встретит *)

Ну и по 3 раза trackback в роботсе - шедеврально. Можно еще добавить Disallow: */*/*/*/*/*/trackback  - на всякий случай. Аналогично с feed.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
00:52 С наступающим Новым годом! АП Яндекс ИКС 23.12.2025 
15:49 Новая поисковая система от OpenAI 
14:42 2Index - быстрая индексация страниц сайта и обратных ссылок 
09:30 Fraud.Hosting: надёжная защита от недобросовестных клиентов 
09:26 Ворд Пресс (или его шаблон) перестал отображать <b> болд жирный 
09:19 Rutube запустил «Новая система монетизации для блогеров» 
23:07 Как Яндекс индексирует ваш сайт? | АПдейт выдача 8.12.2025 
16:29 Clearex.io - Больше чем обменник 
14:34 Продвижение Яндекс подсказок от hoopbots 
14:32 PonyBit.ru - обменный пункт PonyBit.ru (Понибит.ру) 
14:11 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old 
13:33 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно 
10:43 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 
09:07 E-currency.exchange — ваш помощник в мире обменов 
21:22 С юмором по жизни! 
22:59 Про мясо 
15:07 Добро пожаловать в цифровой мир... 
22:12 BYTIK.shop – сервис по продвижению в популярных социальных сетях​ 
10:10 накрутка трафика в SimilarWeb 
16:50 Компьютерная мышь 
23:03 Точные прогнозы на футбол