robots на wp

Сообщений: 14 Регистрация: Мар 2013

4 Октября 2013 19:03

Добрый вечер, сколько делал robots , но постоянно что то ни так то страницы закроются от индексации, то дубли индексируются, дайте пожалуйста правильно настроенный robots. Спасибо.

Coder

Сообщений: 10609 Регистрация: Мар 2013

4 Октября 2013 21:51

Посмотрите:
_http://search.toolbars.alexa.com/?ver=alxf-2.18&src=bc&aid=ZUqHh1tRCs00yD&q=%D0%BF%D1%80%D0%B0%D0%B2%D0%B8%D0%BB%D1%8C%D0%BD%D1%8B%D0%B9+robots+%D0%B4%D0%BB%D1%8F+wordpress

_https://www.google.com.cy/search?q=%D0%BF%D1%80%D0%B0%D0%B2%D0%B8%D0%BB%D1%8C%D0%BD%D1%8B%D0%B9+robots+%D0%B4%D0%BB%D1%8F+wordpress&ie=utf-8&oe=utf-8&rls=org.mozilla:ru:official&client=firefox-a&channel=fflb&gws_rd=cr&ei=uf9OUp2RMuWp4ASy14Bw

_http://www.cy-pr.com/search/?tags=&q=robots+%D0%B4%D0%BB%D1%8F+Wordpress

✓ Проверенные скрипты и полезности для сайта

✓ Курсы

✓ Сервис временных ссылок

Академик

Сообщений: 2683 Регистрация: Июл 2012

4 Октября 2013 22:59

У меня с этим все нормально индексируется

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /tag

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /tag
Host: сайт.ru
Sitemap: http://сайт/sitemap.xml.gz
Sitemap: http://сайт.ru/sitemap.xml

Дешевые рерайтеры тут

Александр

Сообщений: 14 Регистрация: Мар 2013

6 Октября 2013 07:17

Академик ( www.cy-pr.com/forum/f64/t57244/m623668?result=new#96942 ), спасибо попробую.

The Undertaker

Сообщений: 1526 Регистрация: Мар 2011

6 Октября 2013 08:37

У меня точно такой же, с яшки норм идут а с глугла ваще никого, как так то?

Уникальный контент выбирайте »тут« за недорого

darkneo

Сообщений: 396 Регистрация: Дек 2011

6 Октября 2013 12:51

о спасибо сайту 3 года решил проверить что у меня в роботсе написано)) а атм все открыто было))))) пустой роботс)))

pelikesha

Сообщений: 1634 Регистрация: Окт 2010

13 Октября 2013 20:43

Цитата
Академик пишет: У меня с этим все нормально индексируется

А странички комментариев не закрываете? Очень странно сначала определять правило для всех поисковиков, а потом для Яндекса - обычно делают наоборот (скорее всего Яндекс проигнорирует отведенную ему часть, т.к. уже вначале встретит *)

Ну и по 3 раза trackback в роботсе - шедеврально. Можно еще добавить Disallow: */*/*/*/*/*/trackback - на всякий случай. Аналогично с feed.

Новые темы	Объявления	Свободное общение
00:24 Раскрутка форума 00:19 Продвижение по ключам 17:40 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 14:07 2Index - быстрая индексация страниц сайта и обратных ссылок 12:02 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 22:23 Подскажите нормальный сервис накрутки ПФ 09:57 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг	04:05 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 00:56 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 22:42 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 15:26 TETChange-Обменник криптовалют 12:28 AlwaysMoney - платформа для обмена криптовалют 01:35 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust 22:30 SOCKS5 приватные прокси на 30 дней для PayPal	16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 20:43 Добро пожаловать в цифровой мир... 15:59 Про мясо 23:09 ПП от PMS remote.team - 200$ за команду 13:28 Компьютерная мышь 22:55 Ну что, кто куда деваете свои сайты? 22:34 Используете беспроводные наушники?

Новые темы

Объявления

Свободное общение

00:24 Раскрутка форума
00:19 Продвижение по ключам
17:40 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options
14:07 2Index - быстрая индексация страниц сайта и обратных ссылок
12:02 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
22:23 Подскажите нормальный сервис накрутки ПФ
09:57 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг

04:05 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
00:56 CryptoGraph — Анонимный обмен криптовалют без KYC и AML
22:42 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств
15:26 TETChange-Обменник криптовалют
12:28 AlwaysMoney - платформа для обмена криптовалют
01:35 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust
22:30 SOCKS5 приватные прокси на 30 дней для PayPal

16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру
20:43 Добро пожаловать в цифровой мир...
15:59 Про мясо
23:09 ПП от PMS remote.team - 200$ за команду
13:28 Компьютерная мышь
22:55 Ну что, кто куда деваете свои сайты?
22:34 Используете беспроводные наушники?

01.05.2025 18:53	Настройка плагина для wordpress Price Shop
11.04.2025 17:42	Создание сайтов стало проще: WordPress представляет AI-инструмент
21.03.2025 19:38	Владельцы сайтов на WordPress под угрозой: как вредонос DollyWay крадёт ваш трафик
12.03.2025 18:50	Как сделать ссылку видимой на вордпресс тема Jarida ?
14.02.2025 16:44	Рассыпались ссылки из панели управления.