Правильный Robots.txt для WP
Страницы: 1
Правильный Robots.txt для WP
Здравствуйте, посоветуйте Robots.Txt для блога.
Сейчас стоит:
Код
User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Host: seo-bob.ru

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Sitemap: <a href=\"http://seo-bob.ru/sitemap.xml\" target=\"_blank\">http://seo-bob.ru/sitemap.xml</a>
...

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

В принципе все правильно =)
Не вижу закрытие еще teg`ов. Не считаете нужным? smile:)
Цитата
ICE пишет:
Не вижу закрытие еще teg`ов. Не считаете нужным?


Я лично теги не закрывал)Они кстате нормально индексируются)
Например у меня ссылки типа:

http://worldinseo.ru/tag/ucoz -индексриуются очень даже не плохо) smile:)

Так что не считаю нужным закрывать теги от индексации!
Rolexx93, ну не знаю. У меня до закрытия тегов % страниц не под фильтром гугла было 1-2. Закрыл месяц назад - начали вылазить...мало, но 4-5% лучше smile:o
ICE, нет нужным не считаю.
Как я понял каких-то грубых ошибок не допущено так?!
я тоже все закрываю. А то в поиске всякая фигня вылазит.
Все больше уверяю себя что теги очень хорошо индексируются и закрывать их не стоит smile:mail:

А "% страниц не под фильтром гугла" зависит не от этого)

Тут скорее всего играет роль уникальность)и обновление сайта
фильтры гугл накладывает за разное.
Всем привет! В зависимости от того какую цель преследует проект, такой и прописывается робот, но это еще пол дела, желательно, чтобы он совпадал с внутренними настройками плагинов WordPress. Однозначно ответить будет не правильно. Постарайтесь понять одно важное правило. Для каждой определенной цели которую преследует сайт делаются определенные настройки. Примечание: на первый взгляд правильно прописанный робот, на начальном этапе развития молодого ресурса, может ему даже навредить в продвижении. Желаю удачи и хорошего трафика. С Уважением! Учредитель Интернет проекта SAGAT Club.ru ( http://sagata-club.ru/ )
smile:wall: Всем привет ,на WordPress недавно, до этого пользовался джумлой и у меян возникла проблема. яндекс проиндексировал мой сайт, загрузил всего 30 страниц, не исключил ни одной, но в поиске только Главная страница. В роботе закрыл только

User-agent: *
Disallow: /blog/wp-login.php
Disallow: /blog/wp-admin/
Disallow: /blog/wp-includes/
Disallow: /blog/wp-content/
Disallow: /blog/xmlrpc.php

Такде не индексируются записи в рубриках, не подскажите куда смотреть?
Страницы: 1
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
17:33 Яндекс обнулил всем значение тИЦ? 
17:32 Помогите решить вопрос, нету трафика с гугла 
17:27 AffiliateCube 3.0 - усовершенствованная платформа 
16:25 Изменение адреса для пин кода 
15:07 26 апреля 2017 Яндекс выдача 
14:58 Подозрительный трафик! 
14:53 WelcomePartners – ведущая гемблинг партнерка рунета! 
17:28 Услуги по созданию/доработки/правки сайтов на CMS DLE (Datalife Engine), Wordpress, Joomla! 
16:54 Комплексный прогон по трастовым сайтам, статейное размещение. Рост НЧ-СЧ, Тиц-пр. 
16:19 Качественный трастовый прогон с большими ТИЦками! Более 400 сайтов, общий тиц больше 100000! 
14:15 20 крутых ссылок всего за 499 рублей! Из них 14 сайтов в ЯК, 6 в DMOZ, средний ТИЦ 225. Только ручное размещение! 
13:05 Доработки по 2 сайтам DLE, PHP, htlm, css модули 
12:48 Прогон по твиттеру, постинг в 1500 аккунтов, ускорение индексации и переиндексация сайтов, сателлитов, дорвеев и ссылок с прогонов 
10:59 Как создать простейший ИМ? Уже отчаялся найти подрядчика! Помогите! 
17:13 Советую вместо дом2 послушать аудиокнигу "Мани, или Азбука денег" Автор: Бодо Шефер 
15:49 Российские каналы +8 часов где смотреть? 
15:49 Читаете ли своим маленьким детям книги? (тема для родителей, а не всезнаек) 
12:43 Росконадзор штрафует за форму обратной связи 
23:09 Как сделать ПРОГНОЗ КЛЕВА 
22:51 Ищем не на чем сэкономить, а на чем заработать! 
21:29 Статьи с ошибками на медицинском сайте. Как влияют на продвижение ошибки?