Помогите с роботом
Страницы: 1
Помогите с роботом
Здравствуйте!
Создал сайт недавно, идет активное наполнение и обратил внимание, что гугл не особо индексирует его. Точнее пару страниц взял остальное мне решил оставить...(
Забрел вЗаблокированные УРЛ, а там значение 20 и пишет, что роботсе проблемы. 
Помогите составить роботс для водпресса.
Сейчас вот что стоит:
User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Host: (сайт не свечу)

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments

Sitemap: (сайт не свечу) sitemap.xml
Создание и ведение компаний Яндекс.Директ - http://sharipoff.nethouse.ru/
Цитата
Арсений Шарипов пишет:
сайт не свечу

решение находится по адресу: www.(светить не буду).ru

Вообще robots у Вас вроде ничего лишнего не блокирует, да и чтоб Гугл не индексировал сайт должен был УГ.
Цитата
WSairus пишет:
Цитата
Арсений Шарипов пишет:
сайт не свечу

решение находится по адресу: www.(светить не буду).ru

Вообще robots у Вас вроде ничего лишнего не блокирует, да и чтоб Гугл не индексировал сайт должен был УГ.
Тогда почему гугл пишет "Блоикрованные URL 20" ?(
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
20:57 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 
20:20 кликните сюда 
14:13 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
13:38 2Index - быстрая индексация страниц сайта и обратных ссылок 
12:44 РСЯ и тормоза сайта: Яндекс начал штрафовать за плохой PageSpeed? 
23:09 Как безопасно купить Гугл почту? 
13:45 Какой движок выбрать для форума? 
04:20 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
23:26 Sova.gg - надежный обменник криптовалюты. 
19:23 Mixmasters - Exchange without AML and KYC 
15:54 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old 
14:05 TETChange-Обменник криптовалют 
12:36 Nexulume.com Обменник без AML и KYC 
09:12 Swapwatch.org — Мониторинг криптовалютных обменников 
04:51 Точные прогнозы на футбол 
02:12 Ставки на супер тренды в спорте 
12:41 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось? 
22:31 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 
13:38 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
07:11 Список обновленных тем пуст... 
17:02 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем