Прошу оценить robots.txt
Страницы: Пред. 1 2
Прошу оценить robots.txt, Не уверен в правильности составления
Цитата
Алексей Khabarovsk пишет:

Код
 # XML Sitemap & Google News Feeds version 4.3.2 - http://status301.net/wordpress-plugins/xml-sitemap-feed/
Sitemap: http://fpatrol.ru/sitemap.xml
Sitemap: http://fpatrol.ru/sitemap-news.xml

User-agent: *
Disallow: /wp-admin/
Disallow: */xmlrpc.php
Disallow: */wp-*.php
Disallow: */trackback/
Disallow: *?wptheme=
Disallow: *?replytocom
Disallow: */comment-page-
Disallow: *?s=
Disallow: /webstat/
Disallow: /wp-content/plugins 
Disallow: /wp-content/themes 
Disallow: */downloads
Allow: */wp-content/uploads/

User-agent: Yandex 
Disallow: /wp-admin/
Disallow: */xmlrpc.php
Disallow: */wp-*.php
Disallow: */trackback/
Disallow: *?wptheme=
Disallow: *?replytocom
Disallow: */comment-page-
Disallow: *?s=
Disallow: /webstat/
Disallow: /wp-content/plugins 
Disallow: /wp-content/themes 
Disallow: */downloads
Allow: */wp-content/uploads/
Host: fpatrol.ru  


Нормальный роботс, то что для яндекса отдельная директива - это правильно. Он любит это дело. Host надо указывать без всяких http и только для яндекса. Путь к карте сайта стоит указать как для всех роботов, так и для яндекса.
И по поводу карты сайта. Ее название не установлено никакими стандартами не яндеса и не гугла. Это просто рекомендация. Это просто файл со ссылками для улучшения индексации сайта. Так что название карты может быть любое, главное указать ссылку на нее и все.
если по результату плагина, роботс в корне есть, а карты сайта нет. Где он лежит интересно, ведь по адресу он должен быть в корне, а его там нет!
Цитата
Алексей пишет:
если по результату плагина, роботс в корне есть, а карты сайта нет. Где он лежит интересно, ведь по адресу он должен быть в корне, а его там нет!
Разобрался. Стоит настройка динамического обновления карты сайта, а значит его в корне нет, он в плагине где то.
хост прописывается без http:// либо с ввв, либо без - на усмотрение владельца сайта
Биржа криптовалют удобная аналитика, хранение, покупка
Теперь надо разобраться с приоритетом страниц и динамикой.7
Страницы: Пред. 1 2
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
12:44 РСЯ и тормоза сайта: Яндекс начал штрафовать за плохой PageSpeed? 
12:42 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 
23:09 Как безопасно купить Гугл почту? 
13:45 Какой движок выбрать для форума? 
13:43 Нашел скрины выплат с Сапы за 2010 год. Пошел плакать 
09:26 Трафик пробил дно? Худший январь за 10 лет и внезапный рост продаж с Bing 
19:27 Плагин ответа 
12:36 Nexulume.com Обменник без AML и KYC 
09:12 Swapwatch.org — Мониторинг криптовалютных обменников 
09:07 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
23:25 SOCKS5 приватные прокси на 30 дней для PayPal 
23:24 Google Voice аккаунты для бесплатных SMS и звонков 
23:23 PayPal аккаунты для любых целей 
23:02 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
12:41 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось? 
06:26 Ставки на супер тренды в спорте 
22:31 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 
22:30 Точные прогнозы на футбол 
13:38 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
07:11 Список обновленных тем пуст... 
17:02 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем