Почему Исключено роботом
Страницы: 1 2 След.
Почему Исключено роботом
Почему Исключено роботом так много страниц???


3326 Исключено роботом:confused:
Изменено: Spb - 23 Марта 2013 21:19
кто может помочь с вопросом?
Spb, закрыто в роботс?
[SIZE=2]Страниц в поиске 4689[/SIZE]
[SIZE=2]Загружено роботом 8383 [/SIZE]

[SIZE=2]Исключено роботом 3236[/SIZE]
Цитата
Олег пишет:
Spb, закрыто в роботс?
закрыт где?
smile:confused:smile:confused:smile:confused:smile:confused:
проверь файл robot.txt  если там есть слово noindex удали его
Цитата
егор голинев пишет:
проверь файл robot.txt если там есть слово noindex удали его
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/

Sitemap: http://sp-torrent.ru/sitemap.xml
Sitemap: http://sp-torrent.ru/sitemap-forum.xml
Sitemap: http://sp-torrent.ru/sitemap-shop.xml
smile:)smile:)smile:confused:smile:confused:
Чтобы запретить доступ робота к некоторым частям сайта или сайту целиком, используйте директиву 'Disallow'. Примеры:
Чтобы разрешить доступ робота к некоторым частям сайта или сайту целиком, используйте директиву 'Allow'.


тоесть ты просто запретил роботу индексацию
Цитата
егор голинев пишет:
Чтобы разрешить доступ робота к некоторым частям сайта или сайту целиком, используйте директиву 'Allow'.


тоесть ты просто запретил роботу индексацию
типо надо все 'Disallow' заменить на 'Allow' ???
User-agent: *
Disallow: /adminka/

оптимальный вариант, плюс добавь то, что хочеш закрыть от индексирования.
я так понимаю это на юкозе, просто обнови robots или измени его, вот так он должен выглядеть в начальном варианте:


User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/

но в принципе у тебя основные модули как каталог файлов, каталог статей и блог открыты для роботов ищи причину в другом. Причины могут быть разные, например: Страницы без контента, тех. проблемы сервера, дубли страниц, не уникальный контент и т.д. Посмотри в ЯВ какие страницы исключены и от этого уже делай вывод... 
Изменено: War Hammer - 24 Марта 2013 00:56
Цитата
War Hammer пишет:
я так понимаю это на юкозе, просто обнови robots или измени его, вот так он должен выглядеть в начальном варианте:


User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/

но в принципе у тебя основные модули как каталог файлов, каталог статей и блог открыты для роботов ищи причину в другом. Причины могут быть разные, например: Страницы без контента, тех. проблемы сервера, дубли страниц, не уникальный контент и т.д. Посмотри в ЯВ какие страницы исключены и от этого уже делай вывод...
контент есть он уникален.
Страницы: 1 2 След.
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
11:07 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 
06:34 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках 
01:09 Yahoo Scout: Нейро-привет из склепа. Реальный шанс на траф или мимо? 
17:33 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов 
15:14 Апдейт Яндекса 7 февраля. Пока серп трясет, некоторые по ботам плачут 
15:10 Google Discover Core Update: Дискавер отделяют от поиска? 
11:30 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией? 
18:27 Nexulume.com Обменник без AML и KYC 
15:45 Mixmasters - Exchange without AML and KYC 
10:22 Swapwatch.org — Мониторинг криптовалютных обменников 
10:19 SwapPix.io - быстрый и безопасный обменник криптовалют. 
15:12 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 
12:38 Bankomat001 - Сервис обмена электронных валют 
10:42 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру 
20:49 Точные прогнозы на футбол 
20:42 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе 
18:34 Ставки на супер тренды в спорте 
15:30 Гильотина для классиков: Клод доедает физические книги 
11:10 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось? 
22:31 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 
13:38 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко