Помогите с роботс
Страницы: 1
Помогите с роботс, гуглне видит роботс
Все было хорошо,а только что бац и приходит сообщение от гугл
Роботу Googlebot не удалось просканировать ваш сайт из-за отсутствия доступа к файлу robots.txt.
Что делать помогите:confused:
0Bk03, Вам ясно написали

Цитата
0Bk03 пишет:
Роботу Googlebot не удалось просканировать ваш сайт из-за отсутствия доступа к файлу robots.txt.
Нужно проверить этот файл smile:)
выложите его содержимое сюда, посмотрим.
ну я посмотрел, вроде все как обычно,ничего не изменилось!
Тогда для начала посмотрите сайт "Просмотреть как Googlebot"
вот роботс
User-agent: *
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm
Посмотрел как гугл бот-страница не доступна,час назад проверял,все в порядке было
Ждите следующий заход робота, возможно в этот раз у хостера были траблы и ваш сайт был недоступен, соответственно до файла не добрался.
Вот как нужно делать сайты Bezlimi.com
Чувствую я что не в этом дело,на сайт заходил переодически- проблем не было,тем более что сейчас все нормально,а если смотреть как гугл бот,то страница не доступна:wall:
сегодня когда смотрел через гугл бот,все в порядке!ответ сервера 200!
Но в вебмастере написано нет доступа к файлу роботс.Только что пришло вот такое сообщение 
Google обнаружил существенное увеличение числа URL, к которым мы не могли получить доступ. Вероятно, что Ваш сервер имел внутреннюю ошибку или был занят, пытаясь обработать эти запросы.:confused:Что это?помогите разобраться...
не ужели ни кто не знает в чем дело?
кст в яндексе такое сообщение:22.04.2013 не удалось проиндексировать главную страницу сайта по следующей причине: HTTP-статус: Служба не доступна . Если причина устранена, сообщение обновится в течение 2-3 дней.
первый раз было 18 числа,теперь 22 числа
Попробуйте открыть все для индексирования - оставьте в роботс только User-agent: * или вообще его переименуйте(файл). Посмотрите на результат. Если ошибка будет и после этого 50х - то проблема на стороне сервера. Имхо.
Сделал как вы сказали,изменения должны быть сразу?или нужно подождать?
Цитата
0Bk03 пишет:
нужно подождать
Сразу навряд ли, нужно подождать.
Будим ждать.Спасибо:)
Изменено: 0Bk03 - 23 Апреля 2013 22:01
Цитата
0Bk03 пишет:
Спасибо
Пока еще не заслужил - но при любом раскладе, если не получается найти причину, то нужно идти методом исключения. Имхо.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
11:07 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 
06:34 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках 
01:09 Yahoo Scout: Нейро-привет из склепа. Реальный шанс на траф или мимо? 
17:33 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов 
15:14 Апдейт Яндекса 7 февраля. Пока серп трясет, некоторые по ботам плачут 
15:10 Google Discover Core Update: Дискавер отделяют от поиска? 
11:30 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией? 
04:09 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
02:31 Профессиональный и грамотный дизайн от DesignCash 
18:27 Nexulume.com Обменник без AML и KYC 
15:45 Mixmasters - Exchange without AML and KYC 
10:22 Swapwatch.org — Мониторинг криптовалютных обменников 
10:19 SwapPix.io - быстрый и безопасный обменник криптовалют. 
15:12 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 
05:10 Точные прогнозы на футбол 
02:08 K*R*A*K*EN // ссылка на февраль 2026 
00:28 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе 
18:34 Ставки на супер тренды в спорте 
15:30 Гильотина для классиков: Клод доедает физические книги 
11:10 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось? 
22:31 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес