Помогите с роботс
Страницы: 1
Помогите с роботс, гуглне видит роботс
Все было хорошо,а только что бац и приходит сообщение от гугл
Роботу Googlebot не удалось просканировать ваш сайт из-за отсутствия доступа к файлу robots.txt.
Что делать помогите:confused:
0Bk03, Вам ясно написали

Цитата
0Bk03 пишет:
Роботу Googlebot не удалось просканировать ваш сайт из-за отсутствия доступа к файлу robots.txt.
Нужно проверить этот файл smile:)
выложите его содержимое сюда, посмотрим.
ну я посмотрел, вроде все как обычно,ничего не изменилось!
Тогда для начала посмотрите сайт "Просмотреть как Googlebot"
вот роботс
User-agent: *
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm
Посмотрел как гугл бот-страница не доступна,час назад проверял,все в порядке было
Ждите следующий заход робота, возможно в этот раз у хостера были траблы и ваш сайт был недоступен, соответственно до файла не добрался.
Вот как нужно делать сайты Bezlimi.com
Чувствую я что не в этом дело,на сайт заходил переодически- проблем не было,тем более что сейчас все нормально,а если смотреть как гугл бот,то страница не доступна:wall:
сегодня когда смотрел через гугл бот,все в порядке!ответ сервера 200!
Но в вебмастере написано нет доступа к файлу роботс.Только что пришло вот такое сообщение 
Google обнаружил существенное увеличение числа URL, к которым мы не могли получить доступ. Вероятно, что Ваш сервер имел внутреннюю ошибку или был занят, пытаясь обработать эти запросы.:confused:Что это?помогите разобраться...
не ужели ни кто не знает в чем дело?
кст в яндексе такое сообщение:22.04.2013 не удалось проиндексировать главную страницу сайта по следующей причине: HTTP-статус: Служба не доступна . Если причина устранена, сообщение обновится в течение 2-3 дней.
первый раз было 18 числа,теперь 22 числа
Попробуйте открыть все для индексирования - оставьте в роботс только User-agent: * или вообще его переименуйте(файл). Посмотрите на результат. Если ошибка будет и после этого 50х - то проблема на стороне сервера. Имхо.
Сделал как вы сказали,изменения должны быть сразу?или нужно подождать?
Цитата
0Bk03 пишет:
нужно подождать
Сразу навряд ли, нужно подождать.
Будим ждать.Спасибо:)
Изменено: 0Bk03 - 23 Апреля 2013 22:01
Цитата
0Bk03 пишет:
Спасибо
Пока еще не заслужил - но при любом раскладе, если не получается найти причину, то нужно идти методом исключения. Имхо.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
22:27 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
12:39 2Index - быстрая индексация страниц сайта и обратных ссылок 
06:17 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 
11:46 SharkBoss - партнёрская программа для монетизации ЛЮБЫХ видов трафика (включая спам). 
23:10 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
21:20 Rotapost прикрыли! Чем пользоваться? 
00:23 Раскрутка форума 
23:28 Помогите с оценкой стоимости сайта 
18:38 Продажа аккаунтов HH.RU 
13:38 BIGPROXY.SHOP - Резидентные Ротационные Backconnect Proxy USA EUROPA MIX [Безлимитный трафик] 
13:16 PonyBit.ru - обменный пункт PonyBit.ru (Понибит.ру) 
12:46 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно 
12:12 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 
10:46 Linken Sphere – браузер-антидетект нового поколения 
13:08 Бесплатный майнинг Tether (USDT) 
10:29 С юмором по жизни! 
16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 
20:43 Добро пожаловать в цифровой мир... 
15:59 Про мясо 
23:09 ПП от PMS remote.team - 200$ за команду 
13:28 Компьютерная мышь