Робот.тхт
Страницы: 1 2 След.
Робот.тхт, подскажите
Есть сайт - http://gamebot.my1.ru/
Вот его робот - http://gamebot.my1.ru/robots.txt

Гугл, кушает странички и не бибикает, а Яша пишет вот-так:
Рисунок

Думал бан в Яндексе - Платон божиться что всё в порядке. может быть вы заметите, что не так? smile:confused:

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

Скорее всего вам надо просто сделать нормальный robot.txt и site-map
Цитата
александр александров пишет:
Скорее всего вам надо просто сделать нормальный robot.txt и site-map
робот был нормальный, как такая фигня началась(с месяц назад), я открыл всё... как видите не помогает...
Укажите в Вашем robots.txt хотя бы пустой Disallow:

и попробуйте добавить на сайт

<met a name="robots" content="all" />
Ucoz'овские сайты на месяц всегда в карантине, может, после снятия карантина Яндекс еще не успел проиндексировать.
Поставь вот так:
User-agent: Yandex
Disallow:
Host: site.ru
Цитата
Алёна пишет:
Ucoz'овские сайты на месяц всегда в карантине, может, после снятия карантина Яндекс еще не успел проиндексировать.
Сайту полгода
Цитата
Поставь вот так:
User-agent: Yandex
Disallow:
Host: site.ru
Спасибо. сейчас попробую.

ПСи После Host: http:// надо или нет?
Изменено: Duskin - 14 Апреля 2011 20:12
Вот правильный robots.txt для вашего сайта. Придраться Яндексу и Гуглу будет не к чему. Команда Host для сайтов на Юкозе не нужна совсем. Вставлять ее туда не имеет никакого смысла.

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search

Sitemap: http://gamebot.my1.ru/sitemap.xml
Sitemap: http://gamebot.my1.ru/sitemap-forum.xml
Изменено: Miss Belka - 14 Апреля 2011 21:37
Цитата
Duskin пишет:
ПСи После Host: http:// надо или нет?


Нет не нужно, просто пишите site.com и все...
Цитата
Miss Belka пишет:
Вот правильный robots.txt для вашего сайта. Придраться Яндексу и Гуглу будет не к чему....
Точно такой-же был изначально, Яндекс до него и начал докапываться....
Цитата
Duskin пишет:
Точно такой-же был изначально, Яндекс до него и начал докапываться....


Как же он мог до него докапываться, если он написан с соблюдением всех правил написания? Все сайты на UCOZ работают именно с таким robots.txt. Менять там ничего не нужно - каждая строка имеет большое значение.
Работают... У меня ещё два Ucozных с такими работают, а вот этот не хочет. Сейчас переписал sitemap и робот поменял (host прописал). Посмотрим что скажет после выдачи...
Если в юкозовском роботсе были найдены ошибки, то значит сам файл robots.txt был изменен вручную без сохранения в нужной кодировке. Советую не заниматься ерундой, а удалить тот robots, который сейчас через ПУ сайта и подождать, пока UCOZ не восстановит нормальный smile;) И еще раз про host... Он не имеет значения для сайтов на UCOZ, тем более домен вашего сайта однозначен в любом виде. Попробуйте набрать в браузере с www и без само название. Результат будет один и тот же. Дело ваше конечно... Просто все эти проблемы уже пройденный этап для меня... не хотите следовать совету - пробуйте эти грабли самостоятельно smile:)
Цитата
Miss Belka пишет:
Если в юкозовском роботсе были найдены ошибки, то значит сам файл robots.txt был изменен вручную без сохранения в нужной кодировке....
Да в том-то и дело, что началось нес того, нес сего. воопсче нечего не делал... хлоп и всё вылетело... подумал что БАН. Все что можно в Нофоллоу и Ноиндекс спрятал, отписал Щукиным, они грят всё путём..
Цитата
Miss Belka пишет:
Советую не заниматься ерундой, а удалить тот robots, который сейчас через ПУ сайта и подождать, пока UCOZ не восстановит нормальный... И еще раз про host... Он не имеет значения для сайтов на UCOZ, тем более домен вашего сайта однозначен в любом виде...
Домен менялся... Это стоит родной, непродолжительное время стоял другой домен.
Код
User-agent: *
Disallow:
Host: gamebot.my1.ru

Sitemap: http://gamebot.my1.ru/sitemap.xml
Sitemap: http://gamebot.my1.ru/sitemap-forum.xml

Зачем умничать то? Страндартный Robots.Txt проработан временем, и специалисты данной системы учтя все нюансы, создали нормальный Robots.txt который позволит вашему сайту более тщательно и быстро индексироваться.
Единственное, что можно поставить директиву "Host" на главный домен...
Для вашего сайта вот такой Robots.Txt подойдёт:
Код
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search

Host: gamebot.my1.ru

Sitemap: http://gamebot.my1.ru/sitemap.xml
Sitemap: http://gamebot.my1.ru/sitemap-forum.xml
Изменено: abc000 - 15 Апреля 2011 07:54
...
Страницы: 1 2 След.
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
06:34 Adsense личный опыт 
04:45 на чем можно создать форум? 
04:42 как прописать метатеги и кейвордс на вордпресс? 
23:31 Апдейт тиц яндекса 13.09.2016 
23:02 Весёлый опыт с Вебартексом 
21:23 Оцените, пожалуйста, сайт 
20:54 Ссылочная биржа TrustLink 
06:22 Веб-дизайн недорого! 
23:22 Создание и доработка сайтов 
23:00 3 совета по Юзабилити и Конверсии / SEO аудит 
22:56 Продам Торрент Трекер (ХХХ) недорого с автопарсером 
22:35 Дизайн для сайта, баннеры, фавикон, логотип, иконки. 
22:21 Веб-дизайн сайтов различной тематики 
22:07 Качественный прогон Хрумером всего 10 WMZ 
06:11 В чём ошибка? Почему люди не хотят заработать ~24 500 руб.?) 
05:43 Халява, почти. Текст более 3 млн.сим., ~200 тИЦ, до 10 тыс.твиттер прогон (значения указаны суммарно) БЕСПЛАТНО 
04:30 Подскажите хостинг для аудиофайлов(музыки) 
01:46 Перфекционистам - тема для обсуждения) 
23:54 Пришло сообщение от Google 
23:22 Кнопка tweeter для wordpress 
19:46 Что делать с подобными темами? способ ведения