Что добавить в robots.txt
Страницы: Пред. 1 2 3 След.
Что добавить в robots.txt
Цитата
antisept пишет:
Цитата
Антон Елошин пишет:
ТОесть сайт не индексировался только яндексом ?

сайт не индексировался вообще никакими пс.
Цитата
Антон Елошин пишет:
Спасибо за помощь )

обращайся

не,гуглом индексировался.
а так-то можете закрывать тему )
И ещё,может сайт яндексом не индексируется потому что домену 27 дней ?
Цитата
Антон Елошин пишет:
не,гуглом индексировался.


может гугл к вам так редко заходит? Рано или поздно, с таким роботсом, он бы выпал из индекса, это точно.

Цитата
Антон Елошин пишет:
И ещё,может сайт яндексом не индексируется потому что домену 27 дней ?


нет, возраст домена, в данном случае, значения не имеет.
чё вы тут лечите пацана умники блин всё у него нормальный роботс! хрень ему парите какуету! хоть один из вам имел дело с юкозом???

после создания сайта, 30 дней карантин! НО ЕСЛИ КУПИЛ ПРЕМИУМ(ДОМЕН)! то карантин снимается! и сами админы юкоза советуют не не трогать роботс, потому что он уже и так настроен максимально правильно!

в яше на выдаче стоит по запросу "mapcs.ru"
Нашлось
63 ответа

чё ты хочешь от стольких ответов в яше!
пусть сайт сперва прогоняет по каталогам и всяким другим местам! потом и в выдаче будет!

вот мой роботс всмотрите умники

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /mchat
Disallow: /index/ssylki/
Disallow: /load/vc_nbcvn/
Disallow: /forum
Disallow: /board
Disallow: /blog
Disallow: /photo
Disallow: /stuff
Disallow: /gb
Disallow: /index/0-3
Disallow: /index/0-2
Disallow: /informer/

Sitemap: http://ElectroVsFidget.ru/sitemap.xml

User-agent: Yandex
Host: ElectroVsFidget.ru
ElectroVsFidget.ru
Твой сайт ? smile:D
Ребята посмотрите и мой роботс, плиз komandor.dn.ua может что-то поправить надо. Это мой первый сайт и хотелось бы получить оценку и помощь профи.
Цитата
Антон Елошин пишет:
ElectroVsFidget.ru
Твой сайт ?


Мой а что?
Просто как ты можешь быть норм "советчиком" если ты мне кинул роботс с "ссылкой" на твой сайт...
А для чего в роботе делать ссылки на свой сайт?
Цитата
Антон Елошин пишет:
Просто как ты можешь быть норм "советчиком" если ты мне кинул роботс с "ссылкой" на твой сайт...


короче деревня разбирайся сам! даже объяснять ни чего не охота................

пришел сюда спрашивать! ещё возмущается...... ипануться можно, вот люди пошли...................
Изменено: djphobos - 29 Ноября 2011 19:35
Цитата
djphobos пишет:
Цитата
Антон Елошин пишет:
Просто как ты можешь быть норм "советчиком" если ты мне кинул роботс с "ссылкой" на твой сайт...

короче деревня разбирайся сам! даже объяснять ни чего не охота................
пришел сюда спрашивать! ещё возмущается...... ипануться можно, вот люди пошли...................

Понятно всё с тобой,даже объяснять нечего не захотел , по тому что ничего ответить и не смог,а начал говорить что я деревня и т.д
И ещё правила форума нарушаешь - материшся(в замаскированной форме).
Модеры,закрывайте тему,мне уже помогли)а то будут тут оффтопить
Подскажите мне тоже!
Что значит последняя строчка?
User-agent: *
Disallow: /application/
Disallow: /development/
Disallow: /externals/
Disallow: /temporary/
sitemap: /index.php/sitemap?format=xml&rewrite=1
[/B]
Цитата
antisept пишет:
Цитата
mozambik пишет:
сайт на карантине!

вы статистику смотрели? какой карантин, если сайту уже ~ 4 месяца.
Антон Елошин,
поставьте стандартный robots:
Код
 User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Sitemap: http://mapcs.ru/sitemap.xml
Sitemap: http://mapcs.ru/sitemap-forum.xml 


У меня такая же проблема. Сайту больше 2-ух лет. Стоит стандартный robots.txt, и все было хорошо, пока не поставил на сайте скрипт флеш облако. Взято с этого места. [B]http://forum.ucoz.ru/forum/33-28742-1
После этого решил проверить сайт на посещаемость, на сайте http://be1.ru/stat/ здесь-же узнал что у меня есть ссылки запрещенные к индексации при помощи noindex: 50. при помощи nofollow: 50. После того как удалил со с воего сайта скрипт облака тегов, анализ показывает что запрещенных к индексации ссылок нет. В чем прикол тогда этой статьи? http://www.google.com/support/webmasters/bin/answer.py?answer=156449&hl=ru Нажать:Создать файл robots.txt вручную
Где говорится что:
Блокирование роботов user-agent

В строке Disallow перечисляются страницы, которые необходимо заблокировать. Можно указать конкретный URL или шаблон. Ввод должен начинаться с косой черты (/).

1. Чтобы заблокировать весь сайт, используйте косую черту.

Disallow: /

2. Чтобы заблокировать каталог и все его содержание, введите после названия каталога косую черту.

Disallow: /nenuzhnyj-katalog/

3. Чтобы заблокировать страницу, укажите эту страницу.

Disallow: /lichnyj_file.html
Изменено: Katrin - 30 Ноября 2011 13:45 (Предупреждение! Правила пункт 14 "...излишнее выделение текста в целях привлечения внимания полужирным шрифтом...")
У меня тоже стоял "Облако тегов", но я сайт только сделал и он долго не индексировался, а как убрал этот мод, сразу пошла индексация.
Цитата
Руслан пишет:
Ребята посмотрите и мой роботс, плиз komandor.dn.ua может что-то поправить надо. Это мой первый сайт и хотелось бы получить оценку и помощь профи.

Нормальный роботс, правда не знаю какой движок. Можно добавить директиву Host
Код
Host: komandor.dn.ua

Цитата
Александр Катляров пишет:
Подскажите мне тоже! Что значит последняя строчка?

Ссылка на карту сайта, - помогает роботу быстрее искать новые страницы
Страницы: Пред. 1 2 3 След.
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
22:27 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
12:39 2Index - быстрая индексация страниц сайта и обратных ссылок 
06:17 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 
11:46 SharkBoss - партнёрская программа для монетизации ЛЮБЫХ видов трафика (включая спам). 
23:10 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
21:20 Rotapost прикрыли! Чем пользоваться? 
00:23 Раскрутка форума 
01:11 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc 
23:28 Помогите с оценкой стоимости сайта 
18:38 Продажа аккаунтов HH.RU 
13:38 BIGPROXY.SHOP - Резидентные Ротационные Backconnect Proxy USA EUROPA MIX [Безлимитный трафик] 
13:16 PonyBit.ru - обменный пункт PonyBit.ru (Понибит.ру) 
12:46 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно 
12:12 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 
13:08 Бесплатный майнинг Tether (USDT) 
10:29 С юмором по жизни! 
16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 
20:43 Добро пожаловать в цифровой мир... 
15:59 Про мясо 
23:09 ПП от PMS remote.team - 200$ за команду 
13:28 Компьютерная мышь