|
#1
23 Января 2012 14:15
Привет!
У меня вопрос, вчера было около 500 страниц заблокированных через robots.txt я создал новый (в вебмастере гугл) залил на сайт... сегодня 1580 заблокировано.. как так? как сделать robots.txt что бы не было заблокированных страниц?  |
|
#2
23 Января 2012 14:23
Нужно внятнее описывать. Не понятно совсем что ты хочешь.
Если тебе нужно чтоб ПС вообще не блокировали никакие страницы сайта, то снеси запреты в роботсе. А если как ты говоришь, создал новый роботс, а он наблокировал ещё больше страниц, то значит роботс кривой. |
|
#3
23 Января 2012 14:31
Dymatize,
эмм.... я вроде бы и написал "...как сделать что бы не было заблокированных страниц..."
мой robots выглядит так User-agent: * Allow: /photo/ Allow: /stuff Allow: /board Allow: /index Allow: /load Allow: /dir Allow: /search Allow: /publ Allow: / Allow: /tests User-agent: Mediapartners-Google Allow: /photo/ Allow: /stuff Allow: /board Allow: /index Allow: /load Allow: /dir Allow: /search Allow: /publ Allow: / Allow: /tests User-agent: Googlebot-Image Allow: /photo/ Allow: /stuff Allow: /board Allow: /index Allow: /load Allow: /dir Allow: /search Allow: /publ Allow: / Allow: /tests или я неправильно его сделал..?  |
|
#4
23 Января 2012 14:39
Зачем писать ботам какие именно категории открыты? они итак поймут. Если категория в роботсе не закрыта, то значит можно индексировать.
Ты лучше снеси этот бред, и просто напиши какие категории хочешь что Пс НЕ индексировали А если хочешь что вообще всё подряд индексировали, то можешь вообще роботс снести 
Изменено:
Dymatize - 23 Января 2012 14:40
|
|
#5
23 Января 2012 15:05
ааа.. ты я олень!
я типо ботам помочь хотел, чтоб быстрее  ))
я тогда удалю его нафиг) |
|
#6
23 Января 2012 15:28
Бот, на то и бот, чтоб ходить самому, без помощи. Подтолкнуть его нельзя :-))) В роботсе можно только запретить что-то индексировать, но к ускорению, или замедлению это никак не относится. А вот почему страницы блокируются гуглом, сам гугл описывает очень четко в своих Инструментах для веб-мастеров. Найдите и прочтите, очень полезно. |
|
#7
23 Января 2012 16:06
Юрий,
теперь я понял) 
Спасибо! |
|
#8
24 Января 2012 16:34
блин!
сегодня уже 2500 страниц заблокированы файлом роботс.тхт но я же его удалил.. чё делать? подождать, или? |
|
#9
24 Января 2012 16:46
удалил и не парься) жди когда повсплывают) |
|
#10
24 Января 2012 21:01
Покажи примеры страниц, которые улетели
|
|
#11
26 Января 2012 14:33
яндекс начал добавлять странички, после удаления "роботс"
 |
||||
23.12.2025 (91 день назад)
21.03.2026 (3 дня назад)
