Вопрос по роботсу
Страницы: 1 2 След.
Вопрос по роботсу
Здраствуйте, у меня такой вопрос :

В роботсе было написано Disallow: /*forum это значит что форум не индексировался? Верно?

И ещё Disallow: /*jcomments это запред индексикации коментариев?
видимо да, анализировать тут http://webmaster.yandex.ru/robots.xml
Сергей Мещеряков,
Как я понял у вас joomla. Вот самый подходящий robots, исключающий все дубли и ненужные страницы.
User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /component/content/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /*.pdf
Disallow: /*.swf
Disallow: /*print=1
Disallow: /*mailto/
Disallow: /index.php?start=
Disallow: /index.html
Disallow: /home
Sitemap: Ссылка на карту сайта формата XML

User-agent: Yandex
Disallow: /administrator/
Disallow: /cache/
Disallow: /component/content/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /*.pdf
Disallow: /*.swf
Disallow: /*print=1
Disallow: /*mailto/
Disallow: /index.php?start=
Disallow: /index.html
Disallow: /home
Host: Ссылка на сайт например site.ru или www.site.ru
Sitemap: Ссылка на карту сайта формата XML
Цитата
ov3rdoc пишет:
Disallow: /index.php?start=
Сорри, от морды одна страница останется? Зачем?
Цитата
Espinosa пишет:
Цитата
ov3rdoc пишет:
Disallow: /index.php?start=
Сорри, от морды одна страница останется? Зачем?

Нет, если у вас на главной режим блога, то внизу переключение на страницы типа sine.ru/index.php?start=5 индексироваться не будет, ибо это дубли страниц. Статьи у вас в категориях, в каком либо меню. Даже не знаю как обьяснить smile:) , если не поняли, пишите в лс, либо icq. 1999-8111, Алексей.
На главной блог, правильно, материал делим на две части вставкой "подробнее", по меню списки категорий. В итоге с главной 10 страниц index.php?start= прекрасно индексируются)
Цитата
ov3rdoc пишет:
Цитата
Espinosa пишет:
Цитата
ov3rdoc пишет:
Disallow: /index.php?start=
Сорри, от морды одна страница останется? Зачем?

Нет, если у вас на главной режим блога, то внизу переключение на страницы типа sine.ru/index.php?start=5 индексироваться не будет, ибо это дубли страниц. Статьи у вас в категориях, в каком либо меню. Даже не знаю как обьяснить , если не поняли, пишите в лс, либо icq. 1999-8111, Алексей.


А индексироватся хорошо будет?
Цитата
Espinosa пишет:
На главной блог, правильно, материал делим на две части вставкой "подробнее", по меню списки категорий. В итоге с главной 10 страниц index.php?start= прекрасно индексируются)

К примеру поисковик был на странице index.php?start=2, нашёл определенные статьи, в поисковике выдал страницу index.php?start=2 с тем что там было. Прошла неделя, новые материалы сдвинули все статьи со 2 на 5 например страницу, а в выдаче по запросам всё так же выдает 2 страницу. Пользователь вписал запрос, перёшел, а там не то, что ему нужно. Пользователь закрыл страницу и ушёл - вы потеряли человека... smile:) Вот вам наглядный пример. А этот человек может быть и толпой людей... smile:)
Цитата
Сергей Мещеряков пишет:
А индексироватся хорошо будет?
cheat-online.ru, http://www.cy-pr.com/analysis/cheat-online.ru
Цитата
ov3rdoc пишет:
Прошла неделя, новые материалы сдвинули все статьи со 2 на 5 например страницу
Яша это всё быстренько проиндексировал и
Цитата
ov3rdoc пишет:
Пользователь вписал запрос, перёшел
как раз туда, где находится материал. Тут всё зависит от того, с какой периодичностью Яша сайт обходит.

Сергей Мещеряков, Вам предложенный ov3rdoc robots.txt подходит вполне, у вас менюшки блогами представленны, у меня же - списками. Как будет индексироваться - это вопрос отдельный, не на одном роботсе индексация зиждется.
Изменено: Espinosa - 3 Января 2012 18:50
Espinosa,
Можно ваш сайт посмотреть? smile:) Как перейдет пользователь на страницу материала, если он попадает на страницу /index.php?start=...? а там, обычно, не один материал.. smile:confused:
Изменено: ov3rdoc - 3 Января 2012 18:58
Цитата
ov3rdoc пишет:
Можно ваш сайт посмотреть?
Скинул в ЛС.
Цитата
ov3rdoc пишет:
Как перейдет пользователь на страницу материала
А кто сказал, что он попадёт на страницу материала? На страницу /index.php?start=...?, на которой находится материал!
Цитата
ov3rdoc пишет:
а там, обычно, не один материал..
Естественно))
Вот если что тот сайт о котором говорим gameleads.net
Будьте добры, подскажите, как правильно прописать код в robots.txt , чтобы разрешены к индексации были только темы с сообщениями на форуме, который расположен по этому адресу: _http://www.moderntrader.ru/forum/index.php ? Я новичок, в этом деле. Буду благодарен (15 wmr), если поможете!
Изменено: Александр Розанов - 28 Января 2012 15:46
ааааааа ну подскажите хоть что и как сделать!
Страницы: 1 2 След.
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
22:11 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
21:45 Как сократить ссылку и зачем это делать. 
16:49 Perfect.Studio: InstAccountsManager — лучший инструмент для автоматизации заработка в Instagram 
19:14 Magic click - гемблинг пп, ставки выше конкурентов 
15:37 Adtrafico - Правильная партнёрская сеть под бурж трафик 
13:38 Вопрос по Cloudflare 
16:33 DreamCash.tl - заработок на онлайн-видео. До 95% отчислений, отличный конверт! 
16:13 Transit-Bit.com - Обмен USDT на IDR, THB, RUB и наличные 
13:49 Продам базу данных предприятий Украины, России, Великобритании, Германии, Испании, Италии, Нидерландов, Польши, Франции, Швейцарии и др. 
11:20 Чек номеров на наличие Telegram/ Filter (checking) numbers Telegram 
11:05 Высококачественные и надежные прокси-серверы и 5G 
10:14 BestChange – обменивать электронную валюту можно быстро и выгодно 
21:12 Ural-obmen.ru — выгодный сервис обмена 
12:35 Современный скрипт обменника электронных валют 
02:47 Точные прогнозы на футбол 
20:22 Как получить рефералов и посетителей на сайт бесплатно. 
18:31 Видимо, похороны СУПРа уже прошли как-то по-тихому 
12:48 Каспкрски ОС 
11:21 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 
14:41 Бесплатный мини-аудит юзабилити и конверсии + технический SEO-аудит в подарок 
15:24 Добро пожаловать в цифровой мир...