Вопрос по роботсу
Страницы: 1 2 След.
Вопрос по роботсу
Здраствуйте, у меня такой вопрос :

В роботсе было написано Disallow: /*forum это значит что форум не индексировался? Верно?

И ещё Disallow: /*jcomments это запред индексикации коментариев?
видимо да, анализировать тут http://webmaster.yandex.ru/robots.xml
Сергей Мещеряков,
Как я понял у вас joomla. Вот самый подходящий robots, исключающий все дубли и ненужные страницы.
User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /component/content/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /*.pdf
Disallow: /*.swf
Disallow: /*print=1
Disallow: /*mailto/
Disallow: /index.php?start=
Disallow: /index.html
Disallow: /home
Sitemap: Ссылка на карту сайта формата XML

User-agent: Yandex
Disallow: /administrator/
Disallow: /cache/
Disallow: /component/content/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /*.pdf
Disallow: /*.swf
Disallow: /*print=1
Disallow: /*mailto/
Disallow: /index.php?start=
Disallow: /index.html
Disallow: /home
Host: Ссылка на сайт например site.ru или www.site.ru
Sitemap: Ссылка на карту сайта формата XML
Цитата
ov3rdoc пишет:
Disallow: /index.php?start=
Сорри, от морды одна страница останется? Зачем?
Цитата
Espinosa пишет:
Цитата
ov3rdoc пишет:
Disallow: /index.php?start=
Сорри, от морды одна страница останется? Зачем?

Нет, если у вас на главной режим блога, то внизу переключение на страницы типа sine.ru/index.php?start=5 индексироваться не будет, ибо это дубли страниц. Статьи у вас в категориях, в каком либо меню. Даже не знаю как обьяснить smile:) , если не поняли, пишите в лс, либо icq. 1999-8111, Алексей.
На главной блог, правильно, материал делим на две части вставкой "подробнее", по меню списки категорий. В итоге с главной 10 страниц index.php?start= прекрасно индексируются)
Цитата
ov3rdoc пишет:
Цитата
Espinosa пишет:
Цитата
ov3rdoc пишет:
Disallow: /index.php?start=
Сорри, от морды одна страница останется? Зачем?

Нет, если у вас на главной режим блога, то внизу переключение на страницы типа sine.ru/index.php?start=5 индексироваться не будет, ибо это дубли страниц. Статьи у вас в категориях, в каком либо меню. Даже не знаю как обьяснить , если не поняли, пишите в лс, либо icq. 1999-8111, Алексей.


А индексироватся хорошо будет?
Цитата
Espinosa пишет:
На главной блог, правильно, материал делим на две части вставкой "подробнее", по меню списки категорий. В итоге с главной 10 страниц index.php?start= прекрасно индексируются)

К примеру поисковик был на странице index.php?start=2, нашёл определенные статьи, в поисковике выдал страницу index.php?start=2 с тем что там было. Прошла неделя, новые материалы сдвинули все статьи со 2 на 5 например страницу, а в выдаче по запросам всё так же выдает 2 страницу. Пользователь вписал запрос, перёшел, а там не то, что ему нужно. Пользователь закрыл страницу и ушёл - вы потеряли человека... smile:) Вот вам наглядный пример. А этот человек может быть и толпой людей... smile:)
Цитата
Сергей Мещеряков пишет:
А индексироватся хорошо будет?
cheat-online.ru, http://www.cy-pr.com/analysis/cheat-online.ru
Цитата
ov3rdoc пишет:
Прошла неделя, новые материалы сдвинули все статьи со 2 на 5 например страницу
Яша это всё быстренько проиндексировал и
Цитата
ov3rdoc пишет:
Пользователь вписал запрос, перёшел
как раз туда, где находится материал. Тут всё зависит от того, с какой периодичностью Яша сайт обходит.

Сергей Мещеряков, Вам предложенный ov3rdoc robots.txt подходит вполне, у вас менюшки блогами представленны, у меня же - списками. Как будет индексироваться - это вопрос отдельный, не на одном роботсе индексация зиждется.
Изменено: Espinosa - 3 Января 2012 18:50
Espinosa,
Можно ваш сайт посмотреть? smile:) Как перейдет пользователь на страницу материала, если он попадает на страницу /index.php?start=...? а там, обычно, не один материал.. smile:confused:
Изменено: ov3rdoc - 3 Января 2012 18:58
Цитата
ov3rdoc пишет:
Можно ваш сайт посмотреть?
Скинул в ЛС.
Цитата
ov3rdoc пишет:
Как перейдет пользователь на страницу материала
А кто сказал, что он попадёт на страницу материала? На страницу /index.php?start=...?, на которой находится материал!
Цитата
ov3rdoc пишет:
а там, обычно, не один материал..
Естественно))
Вот если что тот сайт о котором говорим gameleads.net
Будьте добры, подскажите, как правильно прописать код в robots.txt , чтобы разрешены к индексации были только темы с сообщениями на форуме, который расположен по этому адресу: _http://www.moderntrader.ru/forum/index.php ? Я новичок, в этом деле. Буду благодарен (15 wmr), если поможете!
Изменено: Александр Розанов - 28 Января 2012 15:46
ааааааа ну подскажите хоть что и как сделать!
Страницы: 1 2 След.
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
17:29 Как продвигать сайт с неуникальным контентом 
13:54 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
14:50 Индексация страниц 
12:36 У кого новостник, дайте пару советов плиз 
13:53 AviTool - мощный инструмент для автоматизации работы с Avito 
17:01 Absence в Армении 
23:19 Ребята подскажите какими сервисами и прогами вы пользуетесь для SEO продвижения? 
12:53 BIGPROXY.SHOP - Резидентные Ротационные Backconnect Proxy USA EUROPA MIX [Безлимитный трафик] 
12:15 SpaceSwap.cc - Быстрый и надежный обменник криптовалют 
11:27 GoodsMoney.io 
10:44 Продажа аккаунтов HH.RU 
04:05 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
21:57 Обменник криптовалюты OnlyCrypto 
20:55 Скрипт обменника валют 
19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор 
22:08 Накрутка поисковых подсказок 
05:04 Точные прогнозы на футбол 
14:01 Union Pharm - топовая фарма-партнерка для профессионалов! 
10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 
12:23 150+ хакерских поисковых систем и инструментов 
17:41 Стряхнуть обыденность - об Агасфере