Вопрос по роботсу
Страницы: 1 2 След.
Вопрос по роботсу
Здраствуйте, у меня такой вопрос :

В роботсе было написано Disallow: /*forum это значит что форум не индексировался? Верно?

И ещё Disallow: /*jcomments это запред индексикации коментариев?
видимо да, анализировать тут http://webmaster.yandex.ru/robots.xml
Сергей Мещеряков,
Как я понял у вас joomla. Вот самый подходящий robots, исключающий все дубли и ненужные страницы.
User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /component/content/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /*.pdf
Disallow: /*.swf
Disallow: /*print=1
Disallow: /*mailto/
Disallow: /index.php?start=
Disallow: /index.html
Disallow: /home
Sitemap: Ссылка на карту сайта формата XML

User-agent: Yandex
Disallow: /administrator/
Disallow: /cache/
Disallow: /component/content/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /*.pdf
Disallow: /*.swf
Disallow: /*print=1
Disallow: /*mailto/
Disallow: /index.php?start=
Disallow: /index.html
Disallow: /home
Host: Ссылка на сайт например site.ru или www.site.ru
Sitemap: Ссылка на карту сайта формата XML
Цитата
ov3rdoc пишет:
Disallow: /index.php?start=
Сорри, от морды одна страница останется? Зачем?
Цитата
Espinosa пишет:
Цитата
ov3rdoc пишет:
Disallow: /index.php?start=
Сорри, от морды одна страница останется? Зачем?

Нет, если у вас на главной режим блога, то внизу переключение на страницы типа sine.ru/index.php?start=5 индексироваться не будет, ибо это дубли страниц. Статьи у вас в категориях, в каком либо меню. Даже не знаю как обьяснить smile:) , если не поняли, пишите в лс, либо icq. 1999-8111, Алексей.
На главной блог, правильно, материал делим на две части вставкой "подробнее", по меню списки категорий. В итоге с главной 10 страниц index.php?start= прекрасно индексируются)
Цитата
ov3rdoc пишет:
Цитата
Espinosa пишет:
Цитата
ov3rdoc пишет:
Disallow: /index.php?start=
Сорри, от морды одна страница останется? Зачем?

Нет, если у вас на главной режим блога, то внизу переключение на страницы типа sine.ru/index.php?start=5 индексироваться не будет, ибо это дубли страниц. Статьи у вас в категориях, в каком либо меню. Даже не знаю как обьяснить , если не поняли, пишите в лс, либо icq. 1999-8111, Алексей.


А индексироватся хорошо будет?
Цитата
Espinosa пишет:
На главной блог, правильно, материал делим на две части вставкой "подробнее", по меню списки категорий. В итоге с главной 10 страниц index.php?start= прекрасно индексируются)

К примеру поисковик был на странице index.php?start=2, нашёл определенные статьи, в поисковике выдал страницу index.php?start=2 с тем что там было. Прошла неделя, новые материалы сдвинули все статьи со 2 на 5 например страницу, а в выдаче по запросам всё так же выдает 2 страницу. Пользователь вписал запрос, перёшел, а там не то, что ему нужно. Пользователь закрыл страницу и ушёл - вы потеряли человека... smile:) Вот вам наглядный пример. А этот человек может быть и толпой людей... smile:)
Цитата
Сергей Мещеряков пишет:
А индексироватся хорошо будет?
cheat-online.ru, http://www.cy-pr.com/analysis/cheat-online.ru
Цитата
ov3rdoc пишет:
Прошла неделя, новые материалы сдвинули все статьи со 2 на 5 например страницу
Яша это всё быстренько проиндексировал и
Цитата
ov3rdoc пишет:
Пользователь вписал запрос, перёшел
как раз туда, где находится материал. Тут всё зависит от того, с какой периодичностью Яша сайт обходит.

Сергей Мещеряков, Вам предложенный ov3rdoc robots.txt подходит вполне, у вас менюшки блогами представленны, у меня же - списками. Как будет индексироваться - это вопрос отдельный, не на одном роботсе индексация зиждется.
Изменено: Espinosa - 3 Января 2012 18:50
Espinosa,
Можно ваш сайт посмотреть? smile:) Как перейдет пользователь на страницу материала, если он попадает на страницу /index.php?start=...? а там, обычно, не один материал.. smile:confused:
Изменено: ov3rdoc - 3 Января 2012 18:58
Цитата
ov3rdoc пишет:
Можно ваш сайт посмотреть?
Скинул в ЛС.
Цитата
ov3rdoc пишет:
Как перейдет пользователь на страницу материала
А кто сказал, что он попадёт на страницу материала? На страницу /index.php?start=...?, на которой находится материал!
Цитата
ov3rdoc пишет:
а там, обычно, не один материал..
Естественно))
Вот если что тот сайт о котором говорим gameleads.net
Будьте добры, подскажите, как правильно прописать код в robots.txt , чтобы разрешены к индексации были только темы с сообщениями на форуме, который расположен по этому адресу: _http://www.moderntrader.ru/forum/index.php ? Я новичок, в этом деле. Буду благодарен (15 wmr), если поможете!
Изменено: Александр Розанов - 28 Января 2012 15:46
ааааааа ну подскажите хоть что и как сделать!
Страницы: 1 2 След.
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
20:57 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 
20:20 кликните сюда 
14:13 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
13:38 2Index - быстрая индексация страниц сайта и обратных ссылок 
12:44 РСЯ и тормоза сайта: Яндекс начал штрафовать за плохой PageSpeed? 
23:09 Как безопасно купить Гугл почту? 
13:45 Какой движок выбрать для форума? 
23:26 Sova.gg - надежный обменник криптовалюты. 
19:23 Mixmasters - Exchange without AML and KYC 
15:54 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old 
14:05 TETChange-Обменник криптовалют 
12:36 Nexulume.com Обменник без AML и KYC 
09:12 Swapwatch.org — Мониторинг криптовалютных обменников 
09:07 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
00:11 Точные прогнозы на футбол 
12:41 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось? 
06:26 Ставки на супер тренды в спорте 
22:31 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 
13:38 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
07:11 Список обновленных тем пуст... 
17:02 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем