Роботс txt
Страницы: Пред. 1 2 3 4 След.
Роботс txt
Цитата
Николай пишет:
а если я напишу Disallow: /index.phpразве она (домен.ру/index.php)будет индексироваться?


нет!
но возможно она ужк проиндексирована smile:p
Изменено: xmediasoft.ru - 14 Июня 2011 19:15

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

1)http://....... ./название товара или страницы.html
2)http://........ ./товар.html?page=shop.product_details&flypage

вот смотрите в 1 у меня так выглядит чисто джомла со статьями
2 у меня так выглядит вируалмарт название товара и абракодабра..это меня в принцие устраивает

но у моих ссылок вируалмарта место названия товар есть дубли http:/........ ./katalog.html?category_id=7&page=shop. и индекс пхп билибердень
вот это каталог? и индекс пхп? полностью дублирует и выводит абсолютно не нужные мне старницы ..все страницы котрые мне не нужны начинаются исключительно на:

1)сайт/katalog.html?
2)сайт/index.php?


плюс дубль главной страницы сайт/index.php

вот имено их я и хочу убрать
вот поэтому в дисалоу я убираю вопросик перед index.php что бы заодно у меня и дубль главной не индексировался
Все верно выше правильно написали если запретить c index.php то все будет норм, если есть страница без index.php, только тут уже звездочку в конце 1000% не ставтье).

И еще лучше чем запрещать (лечить последствия) лучше от нее избавится, выше так же написали один из вариантов как это сделать.
Цитата
xmediasoft.ru пишет:
Цитата
Николай пишет:
а если я напишу Disallow: /index.phpразве она (домен.ру/index.php)будет индексироваться?

нет!
но возможно она ужк проиндексирована

ничего страшного я это горе переживу..роботс ткст надо сперва правильно составить..а потом подумаю и над тем что с этим дублем главной дела
User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /component/
Disallow: /index2.php?*
Disallow: /katalog.html?*
Disallow: /index.php*

мои чпу при таком раскладе и главная остаются в индексе?

пойду в вебмастер вводить и проверять
Изменено: Николай - 14 Июня 2011 19:29
Цитата
SovaBarmak85 пишет:
И еще лучше чем запрещать (лечить последствия) лучше от нее избавится, выше так же написали один из вариантов как это сделать.


Наконец, уже лучше smile:) , ответ на поверхности, и поверь самый правильный, как тока поставишь noindex - будет тебе щасье smile:) , любой робот сунувшись увидев это пойдет спокойно дальше, не трагая эти страницы
1)сайт/katalog.html?*
2)сайт/index.php?
3)*com_virtuemart* - для марта со страницами индекс пхп билибердень

Такой вариант для ваших задач, это мое мнение, но сами по форумам - смотрели этих мнений...
и точно ли нужны эти звёздочки на конце?
Disallow: /index.php* так не делайте мало ли где у вас нужная страница еще появится без чпу
Цитата
xmediasoft.ru пишет:
Наконец, уже лучше , ответ на поверхности, и поверь самый правильный, как тока поставишь noindex - будет тебе щасье , любой робот сунувшись увидев это пойдет спокойно дальше, не трагая эти страницы

как бы вы порпекомендовали мне в этот ноиндекс пару сотен дублей внести? вручную на каждую страницу?
Цитата
SovaBarmak85 пишет:
Disallow: /index.php* так не делайте мало ли где у вас нужная страница еще появится без чпу

значит делать Disallow: /index.php?*....?....а как же дубль главной убрать сайт/index.php

Цитата
SovaBarmak85 пишет:
Disallow: /index.php* так не делайте мало ли где у вас нужная страница еще появится без чпу

да мне бы с уже существующими разобратьса, а не о новыз думать)

ещё раз спрошу..звёздочки вконце точно нужны?
Изменено: Николай - 14 Июня 2011 19:37
Цитата
Николай пишет:
как бы вы порпекомендовали мне в этот ноиндекс пару сотен дублей внести? вручную на каждую страницу?


Я незнаю что у тебя за CMS, да и с php не дружу - тут я тебе не помошник, к сожалению smile:( , попробуй прогуглить или спец. форумы по движкам, авось выгарит

а на своем самописном движке (.Net) - реализовал добавлением тега (автоматом) куда мне нужно
Цитата
Николай пишет:
дубль главной убрать сайт/index.php

чтоб убрать это просто Disallow: /index.php
без звездочки я ж сверху написал

1)сайт/katalog.html?*
2)сайт/index.php?
3)*com_virtuemart* - для марта со страницами индекс пхп билибердень

только тут сам ошибку допустил не так сайт/index.php? а так правильно сайт/index.php
Цитата
Николай пишет:
ещё раз спрошу..звёздочки вконце точно нужны?


дай точнее ссылки (побольше), можно без имени сайта, сам проверю и отпишусь
Цитата
Николай пишет:
ещё раз спрошу..звёздочки вконце точно нужны?


Disallow: /katalog.html?*
Disallow: /index.php
Disallow: /*com_virtuemart*

тут точно написаны зведочки там где надо, и нет там где ненадо)
Пиши
Disallow: /index.php*

Проверял у Гоши:
/index.php - Заблокировано по строке: Disallow: /index.php*
/index.php?id=354353 - Заблокировано по строке: Disallow: /index.php*
Цитата
xmediasoft.ru пишет:
дай точнее ссылки (побольше), можно без имени сайта, сам проверю и отпишусь

вобщем так ..я уже в гугле полазил и попосмотрел какии страницы лишнии а какие нет в индекс попали ...яндекс пишет и без взвёздочек ненужные не индексирует ,а нужные и ндексирует яв вебмастере уже проверил...так что мне в моём не мудрёном роботсе эти звёздочки точно не нужны..ибо в яндесе написано точно ..если звёздочки даже не стоит то она есть по умолчанию..значит никаие звёзды там не нужны

Цитата
SovaBarmak85 пишет:
Цитата
Николай пишет:
ещё раз спрошу..звёздочки вконце точно нужны?


Disallow: /*com_virtuemart*
тут точно написаны зведочки там где надо, и нет там где ненадо)


зачем мне это " /*com_virtuemart*" у меня не одной страницы нету с такой абривеатурой

Цитата
xmediasoft.ru пишет:
Пиши
Disallow: /index.php*
Проверял у Гоши:
/index.php - Заблокировано по строке: Disallow: /index.php*
/index.php?id=354353 - Заблокировано по строке: Disallow: /index.php*

а без звёздочки не блокировал?

я посталю эти звёздочки они не ипромешают..дело ваше
Изменено: Николай - 14 Июня 2011 19:55
Страницы: Пред. 1 2 3 4 След.
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
02:08 Оцените сайт 
00:58 Ошибки html 
00:34 Зависимость позиций в выдаче от директа 
22:33 Вывод с адсенса на банк. счёт 
21:35 Majento - Онлайн сервис мониторинга позиций в Яндекс и Google 
21:20 Апдейт 30.09.16 
21:03 Гугл выдаёт другой титл 
06:01 Прогон по твиттеру, постинг в 1500 аккунтов, ускорение индексации и переиндексация сайтов, сателлитов, дорвеев и ссылок с прогонов 
04:15 Качественный прогон по трастовым сайтам и форумам. Рост ТИЦ, посещаемости и позиций. Множество отзывов, недорого + скидки 
01:22 NewLine.online - Полуавтоматический обмен электронных валют 
00:50 Куплю ссылки 
00:27 Разместим ссылки в статьях на новостном сайте. 
23:46 Обмен ссылками 
22:24 Программ Reg Organizer с лицензионным ключом. 
06:45 Nintendo вновь запустит в продажу оригинальную приставку Dendy 
04:00 Халява, почти. Текст более 3 млн.сим., ~200 тИЦ, до 10 тыс.твиттер прогон (значения указаны суммарно) БЕСПЛАТНО 
03:21 ZerocooL 
01:17 SEOSAN - Мониторинг сайтов для SEO-специалистов 
00:03 Свой загрузчик на сайт, АВ 
23:08 Нужен баннер для популяризации раздела "Интересные темы" (безвозмездно) 
22:44 Хороший, добрый фильм о мужиках!