Роботс или сайт мап?
Страницы: 1
Роботс или сайт мап?
Чему отдадут предпочтения поисковики?

Если в сайт мапе указаны страницы для индексирования. А в роботc указан сайт мап и стоит dislow: / .
Будут ли проиндексированы страницы с сайт мап?



Или как зделать чтоб индексировлись только страницы с сайт мап?

Бесплатная контекстная реклама

http://www.cy-pr.com/forum/f15/t8144/m85681#message85681
Цитата
Duskin пишет:
Duskin пишет:
Disallow: / (это я запретил все, так?)
Allow: document.write('<a href=\'http://mysite.ru/\' target=\'_blank\'>http://mysite.ru/</a>');http://mysite.ru/(это я разрешил главную, так или нет?)

А вы уверены что после Disallow: / робот будет читать строчку n=n+1 ? На сколько заю Disallow: / - Запретить все и все что ниже, и карту тоже...
Цитата
Arte пишет:
dislow: /


пишется это не так.

Цитата
Arte пишет:
А вы уверены что после Disallow: / робот будет читать строчку n=n+1 ? На сколько заю Disallow: / - Запретить все и все что ниже, и карту тоже...


если после него Allow не идёт то будет именно так.
Сделайте как я. Пропишите в на странице метатег robots "noindex, nofollow" а нужные страницы откройте.
Цитата
Duskin пишет:
Сделайте как я. Пропишите в на странице метатег robots "noindex, nofollow" а нужные страницы откройте.


изврат ) лучше уж тогда заголовком сервера
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)