Роботс или сайт мап?
Страницы: 1
Роботс или сайт мап?
Чему отдадут предпочтения поисковики?

Если в сайт мапе указаны страницы для индексирования. А в роботc указан сайт мап и стоит dislow: / .
Будут ли проиндексированы страницы с сайт мап?



Или как зделать чтоб индексировлись только страницы с сайт мап?

Бесплатная контекстная реклама

http://www.cy-pr.com/forum/f15/t8144/m85681#message85681
Цитата
Duskin пишет:
Duskin пишет:
Disallow: / (это я запретил все, так?)
Allow: document.write('<a href=\'http://mysite.ru/\' target=\'_blank\'>http://mysite.ru/</a>');http://mysite.ru/(это я разрешил главную, так или нет?)

А вы уверены что после Disallow: / робот будет читать строчку n=n+1 ? На сколько заю Disallow: / - Запретить все и все что ниже, и карту тоже...
Цитата
Arte пишет:
dislow: /


пишется это не так.

Цитата
Arte пишет:
А вы уверены что после Disallow: / робот будет читать строчку n=n+1 ? На сколько заю Disallow: / - Запретить все и все что ниже, и карту тоже...


если после него Allow не идёт то будет именно так.
Сделайте как я. Пропишите в на странице метатег robots "noindex, nofollow" а нужные страницы откройте.
Цитата
Duskin пишет:
Сделайте как я. Пропишите в на странице метатег robots "noindex, nofollow" а нужные страницы откройте.


изврат ) лучше уж тогда заголовком сервера
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
10:39 Апдейт яндекс 20.01.2017 
10:20 Апдейт яндекс 18.01.2017 
10:18 Внешняя оптимизация – основные правила закупки ссылок 
09:43 просьба оценить направление для сайта о гиковской, компьютерной направленности 
09:21 Рекламная сеть яндекса личный опыт 
04:41 Поисковики не обновляют твиттер 
04:19 Переезд сайта с http на https 
10:21 Бесплатный SEO-Аудит. Получи 3 полных отчета по сайту! 
10:07 Парсинг сайтов с поиска 
09:58 Качественный прогон Хрумером всего 10 WMZ 
09:12 аккаунт adwords 
00:13 Вакансии: Операторы и редакторы по обработке статей из вебархива 
23:40 20 крутых ссылок всего за 499 рублей! Из них 14 сайтов в ЯК, 6 в DMOZ, средний ТИЦ 225. Только ручное размещение! 
20:29 Создание и доработка сайтов 
03:18 Китайцы создали способного за секунду заменить журналистов робота 
00:45 Роботы могут получить юридический статус в ЕС 
00:15 Создать несколько сайтов 
23:58 Chat Wars - первая MMORPG в Telegram 
23:24 что может быть с сайтом? 
23:22 Москвичу отказали в работе из-за шести друзей во "ВКонтакте" 
22:49 Стоит ли покупать ссылку с Wikipedia ?