robots.txt запрет пагинации
Страницы: 1
robots.txt запрет пагинации
Доброго дня всем! подскажите правильно ли я делаю запрет на индексацию пагинации?

какой вариант правильный?


Disallow: /*?server=
Disallow: /*?page=
Disallow: /*&page=
Disallow: /*&page=
Disallow: /*?group=0&page=

Disallow: *?server=
Disallow: *?page=
Disallow: *&page=
Disallow: *&page=
Disallow: *?group=0&page=
.........
Оба
Цитата
Coder пишет:
.........
Оба
спасибо за овтет!
т.е если к примеру вот ссылка
https://ссылкасайта/events?page=2
То ?page= не будет индексироваться?
правильно я понимаю?
Цитата
Alexs12919 пишет:
правильно я понимаю?
Ага) Только в роботсе не запреты, а пожелания - как какой бот настроен.
Кроме того, не попадание в индекс не означает непереход по ссылке.

Ну, это к слову)
Цитата
Coder пишет:
Цитата
Alexs12919 пишет:
правильно я понимаю?
Ага) Только в роботсе не запреты, а пожелания - как какой бот настроен.
Кроме того, не попадание в индекс не означает непереход по ссылке.

Ну, это к слову)
подскажите еще пожалуйста, а это правильно что в поиске когда пишу site:свойсайт.ком и там проиндексировано robots.txt и sitemap.xml
Как с этим быть?
Изменено: Alexs12919 - 4 Марта 2024 19:40
Нормально, имхо
Coder, а как даркнет скрывается?
Цитата
Ingvarr пишет:
Coder, а как даркнет скрывается?
Я белый и пушистый - не знаю про такие ужасти...
Цитата
Coder пишет:
Цитата
Ingvarr пишет:
Coder, а как даркнет скрывается?
Я белый и пушистый - не знаю про такие ужасти...

Они же как-то не индексируются smile;)
Цитата
discipulus пишет:
Цитата
Coder пишет:
Цитата
Ingvarr пишет:
Coder, а как даркнет скрывается?
Я белый и пушистый - не знаю про такие ужасти...

Они же как-то не индексируются smile;)
Мои файлы на компьютере тоже не индексируются, но я могу с телефона получить к ним доступ. Тот же принцип. Свои протоколы, свои точки соединения, которые не знают не только поисковики, но и те, кому там не рады.
Мы не можем похвастаться мудростью глаз
И умелыми жестами рук,
Нам не нужно все это, чтобы друг друга понять.
Сигареты в руках, чай на столе - так замыкается круг,
И вдруг нам становится страшно что-то менять.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
00:19 Telegram тонет? Убытки $222 млн и массовая распродажа TON 
00:08 Реальный кейс 2026: Как ИИ убил трафик на документацию и оставил людей без работы 
15:25 Со Старым Новым годом! И с "подарком" от Яндекса (Апдейт 14.01) 
15:15 Как монетизировать сайт игровой тематики. 
15:13 Яндекс опять крутит? Апдейт 12 января 
15:12 Вебмастерам приготовиться: к концу 2026 ChatGPT планирует полностью забрать рутину юзеров 
22:08 Яндекс туда же: "Нейро" отжал 50% первого экрана. Органический трафик падает 
04:07 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
21:06 Продажа аккаунтов HH.RU, В продаже готовые аккаунты HH.RU (headhunter) и AVITO ИП 
20:49 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
18:55 Belurk — высокоскоростные анонимные прокси от 0,24 рублей 
18:06 Проверка истории авто по VIN или гос номеру | автотека 
18:02 GoodsMoney.io 
17:16 nexgen24.io - криптовалюта и фиат в одном месте 
00:12 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем 
18:50 Добро пожаловать в цифровой мир... 
22:14 Какой фильм вы любите посмотреть перед сном? 
20:24 Программирование (кодинг) на смартфоне 
22:18 С юмором по жизни! 
22:02 Астероид отменяется. Человечеству угрожает... сперма Дурова 
21:49 ИИ от Илона "сорвался с цепи": Grok завалил пользователей клубничкой