robots.txt запрет пагинации
Страницы: 1
robots.txt запрет пагинации
Доброго дня всем! подскажите правильно ли я делаю запрет на индексацию пагинации?

какой вариант правильный?


Disallow: /*?server=
Disallow: /*?page=
Disallow: /*&page=
Disallow: /*&page=
Disallow: /*?group=0&page=

Disallow: *?server=
Disallow: *?page=
Disallow: *&page=
Disallow: *&page=
Disallow: *?group=0&page=
.........
Оба
Цитата
Coder пишет:
.........
Оба
спасибо за овтет!
т.е если к примеру вот ссылка
https://ссылкасайта/events?page=2
То ?page= не будет индексироваться?
правильно я понимаю?
Цитата
Alexs12919 пишет:
правильно я понимаю?
Ага) Только в роботсе не запреты, а пожелания - как какой бот настроен.
Кроме того, не попадание в индекс не означает непереход по ссылке.

Ну, это к слову)
Цитата
Coder пишет:
Цитата
Alexs12919 пишет:
правильно я понимаю?
Ага) Только в роботсе не запреты, а пожелания - как какой бот настроен.
Кроме того, не попадание в индекс не означает непереход по ссылке.

Ну, это к слову)
подскажите еще пожалуйста, а это правильно что в поиске когда пишу site:свойсайт.ком и там проиндексировано robots.txt и sitemap.xml
Как с этим быть?
Изменено: Alexs12919 - 4 Марта 2024 19:40
Нормально, имхо
Coder, а как даркнет скрывается?
Цитата
Ingvarr пишет:
Coder, а как даркнет скрывается?
Я белый и пушистый - не знаю про такие ужасти...
Цитата
Coder пишет:
Цитата
Ingvarr пишет:
Coder, а как даркнет скрывается?
Я белый и пушистый - не знаю про такие ужасти...

Они же как-то не индексируются smile;)
Цитата
discipulus пишет:
Цитата
Coder пишет:
Цитата
Ingvarr пишет:
Coder, а как даркнет скрывается?
Я белый и пушистый - не знаю про такие ужасти...

Они же как-то не индексируются smile;)
Мои файлы на компьютере тоже не индексируются, но я могу с телефона получить к ним доступ. Тот же принцип. Свои протоколы, свои точки соединения, которые не знают не только поисковики, но и те, кому там не рады.
Мы не можем похвастаться мудростью глаз
И умелыми жестами рук,
Нам не нужно все это, чтобы друг друга понять.
Сигареты в руках, чай на столе - так замыкается круг,
И вдруг нам становится страшно что-то менять.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
22:49 MAX попер в бурж: 40 стран, ведение каналов и горы дешевого трафика 
22:19 Телега на ручнике: РКН включил замедление и логи админок покраснели 
22:16 Продажа и покупка Дзен-каналов 
21:58 С чего сейчас проще начать? 
17:17 как оплатить claude и gpt-5 из рф в 2026 чтобы не забанили через три дня 
12:12 Robots txt 
08:16 Стоит ли заморачиваться с мейл ру ? 
22:48 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
17:21 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 
15:53 Belurk — высокоскоростные анонимные прокси от 0,24 рублей 
13:00 От $0.015 за IP | $0.68 за ГБ | 9PROXY.COM | 20+ млн резидентных прокси | 99,95% аптайм | Без чёрных списков 
10:46 Мониторинг обменников Сrypto-scout.io 
08:50 Monitex: Мониторинг с кэшбэком 80% в USDT 
22:52 Mixmasters - Exchange without AML and KYC 
21:46 блокировка youtube 2026: ркн начинает «выдавливание». кто уже пробовал вк видео? 
20:31 молодильные яблоки и живая вода 
19:29 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 
15:35 Куплю проигрышные букмекерские аккаунты 
10:34 Панель Кнопки соцсетей 
22:25 Ставки на супер тренды в спорте 
21:13 Точные прогнозы на футбол