robots.txt запрет пагинации
Страницы: 1
robots.txt запрет пагинации
Доброго дня всем! подскажите правильно ли я делаю запрет на индексацию пагинации?

какой вариант правильный?


Disallow: /*?server=
Disallow: /*?page=
Disallow: /*&page=
Disallow: /*&page=
Disallow: /*?group=0&page=

Disallow: *?server=
Disallow: *?page=
Disallow: *&page=
Disallow: *&page=
Disallow: *?group=0&page=
.........
Оба
Цитата
Coder пишет:
.........
Оба
спасибо за овтет!
т.е если к примеру вот ссылка
https://ссылкасайта/events?page=2
То ?page= не будет индексироваться?
правильно я понимаю?
Цитата
Alexs12919 пишет:
правильно я понимаю?
Ага) Только в роботсе не запреты, а пожелания - как какой бот настроен.
Кроме того, не попадание в индекс не означает непереход по ссылке.

Ну, это к слову)
Цитата
Coder пишет:
Цитата
Alexs12919 пишет:
правильно я понимаю?
Ага) Только в роботсе не запреты, а пожелания - как какой бот настроен.
Кроме того, не попадание в индекс не означает непереход по ссылке.

Ну, это к слову)
подскажите еще пожалуйста, а это правильно что в поиске когда пишу site:свойсайт.ком и там проиндексировано robots.txt и sitemap.xml
Как с этим быть?
Изменено: Alexs12919 - 4 Марта 2024 19:40
Нормально, имхо
Coder, а как даркнет скрывается?
Цитата
Ingvarr пишет:
Coder, а как даркнет скрывается?
Я белый и пушистый - не знаю про такие ужасти...
Цитата
Coder пишет:
Цитата
Ingvarr пишет:
Coder, а как даркнет скрывается?
Я белый и пушистый - не знаю про такие ужасти...

Они же как-то не индексируются smile;)
Цитата
discipulus пишет:
Цитата
Coder пишет:
Цитата
Ingvarr пишет:
Coder, а как даркнет скрывается?
Я белый и пушистый - не знаю про такие ужасти...

Они же как-то не индексируются smile;)
Мои файлы на компьютере тоже не индексируются, но я могу с телефона получить к ним доступ. Тот же принцип. Свои протоколы, свои точки соединения, которые не знают не только поисковики, но и те, кому там не рады.
Мы не можем похвастаться мудростью глаз
И умелыми жестами рук,
Нам не нужно все это, чтобы друг друга понять.
Сигареты в руках, чай на столе - так замыкается круг,
И вдруг нам становится страшно что-то менять.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
10:12 Кто-то научился фильтровать новых ИИ-ботов? Метрика сходит с ума 
08:45 Карпати реально заставил GPT, Кло, Gemini и Grok спорить между собой перед ответом 
08:26 Праздники кончились, а трафик так и не вернулся. Глюк или фильтр? 
06:37 SEO под нейро 
01:48 Порекомендуйте редактор кода 
01:41 Смена струкуры URL сайта плохо для SEO? 
01:39 Как собрать все url страниц сайта? 
10:30 Monitex: Мониторинг с кэшбэком 80% в USDT 
10:16 Bardo — Бюро развития и координации цифровых операций. 
05:49 От $0.015 за IP | $0.68 за ГБ | 9PROXY.COM | 20+ млн резидентных прокси | 99,95% аптайм | Без чёрных списков 
19:19 [MOBILE 4G/LTE PROXY] Приватные Мобильные Прокси 30 Дней 10$ Безлим/ Подходят для всех сайтов 
00:07 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника 
18:35 Курс по Продаже Ссылок в Буржнете !!! 
11:25 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 
11:00 Огородники 
10:58 Список обновленных тем пуст... 
10:20 Тройной агент Паша Дуров 
10:07 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 
09:19 Оцифровка старых физических фотографий 
09:13 О природе путешествий. 
09:00 Помогите, пожалуйста...