robots.txt запрет пагинации
Страницы: 1
robots.txt запрет пагинации
Доброго дня всем! подскажите правильно ли я делаю запрет на индексацию пагинации?

какой вариант правильный?


Disallow: /*?server=
Disallow: /*?page=
Disallow: /*&page=
Disallow: /*&page=
Disallow: /*?group=0&page=

Disallow: *?server=
Disallow: *?page=
Disallow: *&page=
Disallow: *&page=
Disallow: *?group=0&page=
.........
Оба
Цитата
Coder пишет:
.........
Оба
спасибо за овтет!
т.е если к примеру вот ссылка
https://ссылкасайта/events?page=2
То ?page= не будет индексироваться?
правильно я понимаю?
Цитата
Alexs12919 пишет:
правильно я понимаю?
Ага) Только в роботсе не запреты, а пожелания - как какой бот настроен.
Кроме того, не попадание в индекс не означает непереход по ссылке.

Ну, это к слову)
Цитата
Coder пишет:
Цитата
Alexs12919 пишет:
правильно я понимаю?
Ага) Только в роботсе не запреты, а пожелания - как какой бот настроен.
Кроме того, не попадание в индекс не означает непереход по ссылке.

Ну, это к слову)
подскажите еще пожалуйста, а это правильно что в поиске когда пишу site:свойсайт.ком и там проиндексировано robots.txt и sitemap.xml
Как с этим быть?
Изменено: Alexs12919 - 4 Марта 2024 19:40
Нормально, имхо
Coder, а как даркнет скрывается?
Цитата
Ingvarr пишет:
Coder, а как даркнет скрывается?
Я белый и пушистый - не знаю про такие ужасти...
Цитата
Coder пишет:
Цитата
Ingvarr пишет:
Coder, а как даркнет скрывается?
Я белый и пушистый - не знаю про такие ужасти...

Они же как-то не индексируются smile;)
Цитата
discipulus пишет:
Цитата
Coder пишет:
Цитата
Ingvarr пишет:
Coder, а как даркнет скрывается?
Я белый и пушистый - не знаю про такие ужасти...

Они же как-то не индексируются smile;)
Мои файлы на компьютере тоже не индексируются, но я могу с телефона получить к ним доступ. Тот же принцип. Свои протоколы, свои точки соединения, которые не знают не только поисковики, но и те, кому там не рады.
Мы не можем похвастаться мудростью глаз
И умелыми жестами рук,
Нам не нужно все это, чтобы друг друга понять.
Сигареты в руках, чай на столе - так замыкается круг,
И вдруг нам становится страшно что-то менять.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
21:37 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 
19:27 Плагин ответа 
19:20 SEO под нейро 
19:16 Дзен окончательно всё? Или у кого-то еще «стреляет» белый контент? 
19:13 РСЯ и тормоза сайта: Яндекс начал штрафовать за плохой PageSpeed? 
19:10 Трафик пробил дно? Худший январь за 10 лет и внезапный рост продаж с Bing 
15:50 Яндекс туда же: "Нейро" отжал 50% первого экрана. Органический трафик падает 
01:56 В топ1 за 3-5 дней НЕПФ 
00:47 Swapwatch.org — Мониторинг криптовалютных обменников 
18:39 SellBuycoin.io - надежный проводник в мир обмена криптовалют на фиат и наличные по РФ! 
17:25 SMS.PRO - площадка для продажи твоих номеров 
16:14 Все услуги в Телеграм 
14:16 Nexulume.com Обменник без AML и KYC 
13:43 Anonflare - Приватные IPv4 прокси от 0.39 USD 
05:45 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 
05:23 Точные прогнозы на футбол 
01:02 Ставки на супер тренды в спорте 
15:38 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
17:02 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем 
08:25 Отвратительное поведение 
11:00 Кто может дать инвайт на WebMasters?