robots.txt запрет пагинации
Страницы: 1
robots.txt запрет пагинации
Доброго дня всем! подскажите правильно ли я делаю запрет на индексацию пагинации?

какой вариант правильный?


Disallow: /*?server=
Disallow: /*?page=
Disallow: /*&page=
Disallow: /*&page=
Disallow: /*?group=0&page=

Disallow: *?server=
Disallow: *?page=
Disallow: *&page=
Disallow: *&page=
Disallow: *?group=0&page=
.........
Оба
Цитата
Coder пишет:
.........
Оба
спасибо за овтет!
т.е если к примеру вот ссылка
https://ссылкасайта/events?page=2
То ?page= не будет индексироваться?
правильно я понимаю?
Цитата
Alexs12919 пишет:
правильно я понимаю?
Ага) Только в роботсе не запреты, а пожелания - как какой бот настроен.
Кроме того, не попадание в индекс не означает непереход по ссылке.

Ну, это к слову)
Цитата
Coder пишет:
Цитата
Alexs12919 пишет:
правильно я понимаю?
Ага) Только в роботсе не запреты, а пожелания - как какой бот настроен.
Кроме того, не попадание в индекс не означает непереход по ссылке.

Ну, это к слову)
подскажите еще пожалуйста, а это правильно что в поиске когда пишу site:свойсайт.ком и там проиндексировано robots.txt и sitemap.xml
Как с этим быть?
Изменено: Alexs12919 - 4 Марта 2024 19:40
Нормально, имхо
Coder, а как даркнет скрывается?
Цитата
Ingvarr пишет:
Coder, а как даркнет скрывается?
Я белый и пушистый - не знаю про такие ужасти...
Цитата
Coder пишет:
Цитата
Ingvarr пишет:
Coder, а как даркнет скрывается?
Я белый и пушистый - не знаю про такие ужасти...

Они же как-то не индексируются smile;)
Цитата
discipulus пишет:
Цитата
Coder пишет:
Цитата
Ingvarr пишет:
Coder, а как даркнет скрывается?
Я белый и пушистый - не знаю про такие ужасти...

Они же как-то не индексируются smile;)
Мои файлы на компьютере тоже не индексируются, но я могу с телефона получить к ним доступ. Тот же принцип. Свои протоколы, свои точки соединения, которые не знают не только поисковики, но и те, кому там не рады.
Мы не можем похвастаться мудростью глаз
И умелыми жестами рук,
Нам не нужно все это, чтобы друг друга понять.
Сигареты в руках, чай на столе - так замыкается круг,
И вдруг нам становится страшно что-то менять.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
14:20 Дзен окончательно всё? Или у кого-то еще «стреляет» белый контент? 
11:51 SEO под нейро 
11:39 Яндекс туда же: "Нейро" отжал 50% первого экрана. Органический трафик падает 
11:32 Индексирование страниц в Яндексе 
01:57 Гугл официально убивает клики: кнопка "Show more" теперь открывает чат на весь экран вместо сайтов 
01:02 [AI] Qwen3-Max Thinking: Алибаба подвинула DeepSeek и Gemini? 
19:48 где много готовых фавиконок 
14:30 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old 
12:00 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 
08:47 Мониторинг обменников Сrypto-scout.io 
23:58 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc 
20:43 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
18:29 Nexulume.com Обменник без AML и KYC 
18:16 Запустите свой обменник за 1 день без программиста и серверов — облачная платформа EX365 
14:18 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
08:54 Ставки на супер тренды в спорте 
02:01 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем 
00:53 Список обновленных тем пуст... 
00:15 Точные прогнозы на футбол 
06:57 блокировка youtube 2026: ркн начинает «выдавливание». кто уже пробовал вк видео? 
15:18 Win 10: Три месяца без обновлений. Как полёт? // Переезд на Win 11 или Linux