Помогите составить правильный robot txt
Страницы: 1
Помогите составить правильный robot txt
Есть на сайте много дублей. Все они состоят с структуры

test1.ru/?smth


test1.ru/?smth=blabla 
test1.ru/index.php
test1.ru/index.php?smth=blabla


Подскажите пожалуйста, как правильно закрыть от индексации все эти страницы
а как правильно выглядит главная статья?
Цитата
span4bob пишет:
а как правильно выглядит главная статья?
[FONT=Tahoma, Arial, Helvetica, sans-serif]
Статья отображается вот так[/FONT]
test1.ru/statya/
[FONT=Tahoma, Arial, Helvetica, sans-serif]Вот это[/FONT]

test1.ru/?smth=blabla  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php?smth=blabla  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/statya[FONT=Tahoma, Arial, Helvetica, sans-serif]/?smth=blabla - [/FONT]дублирует статью
Статья отображается вот так
test1.ru/statya/ 

Вот это
test1.ru/?smth=blabla  - дублирует главную страницу
test1.ru/index.php  - дублирует главную страницу
test1.ru/index.php?smth=blabla  - дублирует главную страницу

test1.ru/statya/?smth=blabla - дублирует статью
Мертвый форум
Тему можете закрыть
Цитата
Василь Панко пишет:
Мертвый форум
Может так: Disallow: /*?* Disallow: /*.php
Цитата
Абырвалг пишет:
Может так: Disallow: /*?*
тут аккуратнее, человек не назвал CMS, а у некоторых подобным можно отшить от сканирования очень много реальных страниц.
Мы не можем похвастаться мудростью глаз
И умелыми жестами рук,
Нам не нужно все это, чтобы друг друга понять.
Сигареты в руках, чай на столе - так замыкается круг,
И вдруг нам становится страшно что-то менять.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
21:46 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
21:11 Бесплатный парсер Telegram групп 
17:36 TraffCore Smartlink платформа с основным фокусом на монетизации трафика. 
15:26 Perfect.Studio: InstAccountsManager — лучший инструмент для автоматизации заработка в Instagram 
12:49 Какие пройти короткие курсы по SEO? 
12:48 Поисковик mail 
21:49 Яндекс выдача 9 августа 2022 
22:22 Продам 2 адалт сайта игровой тематики 
19:48 Продается несколько аккаунтов разработчика Google Play Developer Console 
15:41 GetManySubmits - программа регистрации на сайтах 
15:39 Продам 14-тилетний информационный сайт 
14:34 WMStar.club – сервис покупки и продажи Электронных валют! 
13:33 Нужен программист для доработок сайта на движке NetCat 
12:37 Amigo! Cryptos – платформа для автоматического обмена Криптовалют. 
21:34 Как принимать заказы на форуме 
18:12 Бесплатный мини-аудит юзабилити и конверсии + технический SEO-аудит в подарок 
22:12 Курс доллара упал ниже 85 рублей 
21:49 Ковид не отступает? 
03:31 Adfinity - Ваш надежный партнер в монетизации трафика 
23:07 Хотите SEO-текст для людей и роботов? 
14:25 Алгоритмы создают бесконечную мелодию для концентрации