Помогите составить правильный robot txt
Страницы: 1
Помогите составить правильный robot txt
Есть на сайте много дублей. Все они состоят с структуры

test1.ru/?smth


test1.ru/?smth=blabla 
test1.ru/index.php
test1.ru/index.php?smth=blabla


Подскажите пожалуйста, как правильно закрыть от индексации все эти страницы

Бесплатная контекстная реклама

а как правильно выглядит главная статья?
Цитата
span4bob пишет:
а как правильно выглядит главная статья?
[FONT=Tahoma, Arial, Helvetica, sans-serif]
Статья отображается вот так[/FONT]
test1.ru/statya/
[FONT=Tahoma, Arial, Helvetica, sans-serif]Вот это[/FONT]

test1.ru/?smth=blabla  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php?smth=blabla  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/statya[FONT=Tahoma, Arial, Helvetica, sans-serif]/?smth=blabla - [/FONT]дублирует статью
Статья отображается вот так
test1.ru/statya/ 

Вот это
test1.ru/?smth=blabla  - дублирует главную страницу
test1.ru/index.php  - дублирует главную страницу
test1.ru/index.php?smth=blabla  - дублирует главную страницу

test1.ru/statya/?smth=blabla - дублирует статью
Мертвый форум
Тему можете закрыть
Цитата
Василь Панко пишет:
Мертвый форум
Может так: Disallow: /*?* Disallow: /*.php
Цитата
Абырвалг пишет:
Может так: Disallow: /*?*
тут аккуратнее, человек не назвал CMS, а у некоторых подобным можно отшить от сканирования очень много реальных страниц.
Он занят игрой,
И каждый второй,
Да каждый второй замедляет свой шаг.
Но только не я,
Я весел и пьян,
Я только сейчас начинаю дышать.

Минуту еще, мой ветер не стих,
Мне нравится здесь в Королевстве Кривых.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
18:02 Яндекс выдача 19.01.2021 
17:21 Букварикс: бесплатная программа для быстрого поиска ключевых слов 
15:09 Автопостинг 
12:05 ClickDealer- свои люди на рынке буржа! 
10:55 Закрытие параметра в роботс 
09:56 Письмо от Яндекса было о АПдейте Яндекс выдачи 20.01.2021 
09:48 Перенос сайта, правильный ли план? 
18:27 Продам скрипт онлайн игры 
17:10 Ссылки с форумов от 25 рублей за ссылку 
14:44 C1k: обмен Advcash , Perfect Money , skrill , NETELLER, крипта, приват24, тенге 
14:05 Продам адалт сайты 
13:05 ChangeInfo - Лучший мониторинг обменников СНГ 
11:18 Chatex - P2P площадка для торговли криптовалютой 
11:03 Современный скрипт обменника электронных валют 
17:03 Leadgid — международная финансовая партнерская CPA сеть 
16:23 Ты не вписался в модель нищеброда 
14:36 Полностью пропала реклама AdSense 
10:19 РБК: Дуров заявил о блокировке в Telegram сотен призывов к насилию в США 
18:39 [b]Webvork [/b]- международная товарная СРА сеть с сертифицированными офферами на Европу. 
16:46 Всё же построили коммунизм или что-то там? 
14:05 Американская НКО потребовала через суд удалить Telegram из магазина приложений Apple