Помогите составить правильный robot txt
Страницы: 1
Помогите составить правильный robot txt
Есть на сайте много дублей. Все они состоят с структуры

test1.ru/?smth


test1.ru/?smth=blabla 
test1.ru/index.php
test1.ru/index.php?smth=blabla


Подскажите пожалуйста, как правильно закрыть от индексации все эти страницы

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

а как правильно выглядит главная статья?
Цитата
span4bob пишет:
а как правильно выглядит главная статья?
[FONT=Tahoma, Arial, Helvetica, sans-serif]
Статья отображается вот так[/FONT]
test1.ru/statya/
[FONT=Tahoma, Arial, Helvetica, sans-serif]Вот это[/FONT]

test1.ru/?smth=blabla  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php?smth=blabla  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/statya[FONT=Tahoma, Arial, Helvetica, sans-serif]/?smth=blabla - [/FONT]дублирует статью
Статья отображается вот так
test1.ru/statya/ 

Вот это
test1.ru/?smth=blabla  - дублирует главную страницу
test1.ru/index.php  - дублирует главную страницу
test1.ru/index.php?smth=blabla  - дублирует главную страницу

test1.ru/statya/?smth=blabla - дублирует статью
Мертвый форум
Тему можете закрыть
Цитата
Василь Панко пишет:
Мертвый форум
Может так: Disallow: /*?* Disallow: /*.php
Цитата
Абырвалг пишет:
Может так: Disallow: /*?*
тут аккуратнее, человек не назвал CMS, а у некоторых подобным можно отшить от сканирования очень много реальных страниц.
Минуту еще, мой ветер не стих, Мне нравится здесь в Королевстве Кривых...
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
14:40 Отказы в Яндекс метрике 
14:30 Заметил новую фишку с ИКС Яндекса! 
14:10 АПдейт Яндекс | Обновление поисковой базы 22.10.2020 
11:14 Санкции за смену тайтла главной страницы? 
10:47 ИКС 23 октября 2020 АПдейт | Яндекс ИКС 23.10.2020 
08:06 Крауд 
18:59 Сделаю баннер (статика), шапку для соц.сети/канала бесплатно 
14:20 Профессиональное ведение каналов в Ютубе, Белое продвижение, Услуги в соц. сетях 
13:21 Продам сайт 
12:44 Мощный микс прогон от 2000 ссылок + 2 крутых темы продвижения 
11:39 BatchUniqueChecker - Массовая проверка уникальности URL между собой 
11:20 Напишу статьи бесплатно 
10:36 Сrypto-bank.ws - обмен BTC (Qiwi, сбер, нал и т.д.) 
06:08 Базы данных: клиенты форекс, чарджбек, физлица, банки, ИП, ООО 
13:12 Netflix подомнёт российский рынок? 
13:12 Эмиграция в Америку, это вообще стоит того? 
13:11 Литрболл 
11:55 Leadgid — международная финансовая партнерская CPA сеть 
21:58 Парсинг интернет магазинов, сайтов, фото, видео 
19:43 Собрала подборку из 5 книг для личностного роста 
19:42 Ваша любимая компьютерная игра?