Помогите составить правильный robot txt
Страницы: 1
Помогите составить правильный robot txt
Есть на сайте много дублей. Все они состоят с структуры

test1.ru/?smth


test1.ru/?smth=blabla 
test1.ru/index.php
test1.ru/index.php?smth=blabla


Подскажите пожалуйста, как правильно закрыть от индексации все эти страницы

Комплексное SEO продвижение в поисковых системах Яндекс, Google

а как правильно выглядит главная статья?
Цитата
span4bob пишет:
а как правильно выглядит главная статья?
[FONT=Tahoma, Arial, Helvetica, sans-serif]
Статья отображается вот так[/FONT]
test1.ru/statya/
[FONT=Tahoma, Arial, Helvetica, sans-serif]Вот это[/FONT]

test1.ru/?smth=blabla  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php?smth=blabla  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/statya[FONT=Tahoma, Arial, Helvetica, sans-serif]/?smth=blabla - [/FONT]дублирует статью
Статья отображается вот так
test1.ru/statya/ 

Вот это
test1.ru/?smth=blabla  - дублирует главную страницу
test1.ru/index.php  - дублирует главную страницу
test1.ru/index.php?smth=blabla  - дублирует главную страницу

test1.ru/statya/?smth=blabla - дублирует статью
Мертвый форум
Тему можете закрыть
Цитата
Василь Панко пишет:
Мертвый форум
Может так: Disallow: /*?* Disallow: /*.php
Цитата
Абырвалг пишет:
Может так: Disallow: /*?*
тут аккуратнее, человек не назвал CMS, а у некоторых подобным можно отшить от сканирования очень много реальных страниц.
Кому-нибудь другому очень просто рассказать, как надо жить и что делать. Я бы любому все объяснил. И даже показал бы, к каким огням лететь и как. А если то же самое надо делать самому, сидишь на месте или летишь совсем в другую сторону. © В. П.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
00:16 Накрутка лайков и репостов вк 
19:19 Проблемы с выводом слайдера на сайте 
19:17 17 июля 2019 | Текстовый апдейт: выложен индекс по 11 июля 2019 
15:57 Страница как бы и в индексе Яндекса и как бы нет 
15:19 Кто как борется с РКН и компанией? 
10:12 ClickDealer- свои люди на рынке буржа! 
06:12 Lottery Partner в поиске партнеров! Самые высокие ставки! 
23:25 Ищу помощь по переезду с домена на домен 
22:35 Скупаю RDP с брута (дедики) 
21:01 Прогон по профилям с ИКС от 10 от 150 рублей, незаспамленные доноры 
19:58 Безлимитные Google диски и OneDrive 
19:54 продам аккаунт от от облака mail.ru 1 TB 
19:40 Прогон по личной базе, больше 1000 трастовых сайтов! Продвижение СЧ и НЧ запросов + рост показателей! Гарантии! 
19:18 Массовые рассылки по мессенджеру BIP. Ссылки на сайт активные. 
23:38 Google June 2019 Core Update 
23:36 Мой канал на YouTube о том как лично я зарабатываю в интернете 
23:32 Криптовалюта без вложений на автомате.Всё прозрачно,понятно и в одном месте. 
23:25 Как вы понимаете это высказывание? 
23:21 Живые подписчики в инстграм за копейки 
19:21 Как задать размеры у файла iframe? 
15:35 Какой сайт сейчас нужен!