Помогите составить правильный robot txt
Страницы: 1
Помогите составить правильный robot txt
Есть на сайте много дублей. Все они состоят с структуры

test1.ru/?smth


test1.ru/?smth=blabla 
test1.ru/index.php
test1.ru/index.php?smth=blabla


Подскажите пожалуйста, как правильно закрыть от индексации все эти страницы

Комплексное SEO продвижение в поисковых системах Яндекс, Google

а как правильно выглядит главная статья?
Цитата
span4bob пишет:
а как правильно выглядит главная статья?
[FONT=Tahoma, Arial, Helvetica, sans-serif]
Статья отображается вот так[/FONT]
test1.ru/statya/
[FONT=Tahoma, Arial, Helvetica, sans-serif]Вот это[/FONT]

test1.ru/?smth=blabla  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php?smth=blabla  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/statya[FONT=Tahoma, Arial, Helvetica, sans-serif]/?smth=blabla - [/FONT]дублирует статью
Статья отображается вот так
test1.ru/statya/ 

Вот это
test1.ru/?smth=blabla  - дублирует главную страницу
test1.ru/index.php  - дублирует главную страницу
test1.ru/index.php?smth=blabla  - дублирует главную страницу

test1.ru/statya/?smth=blabla - дублирует статью
Мертвый форум
Тему можете закрыть
Цитата
Василь Панко пишет:
Мертвый форум
Может так: Disallow: /*?* Disallow: /*.php
Цитата
Абырвалг пишет:
Может так: Disallow: /*?*
тут аккуратнее, человек не назвал CMS, а у некоторых подобным можно отшить от сканирования очень много реальных страниц.
Кому-нибудь другому очень просто рассказать, как надо жить и что делать. Я бы любому все объяснил. И даже показал бы, к каким огням лететь и как. А если то же самое надо делать самому, сидишь на месте или летишь совсем в другую сторону. © В. П.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
21:05 Апдейт ИКС 24.05.19 
19:46 Продвижение в ТОП Яндекс. Мега быстро! 
19:27 Посмотрите пациента) 
17:57 Turbobit.net - Официальная тема, Costaction ПП 
17:08 ClickDealer- свои люди на рынке буржа! 
15:13 Adtrafico - Правильная партнёрская сеть под бурж трафик 
15:11 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 
20:54 Надежный и мотивированный дизайнер, который точно не сорвет сроки и сделает круто 
18:40 Внешнее продвижение сайтов качественно! Быстрое выполнение, на форуме с 2009 года! 
18:02 Помощь в продвижении. 
16:55 Нужен прогон для молодого сайта 
15:25 Комплексный прогон по трастовым сайтам, статейное размещение. Рост НЧ-СЧ, Тиц-пр. 
15:01 Персональные прокси под: соц. сети, парсинг, avito, olx и прочее от 50р/шт 
14:53 Профессиональное ведение каналов в Ютубе, Белое продвижение, Услуги в соц. сетях 
18:20 Черная тема Adwords, высокооплачиваемо, с гарантом! 
18:01 Стоит ли покупать автонаполняемый сайт 
17:58 Срочно! МОжно ли пользоваться этими гарант-сервисами? 
17:57 Голосование в опросе фейсбук 
17:56 На какую тему создать сайт? 
15:51 Партнерская программа №1 в РФ по ремонту компьютерной и бытовой техники! (CPA 1000р) 
17:27 Установка кода Adsense перед продажей сайта