Помогите составить правильный robot txt
Страницы: 1
Помогите составить правильный robot txt
Есть на сайте много дублей. Все они состоят с структуры

test1.ru/?smth


test1.ru/?smth=blabla 
test1.ru/index.php
test1.ru/index.php?smth=blabla


Подскажите пожалуйста, как правильно закрыть от индексации все эти страницы

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

а как правильно выглядит главная статья?
Торопись успеть!!!!


Летние скидки на прогоны - Дешевле только бесплатно ◄ !


Продвижение сателлитами


Цитата
span4bob пишет:
а как правильно выглядит главная статья?
[FONT=Tahoma, Arial, Helvetica, sans-serif]
Статья отображается вот так[/FONT]
test1.ru/statya/
[FONT=Tahoma, Arial, Helvetica, sans-serif]Вот это[/FONT]

test1.ru/?smth=blabla  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php?smth=blabla  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/statya[FONT=Tahoma, Arial, Helvetica, sans-serif]/?smth=blabla - [/FONT]дублирует статью
Статья отображается вот так
test1.ru/statya/ 

Вот это
test1.ru/?smth=blabla  - дублирует главную страницу
test1.ru/index.php  - дублирует главную страницу
test1.ru/index.php?smth=blabla  - дублирует главную страницу

test1.ru/statya/?smth=blabla - дублирует статью
Мертвый форум
Тему можете закрыть
Цитата
Василь Панко пишет:
Мертвый форум
Может так: Disallow: /*?* Disallow: /*.php
Цитата
Абырвалг пишет:
Может так: Disallow: /*?*
тут аккуратнее, человек не назвал CMS, а у некоторых подобным можно отшить от сканирования очень много реальных страниц.
Однажды я играл в СССР в песочнице, а тут вдруг хобана! - и совок сломался.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
01:18 Монетизация сайта 
01:12 Кто использует AMP у себя на сайте? 
00:30 HTTPS 
00:04 Помогите разобраться Малополезный контент, спам, избыток рекламы 
22:20 Profitco - гемблинговая ПП! Проверенные бренды, парк-домены, выплаты каждую неделю, геолокация по ip 
21:26 Апдейт ТИЦ 15 августа 2017 
20:39 нужен грамотный юрист\адвокат по вопросу авторских прав, индексации. 
00:09 Дизайн | Редизайн | Верстка - сайтов, банеров, логотипов 
23:51 Веб-дизайн: От favicon до макета сайта 
23:21 Акция! Размещение статей на трастовых сайтах 
23:03 Копирайтинг и Рерайтинг. Цены, Ре- 59р, копи- 99р за1к. Новый автор, первым трем- бесплатно. 
22:32 Прогон по профилям 300 рублей, 170 сайтов, ТИЦ от 10 
22:14 Есть уникальные статьи(копирайт) на тему спиннинговая ловля на 20 к символов. 
22:14 Комплексный прогон по трастовым сайтам, статейное размещение. Рост НЧ-СЧ, Тиц-пр. 
02:40 Нужна оптимизация сайта 
20:59 Зачем Яндекс себя убивает? 
17:55 Продвижение туристического сайта 
17:41 Техподдержка Майл - Аккаунт приостановлен. Нет места для новых писем 
16:53 Продвижение сайта 
15:05 Сногсшибательные скидки на хостинг 
12:01 Хацкеры с телдери ?