Помогите составить правильный robot txt

Сообщений: 7 Регистрация: Май 2016

30 Мая 2016 14:11

Есть на сайте много дублей. Все они состоят с структуры

test1.ru/?smth

test1.ru/?smth=blabla
test1.ru/index.php
test1.ru/index.php?smth=blabla

Подскажите пожалуйста, как правильно закрыть от индексации все эти страницы

span4bob

Сообщений: 6461 Регистрация: Апр 2013

30 Мая 2016 14:53

а как правильно выглядит главная статья?

Дай новую жизнь своим БЭКЛИНКАМ!!!
▼
► ◄
▲

Продвижение сателлитами ☻

Василь Панко

Сообщений: 7 Регистрация: Май 2016

30 Мая 2016 15:08

Цитата
span4bob пишет: а как правильно выглядит главная статья?

[FONT=Tahoma, Arial, Helvetica, sans-serif]
Статья отображается вот так[/FONT]
test1.ru/statya/
[FONT=Tahoma, Arial, Helvetica, sans-serif]Вот это[/FONT]

test1.ru/?smth=blabla - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php?smth=blabla - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/statya[FONT=Tahoma, Arial, Helvetica, sans-serif]/?smth=blabla - [/FONT]дублирует статью

Василь Панко

Сообщений: 7 Регистрация: Май 2016

30 Мая 2016 15:09

Статья отображается вот так
test1.ru/statya/

Вот это
test1.ru/?smth=blabla - дублирует главную страницу
test1.ru/index.php - дублирует главную страницу
test1.ru/index.php?smth=blabla - дублирует главную страницу

test1.ru/statya/?smth=blabla - дублирует статью

Василь Панко

Сообщений: 7 Регистрация: Май 2016

31 Мая 2016 01:02

Мертвый форум

Василь Панко

Сообщений: 7 Регистрация: Май 2016

31 Мая 2016 01:03

Тему можете закрыть

Абырвалг

Сообщений: 1305 Регистрация: Июл 2012

31 Мая 2016 02:19

Цитата
Василь Панко пишет: Мертвый форум

Может так: Disallow: /*?* Disallow: /*.php

Дивергент

Сообщений: 20713 Регистрация: Май 2011

31 Мая 2016 02:38

Цитата
Абырвалг пишет: Может так: Disallow: /?

тут аккуратнее, человек не назвал CMS, а у некоторых подобным можно отшить от сканирования очень много реальных страниц.

Мы не можем похвастаться мудростью глаз
И умелыми жестами рук,
Нам не нужно все это, чтобы друг друга понять.
Сигареты в руках, чай на столе - так замыкается круг,
И вдруг нам становится страшно что-то менять.

Новые темы	Объявления	Свободное общение
16:56 Предлагаю крауд-ссылки под СНГ и США. :-) 15:51 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 14:33 ВОпросы оптимизации сайта 12:41 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов 11:42 AMarkets - партнерские программы финансовых рынков 22:39 Переходы по ссылкам на сайтах 21:28 Profit Pixels - In-House Форекс, Крипто, Трейдинг CPA Офферы \| Еженедельные Выплаты \| CPA до $950	15:39 Накрутка ПФ для любых сайтов. Быстрый результат 14:12 Реклама по дням дешево 13:33 Продам аккаунты Google Play Console 12:54 BestChange – обменивать электронную валюту можно быстро и выгодно 12:31 Автоматическое распознавание любых видов капч - CapMonster Cloud 01:49 Google Voice - OLD аккаунты "SMS и звонки" 21:07 куплю ссылки	16:10 Стоит ли удалять статьи с уникальностью ниже 65% 13:50 Курс доллара упал ниже 85 рублей 11:17 У Лукоморья дуб зеленый 10:05 Список обновленных тем пуст... 13:16 Как получить рефералов и посетителей на сайт бесплатно. 15:28 С юмором по жизни! 06:34 Как бесплатно раскрутить сайт в топ Яндекса и Google (ПФ)

Новые темы

Объявления

Свободное общение

16:56 Предлагаю крауд-ссылки под СНГ и США. :-)
15:51 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
14:33 ВОпросы оптимизации сайта
12:41 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов
11:42 AMarkets - партнерские программы финансовых рынков
22:39 Переходы по ссылкам на сайтах
21:28 Profit Pixels - In-House Форекс, Крипто, Трейдинг CPA Офферы | Еженедельные Выплаты | CPA до $950

15:39 Накрутка ПФ для любых сайтов. Быстрый результат
14:12 Реклама по дням дешево
13:33 Продам аккаунты Google Play Console
12:54 BestChange – обменивать электронную валюту можно быстро и выгодно
12:31 Автоматическое распознавание любых видов капч - CapMonster Cloud
01:49 Google Voice - OLD аккаунты "SMS и звонки"
21:07 куплю ссылки

16:10 Стоит ли удалять статьи с уникальностью ниже 65%
13:50 Курс доллара упал ниже 85 рублей
11:17 У Лукоморья дуб зеленый
10:05 Список обновленных тем пуст...
13:16 Как получить рефералов и посетителей на сайт бесплатно.
15:28 С юмором по жизни!
06:34 Как бесплатно раскрутить сайт в топ Яндекса и Google (ПФ)

22.06.2022 16:57	Помогите разобраться с виджетом ЕМИАС
05.08.2020 18:11	Помогите с продвижением
06.05.2020 13:43	Помогите узнать источник видео
21.06.2019 20:37	Добавление товаров на Simpla помогите советом! HELP
22.05.2019 23:38	Не работает сайт помогите пожалуйста!