Помогите составить правильный robot txt

Сообщений: 7 Регистрация: Май 2016

30 Мая 2016 14:11

Есть на сайте много дублей. Все они состоят с структуры

test1.ru/?smth

test1.ru/?smth=blabla
test1.ru/index.php
test1.ru/index.php?smth=blabla

Подскажите пожалуйста, как правильно закрыть от индексации все эти страницы

Комплексное SEO продвижение в поисковых системах Яндекс, Google

span4bob

Сообщений: 6454 Регистрация: Апр 2013

30 Мая 2016 14:53

а как правильно выглядит главная статья?

Дай новую жизнь своим БЭКЛИНКАМ!!!
▼
► ◄
▲

Продвижение сателлитами ☻

Василь Панко

Сообщений: 7 Регистрация: Май 2016

30 Мая 2016 15:08

Цитата
span4bob пишет: а как правильно выглядит главная статья?

[FONT=Tahoma, Arial, Helvetica, sans-serif]
Статья отображается вот так[/FONT]
test1.ru/statya/
[FONT=Tahoma, Arial, Helvetica, sans-serif]Вот это[/FONT]

test1.ru/?smth=blabla - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php?smth=blabla - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/statya[FONT=Tahoma, Arial, Helvetica, sans-serif]/?smth=blabla - [/FONT]дублирует статью

Василь Панко

Сообщений: 7 Регистрация: Май 2016

30 Мая 2016 15:09

Статья отображается вот так
test1.ru/statya/

Вот это
test1.ru/?smth=blabla - дублирует главную страницу
test1.ru/index.php - дублирует главную страницу
test1.ru/index.php?smth=blabla - дублирует главную страницу

test1.ru/statya/?smth=blabla - дублирует статью

Василь Панко

Сообщений: 7 Регистрация: Май 2016

31 Мая 2016 01:02

Мертвый форум

Василь Панко

Сообщений: 7 Регистрация: Май 2016

31 Мая 2016 01:03

Тему можете закрыть

Абырвалг

Сообщений: 1304 Регистрация: Июл 2012

31 Мая 2016 02:19

Цитата
Василь Панко пишет: Мертвый форум

Может так: Disallow: /*?* Disallow: /*.php

Дивергент

Сообщений: 13898 Регистрация: Май 2011

31 Мая 2016 02:38

Цитата
Абырвалг пишет: Может так: Disallow: /?

тут аккуратнее, человек не назвал CMS, а у некоторых подобным можно отшить от сканирования очень много реальных страниц.

Новые темы	Объявления	Свободное общение
17:08 ClickDealer- свои люди на рынке буржа! 15:06 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 15:03 Adtrafico - Правильная партнёрская сеть под бурж трафик 13:31 Накрутка поведенческих факторов весна - лето 2020 для продвижения сайта в ТОП Яндекса и Google 12:54 CMS для сайта 21:16 Google отправляет письма в спам из-за иконок в подписи 21:12 Спам ссылки на мой сайт с фишинг доменов .co, .today.	17:04 Pinflux2Pro -супер мощный комбайн для Pinterest \| Работает на полном автомате. 16:53 PAY2DAY.TOP - Покупка и продажа криптовалюты за рубли. 16:35 SocksHub.net - proxy, которые подходят всем 16:34 Facebook комбайн. Парсер Facebook. 5 лет на рынке ПО. 14:27 Продам сайт 7ooo.ru - соц.сеть и новости 13:51 Walkman bot professional - повышение позиций в поиске поведенческими факторами. 12:54 Продам канал Яндекс Дзен - Книги	15:18 [b]Webvork [/b]- международная товарная СРА сеть с сертифицированными офферами на Европу. 14:30 В Китае объявили третий уровень опасности из-за бубонной чумы 10:03 Что выгодней 09:03 МТС нехорошие люди 19:50 SEO продвижение сайтов в Яндекс, Google. Поднятие ИКС сайту, исправления ошибок, разработка стратегий 17:43 Нужно ли мне тратить время на nofollow 15:13 Посоветуйте фильм - фантастику

Новые темы

Объявления

Свободное общение

17:08 ClickDealer- свои люди на рынке буржа!
15:06 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг
15:03 Adtrafico - Правильная партнёрская сеть под бурж трафик
13:31 Накрутка поведенческих факторов весна - лето 2020 для продвижения сайта в ТОП Яндекса и Google
12:54 CMS для сайта
21:16 Google отправляет письма в спам из-за иконок в подписи
21:12 Спам ссылки на мой сайт с фишинг доменов .co, .today.

17:04 Pinflux2Pro -супер мощный комбайн для Pinterest | Работает на полном автомате.
16:53 PAY2DAY.TOP - Покупка и продажа криптовалюты за рубли.
16:35 SocksHub.net - proxy, которые подходят всем
16:34 Facebook комбайн. Парсер Facebook. 5 лет на рынке ПО.
14:27 Продам сайт 7ooo.ru - соц.сеть и новости
13:51 Walkman bot professional - повышение позиций в поиске поведенческими факторами.
12:54 Продам канал Яндекс Дзен - Книги

15:18 [b]Webvork [/b]- международная товарная СРА сеть с сертифицированными офферами на Европу.
14:30 В Китае объявили третий уровень опасности из-за бубонной чумы
10:03 Что выгодней
09:03 МТС нехорошие люди
19:50 SEO продвижение сайтов в Яндекс, Google. Поднятие ИКС сайту, исправления ошибок, разработка стратегий
17:43 Нужно ли мне тратить время на nofollow
15:13 Посоветуйте фильм - фантастику

06.05.2020 13:43	Помогите узнать источник видео
21.06.2019 20:37	Добавление товаров на Simpla помогите советом! HELP
22.05.2019 23:38	Не работает сайт помогите пожалуйста!
02.02.2019 10:20	Прошу помогите разобраться :(
05.08.2018 01:58	Помогите разобраться, что за левые сайты ссылаются на мой ресурс