Помогите составить правильный robot txt

Сообщений: 7 Регистрация: Май 2016

30 Мая 2016 14:11

Есть на сайте много дублей. Все они состоят с структуры

test1.ru/?smth

test1.ru/?smth=blabla
test1.ru/index.php
test1.ru/index.php?smth=blabla

Подскажите пожалуйста, как правильно закрыть от индексации все эти страницы

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

span4bob

Сообщений: 6306 Регистрация: Апр 2013

30 Мая 2016 14:53

а как правильно выглядит главная статья?

Новогодние скидки на прогоны - Такого Вы ещё не в-и-д-е-л-и!!!
▼
► ◄
▲

Продвижение сателлитами ☻

Василь Панко

Сообщений: 7 Регистрация: Май 2016

30 Мая 2016 15:08

Цитата
span4bob пишет: а как правильно выглядит главная статья?

[FONT=Tahoma, Arial, Helvetica, sans-serif]
Статья отображается вот так[/FONT]
test1.ru/statya/
[FONT=Tahoma, Arial, Helvetica, sans-serif]Вот это[/FONT]

test1.ru/?smth=blabla - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php?smth=blabla - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/statya[FONT=Tahoma, Arial, Helvetica, sans-serif]/?smth=blabla - [/FONT]дублирует статью

Василь Панко

Сообщений: 7 Регистрация: Май 2016

30 Мая 2016 15:09

Статья отображается вот так
test1.ru/statya/

Вот это
test1.ru/?smth=blabla - дублирует главную страницу
test1.ru/index.php - дублирует главную страницу
test1.ru/index.php?smth=blabla - дублирует главную страницу

test1.ru/statya/?smth=blabla - дублирует статью

Василь Панко

Сообщений: 7 Регистрация: Май 2016

31 Мая 2016 01:02

Мертвый форум

Василь Панко

Сообщений: 7 Регистрация: Май 2016

31 Мая 2016 01:03

Тему можете закрыть

Абырвалг

Сообщений: 1250 Регистрация: Июл 2012

31 Мая 2016 02:19

Цитата
Василь Панко пишет: Мертвый форум

Может так: Disallow: /*?* Disallow: /*.php

Дивергент

Сообщений: 11021 Регистрация: Май 2011

31 Мая 2016 02:38

Цитата
Абырвалг пишет: Может так: Disallow: /?

тут аккуратнее, человек не назвал CMS, а у некоторых подобным можно отшить от сканирования очень много реальных страниц.

Крыши домов дрожат под тяжестью дней,
Небесный пастух пасёт облака,
Город стреляет в ночь дробью огней,
Но ночь сильней, её власть велика.

Новые темы	Объявления	Свободное общение
22:22 Как может повлиять размещение на доске объявлений? 22:17 Вот вопрос, как такие сайты в топе? 21:57 Пробую сделать верстку, логотипы, дизайны 19:29 Что такое AlexRank 18:41 Гугл не хочет индексировать сайт 17:29 Апдейт 19.05 17:00 Хостинг на Wodpress	21:09 Привлеку подписчиков на Ваш канал в Яндекс Дзен, а также дочитку на статьи канала. 21:08 Продам Дзен канал 19:17 SSH ТУННЕЛИ Dedicated Servers 18:53 Бесплатные консультации, аудиты. Раскрутка сайтов - опыт с 2005г. 18:28 Ссылочный профиль для SEO 17:20 Анонимность в Сети от профессионалов 16:35 Профессиональное ведение каналов в Ютубе, Белое продвижение, Услуги в соц. сетях	22:37 Фальшивые запросы из-за SEO специалистов, правда или вымысел... 22:20 ФАС не станет запрещать рекламу казино на YouTube 22:14 Общество, в котором мы живём. Навязывает нам своё мнение! 22:12 Тема специально для SEOBOSS 19:38 Сервис сокращения ссылок онлайн. 19:36 Конкурс с фондом 500 дол 17:06 Где взять качественный крауд?

Новые темы

Объявления

Свободное общение

22:22 Как может повлиять размещение на доске объявлений?
22:17 Вот вопрос, как такие сайты в топе?
21:57 Пробую сделать верстку, логотипы, дизайны
19:29 Что такое AlexRank
18:41 Гугл не хочет индексировать сайт
17:29 Апдейт 19.05
17:00 Хостинг на Wodpress

21:09 Привлеку подписчиков на Ваш канал в Яндекс Дзен, а также дочитку на статьи канала.
21:08 Продам Дзен канал
19:17 SSH ТУННЕЛИ Dedicated Servers
18:53 Бесплатные консультации, аудиты. Раскрутка сайтов - опыт с 2005г.
18:28 Ссылочный профиль для SEO
17:20 Анонимность в Сети от профессионалов
16:35 Профессиональное ведение каналов в Ютубе, Белое продвижение, Услуги в соц. сетях

22:37 Фальшивые запросы из-за SEO специалистов, правда или вымысел...
22:20 ФАС не станет запрещать рекламу казино на YouTube
22:14 Общество, в котором мы живём. Навязывает нам своё мнение!
22:12 Тема специально для SEOBOSS
19:38 Сервис сокращения ссылок онлайн.
19:36 Конкурс с фондом 500 дол
17:06 Где взять качественный крауд?

09.04.2018 12:18	Помогите увеличить трафик
03.02.2018 16:57	Знающие люди помогите с вопросом
17.01.2018 13:35	помогите разобраться
30.12.2017 12:29	Ребята помогите!Вопрос о прокси и акках ФБ!
27.12.2017 17:06	Выскочили ошибки по анализатору, помогите разобраться