Помогите составить правильный robot txt

Сообщений: 7 Регистрация: Май 2016

30 Мая 2016 14:11

Есть на сайте много дублей. Все они состоят с структуры

test1.ru/?smth

test1.ru/?smth=blabla
test1.ru/index.php
test1.ru/index.php?smth=blabla

Подскажите пожалуйста, как правильно закрыть от индексации все эти страницы

span4bob

Сообщений: 6461 Регистрация: Апр 2013

30 Мая 2016 14:53

а как правильно выглядит главная статья?

Дай новую жизнь своим БЭКЛИНКАМ!!!
▼
► ◄
▲

Продвижение сателлитами ☻

Василь Панко

Сообщений: 7 Регистрация: Май 2016

30 Мая 2016 15:08

Цитата
span4bob пишет: а как правильно выглядит главная статья?

[FONT=Tahoma, Arial, Helvetica, sans-serif]
Статья отображается вот так[/FONT]
test1.ru/statya/
[FONT=Tahoma, Arial, Helvetica, sans-serif]Вот это[/FONT]

test1.ru/?smth=blabla - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php?smth=blabla - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/statya[FONT=Tahoma, Arial, Helvetica, sans-serif]/?smth=blabla - [/FONT]дублирует статью

Василь Панко

Сообщений: 7 Регистрация: Май 2016

30 Мая 2016 15:09

Статья отображается вот так
test1.ru/statya/

Вот это
test1.ru/?smth=blabla - дублирует главную страницу
test1.ru/index.php - дублирует главную страницу
test1.ru/index.php?smth=blabla - дублирует главную страницу

test1.ru/statya/?smth=blabla - дублирует статью

Василь Панко

Сообщений: 7 Регистрация: Май 2016

31 Мая 2016 01:02

Мертвый форум

Василь Панко

Сообщений: 7 Регистрация: Май 2016

31 Мая 2016 01:03

Тему можете закрыть

Абырвалг

Сообщений: 1305 Регистрация: Июл 2012

31 Мая 2016 02:19

Цитата
Василь Панко пишет: Мертвый форум

Может так: Disallow: /*?* Disallow: /*.php

Дивергент

Сообщений: 22659 Регистрация: Май 2011

31 Мая 2016 02:38

Цитата
Абырвалг пишет: Может так: Disallow: /?

тут аккуратнее, человек не назвал CMS, а у некоторых подобным можно отшить от сканирования очень много реальных страниц.

Мы не можем похвастаться мудростью глаз
И умелыми жестами рук,
Нам не нужно все это, чтобы друг друга понять.
Сигареты в руках, чай на столе - так замыкается круг,
И вдруг нам становится страшно что-то менять.

Новые темы	Объявления	Свободное общение
00:35 Смерть SEO или новый профит? Google в тупике, Лиз Рид призналась в бессилии 21:08 Приговор для Телеграм. ФАС ставит крест на рекламе 21:04 9 стран вводят интернет по паспорту: Бурж-сегмент уходит в KYC 20:38 MAX попер в бурж: 40 стран, ведение каналов и горы дешевого трафика 10:12 Кто-то научился фильтровать новых ИИ-ботов? Метрика сходит с ума 08:45 Карпати реально заставил GPT, Кло, Gemini и Grok спорить между собой перед ответом 08:26 Праздники кончились, а трафик так и не вернулся. Глюк или фильтр?	06:25 Аккаунты HeadHunter - Продам/верифицирую аккаунты работодателей hh.ru (HeadHunter, HH.RU, ХХ ) 20:40 SellBuycoin.io - надежный проводник в мир обмена криптовалют на фиат и наличные по РФ! 17:42 TETChange-Обменник криптовалют 15:30 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру 15:05 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 12:46 TELEGRAM EXPERT — Многоцелевой комбайн по работе с Telegram 12:19 Мониторинг обменников Сrypto-scout.io	03:01 Точные прогнозы на футбол 22:54 Ставки на супер тренды в спорте 21:15 Бигтех режет мясо. ИИ заменил 6 тысяч профи за месяц 20:48 Список обновленных тем пуст... 13:06 Владельцы "китайцев" 3-леток, признавайтесь честно — сгнили или едут? 12:57 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 12:54 Огородники

Новые темы

Объявления

Свободное общение

00:35 Смерть SEO или новый профит? Google в тупике, Лиз Рид призналась в бессилии
21:08 Приговор для Телеграм. ФАС ставит крест на рекламе
21:04 9 стран вводят интернет по паспорту: Бурж-сегмент уходит в KYC
20:38 MAX попер в бурж: 40 стран, ведение каналов и горы дешевого трафика
10:12 Кто-то научился фильтровать новых ИИ-ботов? Метрика сходит с ума
08:45 Карпати реально заставил GPT, Кло, Gemini и Grok спорить между собой перед ответом
08:26 Праздники кончились, а трафик так и не вернулся. Глюк или фильтр?

06:25 Аккаунты HeadHunter - Продам/верифицирую аккаунты работодателей hh.ru (HeadHunter, HH.RU, ХХ )
20:40 SellBuycoin.io - надежный проводник в мир обмена криптовалют на фиат и наличные по РФ!
17:42 TETChange-Обменник криптовалют
15:30 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру
15:05 CryptoGraph — Анонимный обмен криптовалют без KYC и AML
12:46 TELEGRAM EXPERT — Многоцелевой комбайн по работе с Telegram
12:19 Мониторинг обменников Сrypto-scout.io

03:01 Точные прогнозы на футбол
22:54 Ставки на супер тренды в спорте
21:15 Бигтех режет мясо. ИИ заменил 6 тысяч профи за месяц
20:48 Список обновленных тем пуст...
13:06 Владельцы "китайцев" 3-леток, признавайтесь честно — сгнили или едут?
12:57 8 марта: желаю аптайма 99.9% и e-e-a-t без локов
12:54 Огородники

14.04.2024 15:49	Помогите, пожалуйста, с htaccess
22.06.2022 16:57	Помогите разобраться с виджетом ЕМИАС
05.08.2020 18:11	Помогите с продвижением
06.05.2020 13:43	Помогите узнать источник видео
21.06.2019 20:37	Добавление товаров на Simpla помогите советом! HELP