Помогите составить правильный robot txt

Сообщений: 7 Регистрация: Май 2016

30 Мая 2016 14:11

Есть на сайте много дублей. Все они состоят с структуры

test1.ru/?smth

test1.ru/?smth=blabla
test1.ru/index.php
test1.ru/index.php?smth=blabla

Подскажите пожалуйста, как правильно закрыть от индексации все эти страницы

span4bob

Сообщений: 6461 Регистрация: Апр 2013

30 Мая 2016 14:53

а как правильно выглядит главная статья?

Дай новую жизнь своим БЭКЛИНКАМ!!!
▼
► ◄
▲

Продвижение сателлитами ☻

Василь Панко

Сообщений: 7 Регистрация: Май 2016

30 Мая 2016 15:08

Цитата
span4bob пишет: а как правильно выглядит главная статья?

[FONT=Tahoma, Arial, Helvetica, sans-serif]
Статья отображается вот так[/FONT]
test1.ru/statya/
[FONT=Tahoma, Arial, Helvetica, sans-serif]Вот это[/FONT]

test1.ru/?smth=blabla - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php?smth=blabla - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/statya[FONT=Tahoma, Arial, Helvetica, sans-serif]/?smth=blabla - [/FONT]дублирует статью

Василь Панко

Сообщений: 7 Регистрация: Май 2016

30 Мая 2016 15:09

Статья отображается вот так
test1.ru/statya/

Вот это
test1.ru/?smth=blabla - дублирует главную страницу
test1.ru/index.php - дублирует главную страницу
test1.ru/index.php?smth=blabla - дублирует главную страницу

test1.ru/statya/?smth=blabla - дублирует статью

Василь Панко

Сообщений: 7 Регистрация: Май 2016

31 Мая 2016 01:02

Мертвый форум

Василь Панко

Сообщений: 7 Регистрация: Май 2016

31 Мая 2016 01:03

Тему можете закрыть

Абырвалг

Сообщений: 1305 Регистрация: Июл 2012

31 Мая 2016 02:19

Цитата
Василь Панко пишет: Мертвый форум

Может так: Disallow: /*?* Disallow: /*.php

Дивергент

Сообщений: 22225 Регистрация: Май 2011

31 Мая 2016 02:38

Цитата
Абырвалг пишет: Может так: Disallow: /?

тут аккуратнее, человек не назвал CMS, а у некоторых подобным можно отшить от сканирования очень много реальных страниц.

Мы не можем похвастаться мудростью глаз
И умелыми жестами рук,
Нам не нужно все это, чтобы друг друга понять.
Сигареты в руках, чай на столе - так замыкается круг,
И вдруг нам становится страшно что-то менять.

Новые темы	Объявления	Свободное общение
13:40 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 10:20 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 11:41 2Index - быстрая индексация страниц сайта и обратных ссылок 18:41 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 09:56 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 23:00 Продвижение по ключам 05:56 Прибыль 200$ - 400$, за каждую 1000 уников! Google, FB и тд	18:03 SwapPix.io - быстрый и безопасный обменник криптовалют. 12:17 Мобильные и Резидентные Прокси Для Соц Сетей \| 3 Гб Бесплатно 11:11 PonyBit.ru - обменный пункт PonyBit.ru (Понибит.ру) 22:53 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика 21:50 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 19:51 BIGPROXY.SHOP - Резидентные Ротационные Backconnect Proxy USA EUROPA MIX [Безлимитный трафик] 17:24 SnapSwap.io — мгновенный обмен BTC, XMR, ETH, USDT и других криптовалют без регистрации!	15:59 Про мясо 23:09 ПП от PMS remote.team - 200$ за команду 13:28 Компьютерная мышь 22:55 Ну что, кто куда деваете свои сайты? 22:34 Используете беспроводные наушники? 22:26 Какой фильм посмотреть сегодня вечером? 17:13 Добро пожаловать в цифровой мир...

Новые темы

Объявления

Свободное общение

13:40 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!
10:20 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
11:41 2Index - быстрая индексация страниц сайта и обратных ссылок
18:41 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options
09:56 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг
23:00 Продвижение по ключам
05:56 Прибыль 200$ - 400$, за каждую 1000 уников! Google, FB и тд

18:03 SwapPix.io - быстрый и безопасный обменник криптовалют.
12:17 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно
11:11 PonyBit.ru - обменный пункт PonyBit.ru (Понибит.ру)
22:53 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика
21:50 CryptoGraph — Анонимный обмен криптовалют без KYC и AML
19:51 BIGPROXY.SHOP - Резидентные Ротационные Backconnect Proxy USA EUROPA MIX [Безлимитный трафик]
17:24 SnapSwap.io — мгновенный обмен BTC, XMR, ETH, USDT и других криптовалют без регистрации!

15:59 Про мясо
23:09 ПП от PMS remote.team - 200$ за команду
13:28 Компьютерная мышь
22:55 Ну что, кто куда деваете свои сайты?
22:34 Используете беспроводные наушники?
22:26 Какой фильм посмотреть сегодня вечером?
17:13 Добро пожаловать в цифровой мир...

14.04.2024 15:49	Помогите, пожалуйста, с htaccess
22.06.2022 16:57	Помогите разобраться с виджетом ЕМИАС
05.08.2020 18:11	Помогите с продвижением
06.05.2020 13:43	Помогите узнать источник видео
21.06.2019 20:37	Добавление товаров на Simpla помогите советом! HELP