Помогите составить правильный robot txt

Сообщений: 7 Регистрация: Май 2016

30 Мая 2016 14:11

Есть на сайте много дублей. Все они состоят с структуры

test1.ru/?smth

test1.ru/?smth=blabla
test1.ru/index.php
test1.ru/index.php?smth=blabla

Подскажите пожалуйста, как правильно закрыть от индексации все эти страницы

span4bob

Сообщений: 6461 Регистрация: Апр 2013

30 Мая 2016 14:53

а как правильно выглядит главная статья?

Дай новую жизнь своим БЭКЛИНКАМ!!!
▼
► ◄
▲

Продвижение сателлитами ☻

Василь Панко

Сообщений: 7 Регистрация: Май 2016

30 Мая 2016 15:08

Цитата
span4bob пишет: а как правильно выглядит главная статья?

[FONT=Tahoma, Arial, Helvetica, sans-serif]
Статья отображается вот так[/FONT]
test1.ru/statya/
[FONT=Tahoma, Arial, Helvetica, sans-serif]Вот это[/FONT]

test1.ru/?smth=blabla - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php?smth=blabla - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/statya[FONT=Tahoma, Arial, Helvetica, sans-serif]/?smth=blabla - [/FONT]дублирует статью

Василь Панко

Сообщений: 7 Регистрация: Май 2016

30 Мая 2016 15:09

Статья отображается вот так
test1.ru/statya/

Вот это
test1.ru/?smth=blabla - дублирует главную страницу
test1.ru/index.php - дублирует главную страницу
test1.ru/index.php?smth=blabla - дублирует главную страницу

test1.ru/statya/?smth=blabla - дублирует статью

Василь Панко

Сообщений: 7 Регистрация: Май 2016

31 Мая 2016 01:02

Мертвый форум

Василь Панко

Сообщений: 7 Регистрация: Май 2016

31 Мая 2016 01:03

Тему можете закрыть

Абырвалг

Сообщений: 1305 Регистрация: Июл 2012

31 Мая 2016 02:19

Цитата
Василь Панко пишет: Мертвый форум

Может так: Disallow: /*?* Disallow: /*.php

Дивергент

Сообщений: 22884 Регистрация: Май 2011

31 Мая 2016 02:38

Цитата
Абырвалг пишет: Может так: Disallow: /?

тут аккуратнее, человек не назвал CMS, а у некоторых подобным можно отшить от сканирования очень много реальных страниц.

Мы не можем похвастаться мудростью глаз
И умелыми жестами рук,
Нам не нужно все это, чтобы друг друга понять.
Сигареты в руках, чай на столе - так замыкается круг,
И вдруг нам становится страшно что-то менять.

Новые темы	Объявления	Свободное общение
01:24 Апдейт 14 апреля: ощущение, что режет не только выдача 00:47 В Яндексе позиции держатся, а трафик проседает - стало заметно сильнее 00:09 Бесплатное расширение для Chrome — проверка ссылок прямо на странице 23:52 PHP 8 ломает старые сайты. Кто уже обновился - что отвалилось? 23:23 Легкая тема для Вордпресса в 2026 - чтобы и красиво, и быстро? 23:08 Штрафы РСЯ за скорость - выкинет ли Яндекс сайт на дешевом хостинге? 15:51 Яндекс Нейро и выдача в 2026 - остались ли лазейки для маленьких сайтов?	11:10 Мониторинг обменников Сrypto-scout.io 10:11 BestChange – обменивать электронную валюту можно быстро и выгодно 08:55 Monitex: Мониторинг с кэшбэком 80% в USDT 07:34 HH.ru Работадателя вериф 04:08 От $0.015 за IP \| $0.68 за ГБ \| 9PROXY.COM \| 20+ млн резидентных прокси \| 99,95% аптайм \| Без чёрных списков 22:30 Продвижение YouTube видео в топ поиска \| Любой тип контента \| Гарантия результата 22:30 Trustpilot Reviews \| Подниму рейтинг вашей компании	05:07 Точные прогнозы на футбол 01:06 Франция уходит с Windows на Linux - это реально тренд или просто политика? 00:58 С юмором по жизни! 00:21 Добро пожаловать в цифровой мир... 00:11 Список обновленных тем пуст... 00:07 Во Франции начали штрафовать за IPTV - до 300-400 евро уже прилетает обычным пользователям 23:49 В жительница Китая каждый день общается с ИИ-клоном сына и не знает, что он умер

Новые темы

Объявления

Свободное общение

01:24 Апдейт 14 апреля: ощущение, что режет не только выдача
00:47 В Яндексе позиции держатся, а трафик проседает - стало заметно сильнее
00:09 Бесплатное расширение для Chrome — проверка ссылок прямо на странице
23:52 PHP 8 ломает старые сайты. Кто уже обновился - что отвалилось?
23:23 Легкая тема для Вордпресса в 2026 - чтобы и красиво, и быстро?
23:08 Штрафы РСЯ за скорость - выкинет ли Яндекс сайт на дешевом хостинге?
15:51 Яндекс Нейро и выдача в 2026 - остались ли лазейки для маленьких сайтов?

11:10 Мониторинг обменников Сrypto-scout.io
10:11 BestChange – обменивать электронную валюту можно быстро и выгодно
08:55 Monitex: Мониторинг с кэшбэком 80% в USDT
07:34 HH.ru Работадателя вериф
04:08 От $0.015 за IP | $0.68 за ГБ | 9PROXY.COM | 20+ млн резидентных прокси | 99,95% аптайм | Без чёрных списков
22:30 Продвижение YouTube видео в топ поиска | Любой тип контента | Гарантия результата
22:30 Trustpilot Reviews | Подниму рейтинг вашей компании

05:07 Точные прогнозы на футбол
01:06 Франция уходит с Windows на Linux - это реально тренд или просто политика?
00:58 С юмором по жизни!
00:21 Добро пожаловать в цифровой мир...
00:11 Список обновленных тем пуст...
00:07 Во Франции начали штрафовать за IPTV - до 300-400 евро уже прилетает обычным пользователям
23:49 В жительница Китая каждый день общается с ИИ-клоном сына и не знает, что он умер

14.04.2024 15:49	Помогите, пожалуйста, с htaccess
22.06.2022 16:57	Помогите разобраться с виджетом ЕМИАС
05.08.2020 18:11	Помогите с продвижением
06.05.2020 13:43	Помогите узнать источник видео
21.06.2019 20:37	Добавление товаров на Simpla помогите советом! HELP