Помогите составить правильный robot txt
Страницы: 1
Помогите составить правильный robot txt
Есть на сайте много дублей. Все они состоят с структуры

test1.ru/?smth


test1.ru/?smth=blabla 
test1.ru/index.php
test1.ru/index.php?smth=blabla


Подскажите пожалуйста, как правильно закрыть от индексации все эти страницы

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

а как правильно выглядит главная статья?
Цитата
span4bob пишет:
а как правильно выглядит главная статья?
[FONT=Tahoma, Arial, Helvetica, sans-serif]
Статья отображается вот так[/FONT]
test1.ru/statya/
[FONT=Tahoma, Arial, Helvetica, sans-serif]Вот это[/FONT]

test1.ru/?smth=blabla  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php?smth=blabla  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/statya[FONT=Tahoma, Arial, Helvetica, sans-serif]/?smth=blabla - [/FONT]дублирует статью
Статья отображается вот так
test1.ru/statya/ 

Вот это
test1.ru/?smth=blabla  - дублирует главную страницу
test1.ru/index.php  - дублирует главную страницу
test1.ru/index.php?smth=blabla  - дублирует главную страницу

test1.ru/statya/?smth=blabla - дублирует статью
Мертвый форум
Тему можете закрыть
Цитата
Василь Панко пишет:
Мертвый форум
Может так: Disallow: /*?* Disallow: /*.php
Цитата
Абырвалг пишет:
Может так: Disallow: /*?*
тут аккуратнее, человек не назвал CMS, а у некоторых подобным можно отшить от сканирования очень много реальных страниц.
Кому-нибудь другому очень просто рассказать, как надо жить и что делать. Я бы любому все объяснил. И даже показал бы, к каким огням лететь и как. А если то же самое надо делать самому, сидишь на месте или летишь совсем в другую сторону. © В. П.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
19:06 Ходяга(АнтиМинусинск) - программа для проклика ссылок, генерации поискового и соц.трафика, улучшения ПФ 
18:37 Продвижение запросов для интернет-магазина - Яндекс Коллекции - 3000 ссылок 
15:56 АП ИКС 27.03.2020 | Апдейт Яндекс ИКС 27 марта 2020 
12:16 Учитывается ли время когда запостил ссылку? 
12:09 SEO, WP медиафайлы- картинки, вредят? 
08:42 Lottery Partner в поиске партнеров! Самые высокие ставки! 
01:53 Зарабатывай до 50% за сейл с партнерской программой EssayPro! 
16:47 Продам аккаунт Google AdWords 
14:09 Размещу 275 Трастовых ссылок на Ваш сайт 
12:34 Индивидуальные IPv4 прокси Европа. 30 р./месяц за 1 штуку 
11:08 Продам домен в Гугл Новости испания 
10:34 TOП Telegram - рассылки, инвайтинг, просмотры, подписчики - Дешевле не куда! 
01:35 Продажа аккаунтов Adsense 
19:04 Верстка PSD-макетов html\css\flexbox\bootstrap 4 
00:30 Вопрос о курсах 
18:19 Plussy - лучшая партнерка для гемблинг 
02:02 Партнерка UDS. Мобильное приложение для бизнеса . Программа лояльности 
20:49 Новостной сайт с ноля 
19:24 [b]Webvork [/b]- международная товарная СРА сеть с сертифицированными офферами на Европу. 
13:07 Коронавирус 
08:59 Бесплатно за отзыв можем сделать 1 услугу в соц сетях