Помогите составить правильный robot txt
Страницы: 1
Помогите составить правильный robot txt
Есть на сайте много дублей. Все они состоят с структуры

test1.ru/?smth


test1.ru/?smth=blabla 
test1.ru/index.php
test1.ru/index.php?smth=blabla


Подскажите пожалуйста, как правильно закрыть от индексации все эти страницы

Комплексное SEO продвижение в поисковых системах Яндекс, Google

а как правильно выглядит главная статья?
Цитата
span4bob пишет:
а как правильно выглядит главная статья?
[FONT=Tahoma, Arial, Helvetica, sans-serif]
Статья отображается вот так[/FONT]
test1.ru/statya/
[FONT=Tahoma, Arial, Helvetica, sans-serif]Вот это[/FONT]

test1.ru/?smth=blabla  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/index.php?smth=blabla  - [FONT=Tahoma, Arial, Helvetica, sans-serif]дублирует главную страницу[/FONT]
test1.ru/statya[FONT=Tahoma, Arial, Helvetica, sans-serif]/?smth=blabla - [/FONT]дублирует статью
Статья отображается вот так
test1.ru/statya/ 

Вот это
test1.ru/?smth=blabla  - дублирует главную страницу
test1.ru/index.php  - дублирует главную страницу
test1.ru/index.php?smth=blabla  - дублирует главную страницу

test1.ru/statya/?smth=blabla - дублирует статью
Мертвый форум
Тему можете закрыть
Цитата
Василь Панко пишет:
Мертвый форум
Может так: Disallow: /*?* Disallow: /*.php
Цитата
Абырвалг пишет:
Может так: Disallow: /*?*
тут аккуратнее, человек не назвал CMS, а у некоторых подобным можно отшить от сканирования очень много реальных страниц.
У шамана три руки,
Мир вокруг, как темный зал,
На ладонях золотых
Нарисованы глаза,
Видит розовый рассвет
Прежде солнца самого,
А казалось, будто спит
И не знает ничего.

У шамана три руки,
Сад в рубиновых лучах,
От дыхания его разгорается...
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
04:01 Яндекс выдача 28 февраля | Крайняя выдача в феврале 2021 года 
23:08 Подскажите нужно ли открытие каталога на сайте по наведению или лучше сделать по клику? 
20:24 Правительство Японии одобрило законопроект о мерах против травли в соцсетях 
20:04 Настроить поставщиков в программе E-Trade PriceList Importer 
02:52 Родительская страница получет вес от дочерней? 
22:18 Выдача 26.02.2021 
21:50 26.02.2021 ап ИКС 
21:06 SMMBanda.com | Живые просмотры YouTube, TikTok, Instagram, VK, Facebook, Twitter, Одноклассники. Лайки, комментарии, подписчики, репосты 
09:05 Информационный портал по цене вечной лицензии DLE 
08:32 Программа склика рекламы в поисковых системах (ПФ, CTR, поисковые подсказки - Begemotik.pro 
22:28 Раскрутка Instagram, YouTube, TikTok, Twitter, Вконтакте, Telegram, Twitch, Likee - smmservis.ru 
20:10 Ищем работу 
18:26 Обмен/Вывод криптовалют и электронных денег в разных странах 
16:35 Комплексный прогон по трастовым сайтам, статейное размещение. Рост НЧ-СЧ, Тиц-пр. 
23:15 Подскажите сервис. Выполнение заданий за деньги 
13:52 Проверяем "Анализ сайта" 
21:30 Назван способ накопить на ежемесячную пенсию в 100 тыс. рублей 
15:44 Как получать криптовалюту бесплатно 
23:44 СМИ: главы Twitter, Facebook и Google выступят на слушаниях в Конгрессе 
18:06 Кто работает (работал) с leadia.org? 
16:17 Монетизация юридического трафика. Какие юридические партнёрки нормально платят сейчас?