Как правильно закрыть папки к индексу?
Страницы: 1
Как правильно закрыть папки к индексу?
Подскажите пожалуйста, как прописать в роботс чтоб закрыть все страницы из папок? Выскочило 200к не нужных страниц)) 

ввв.сайт.ру/embed/
ввв.сайт.ру/search/
ввв.сайт.ру/user/
Я вот так прописал, не знаю верно или нет)

User-agent: *
Disallow: /embed/
Disallow: /search/
Disallow: /user/
Sitemap: http://ввв.сайт.ру/sitemap.xml
Host: http://ввв.сайт.ру
Цитата
Турист пишет:
Подскажите пожалуйста, как прописать в роботс чтоб закрыть все страницы из папок? Выскочило 200к не нужных страниц))

ввв.сайт.ру/embed/
ввв.сайт.ру/search/
ввв.сайт.ру/user/
Папка - это категория? Если да - то закройте саму категорию через noindex либо каждый материал закройте по категории. Что за CMS ?
Самый быстрый хостинг на SSD. Месяц в подарок. Поддержка 24/7. Помощь в переезде.

Передовое сообщество вебмастеров. Тебе к нам!
Цитата
Артем Малков пишет:
Цитата
Турист пишет:
Подскажите пожалуйста, как прописать в роботс чтоб закрыть все страницы из папок? Выскочило 200к не нужных страниц))

ввв.сайт.ру/embed/
ввв.сайт.ру/search/
ввв.сайт.ру/user/
Папка - это категория? Если да - то закройте саму категорию через noindex либо каждый материал закройте по категории. Что за CMS ?

Последний вариант будет вернее
Всем спасибо, закрыл.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
21:22 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
12:08 Трамп пригрозил Google судом 
18:02 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
21:55 DreamCash.tl - заработок на онлайн-видео. До 95% отчислений, отличный конверт! 
07:17 Модуль DLE 
16:19 Google отключил возможность подтверждать новый аккаунт с помощью российского номера телефона 
10:58 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
22:16 DualCoin - быстрый криптовалютный обменник 
15:39 Продам аккаунты HH.RU 
14:36 TETChange-Обменник криптовалют 
12:22 Прием любых платежей для HIGH RISK проектов 
12:22 Скрипт приема платежей (Карта, СБП, Юmoney, BTC, USDT) + Woocommerce плагин 
12:10 Восстановление сайтов из Вебархива на Wordpress 
11:34 PlayPay.biz - Лутбоксы с товарами, играми 
00:43 Точные прогнозы на футбол 
14:22 С юмором по жизни! 
08:11 Новый уровень мошенничества: как россиян обманывают с помощью фейковых порнороликов 
08:08 Клещи 
08:05 Telegram не смог провести различие между требованиями автократических режимов и законными демократическими запросами 
23:43 Шашлыки в 2012-2022 году 
16:33 Подтягиваем физкультурку