Как правильно закрыть папки к индексу?

Сообщений: 781 Регистрация: Апр 2016

24 Марта 2017 10:04

Подскажите пожалуйста, как прописать в роботс чтоб закрыть все страницы из папок? Выскочило 200к не нужных страниц))

ввв.сайт.ру/embed/
ввв.сайт.ру/search/
ввв.сайт.ру/user/

Турист

Сообщений: 781 Регистрация: Апр 2016

24 Марта 2017 10:15

Я вот так прописал, не знаю верно или нет)

User-agent: *
Disallow: /embed/
Disallow: /search/
Disallow: /user/
Sitemap: http://ввв.сайт.ру/sitemap.xml
Host: http://ввв.сайт.ру

Артем Малков

Сообщений: 725 Регистрация: Апр 2011

24 Марта 2017 12:50

Цитата
Турист пишет: Подскажите пожалуйста, как прописать в роботс чтоб закрыть все страницы из папок? Выскочило 200к не нужных страниц)) ввв.сайт.ру/embed/ ввв.сайт.ру/search/ ввв.сайт.ру/user/

Папка - это категория? Если да - то закройте саму категорию через noindex либо каждый материал закройте по категории. Что за CMS ?

Самый быстрый хостинг на SSD. Месяц в подарок. Поддержка 24/7. Помощь в переезде.

Передовое сообщество вебмастеров. Тебе к нам!

WGN

Сообщений: 9914 Регистрация: Июн 2015

24 Марта 2017 12:57

Цитата

Артем Малков пишет:

Цитата
Турист пишет: Подскажите пожалуйста, как прописать в роботс чтоб закрыть все страницы из папок? Выскочило 200к не нужных страниц)) ввв.сайт.ру/embed/ ввв.сайт.ру/search/ ввв.сайт.ру/user/

Последний вариант будет вернее

✔(НЕЙРОСЕТЬ) Качественные живые посетители на ваш сайт, блог, канал — Бесплатно!!!

♛ЛУЧШИЙ ПРОВЕРЕННЫЙ и САМЫЙ НЕДОРОГОЙ ХОСТИНГ: АКЦИИ!

Турист Сообщений: 781 Регистрация: Апр 2016	#5 24 Марта 2017 14:13 Всем спасибо, закрыл.

Новые темы	Объявления	Свободное общение
13:23 Рост эффективности моего интернет‑магазина 11:31 AI под надзором. Минцифры готовят клеймо для контента 21:08 Adsense личный опыт 18:19 Яндекс Нейро и выдача в 2026 - остались ли лазейки для маленьких сайтов? 18:16 С чего сейчас проще начать? 08:29 Бесплатное получение бэклинков 08:19 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг	13:48 Мониторинг обменников Сrypto-scout.io 13:42 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 13:06 Чек номеров на наличие Telegram/ Filter (checking) numbers Telegram 11:55 Plata24: Быстрый обмен. Честный курс.  Полная безопасность. 11:46 BestChange – обменивать электронную валюту можно быстро и выгодно 09:31 Monitex: Мониторинг с кэшбэком 80% в USDT 08:45 Trustpilot Reviews \| Подниму рейтинг вашей компании	22:06 Точные прогнозы на футбол 18:15 молодильные яблоки и живая вода 07:17 Почему не обновляется счетчик ИКС (индекса качества сайта) 00:10 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 19:38 Голландцы влепили Grok по яйцам - теперь нельзя раздевать реальных людей, штраф 100к евро в день 06:50 Ставки на супер тренды в спорте 13:04 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем

Новые темы

Объявления

Свободное общение

13:23 Рост эффективности моего интернет‑магазина
11:31 AI под надзором. Минцифры готовят клеймо для контента
21:08 Adsense личный опыт
18:19 Яндекс Нейро и выдача в 2026 - остались ли лазейки для маленьких сайтов?
18:16 С чего сейчас проще начать?
08:29 Бесплатное получение бэклинков
08:19 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг

13:48 Мониторинг обменников Сrypto-scout.io
13:42 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old
13:06 Чек номеров на наличие Telegram/ Filter (checking) numbers Telegram
11:55 Plata24: Быстрый обмен. Честный курс.  Полная безопасность.
11:46 BestChange – обменивать электронную валюту можно быстро и выгодно
09:31 Monitex: Мониторинг с кэшбэком 80% в USDT
08:45 Trustpilot Reviews | Подниму рейтинг вашей компании

22:06 Точные прогнозы на футбол
18:15 молодильные яблоки и живая вода
07:17 Почему не обновляется счетчик ИКС (индекса качества сайта)
00:10 8 марта: желаю аптайма 99.9% и e-e-a-t без локов
19:38 Голландцы влепили Grok по яйцам - теперь нельзя раздевать реальных людей, штраф 100к евро в день
06:50 Ставки на супер тренды в спорте
13:04 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем

30.09.2020 23:00	Оказывается я просто не правильно делаю сайты. Представляете?
07.06.2020 22:18	Правильное название, это пол дела
02.03.2020 15:13	Закрыть страницу от индекса
20.04.2019 15:11	Как правильно оплатить кредит?
15.04.2019 22:25	Как правильно заказать домен?