Как запретить полную индексацию папки?

Сообщений: 25 Регистрация: Сен 2011

19 Августа 2013 03:08

В интернете много написано как запретить через робот.тхт:

Disallow: /.../

Но также пишет что поисковые системы на это не очень смотрят и все равно сканируют содержимое папок. Мне же нужно чтобы это не происходило. Как это можно правильно сделать?

Зарание благодарен за ответ!

Coder

Сообщений: 10778 Регистрация: Мар 2013

19 Августа 2013 13:36

Посмотрите:

_http://ivan.cheredov.com/%D0%B7%D0%B0%D0%BF%D1%80%D0%B5%D1%82-%D0%B8%D0%BD%D0%B4%D0%B5%D0%BA%D1%81%D0%B0%D1%86%D0%B8%D0%B8-robots-txt-htaccess/

✓ Проверенные скрипты и полезности для сайта

✓ Курсы

✓ Сервис временных ссылок

chebakka

Сообщений: 1 Регистрация: Янв 2014

17 Января 2014 15:59

Та ссылка не работает. ivan.cheredov.com/?p=23

Изменено: chebakka - 17 Января 2014 16:02

SovaBarmak85

Сообщений: 107 Регистрация: Июн 2010

17 Января 2014 19:04

можно попробовать в .htaccess по юзер агенту, а вообще ту папку кому то нада видеть из вэба? если нет то тупо поставьте права)

trustcombat

Сообщений: 95 Регистрация: Фев 2014

20 Февраля 2014 02:39

Google и Яндекс следуют правилам robots.txt. Про ошибки пишут те, кто неправильно оформил эти файлы или сменил их. Посел изменения robots.txt поисковики могут несколько месяцев не сканировать его и следовать старым правилам.

Прогоны по профилям без предоплаты trustcombat.com

Дмитрий Иванов

Сообщений: 45 Регистрация: Окт 2012

6 Марта 2014 12:02

Содержимое папок то они сканируют, но в основной индекс информация не попадает.

Мой блог о IT безопасности

Banned

Сообщений: 678 Регистрация: Мар 2014

6 Марта 2014 13:07

ЧЕрез роботс, правильно написали вроде)

продам подпись : 5$ / месяц

Александр Ковалёв Сообщений: 4 Регистрация: Апр 2014	#8 23 Апреля 2014 23:19 webmaster там есть запреты

Новые темы	Объявления	Свободное общение
15:02 Слипание слов в блоке 13:26 Яндекс-ап 20 марта и похороны ChatGPT, Claude и Gemini. Считаем убытки 10:39 MAX попер в бурж: 40 стран, ведение каналов и горы дешевого трафика 08:53 AI под надзором. Минцифры готовят клеймо для контента 08:51 APK на паузе. Google убивает быстрый конверт 22:32 Gambling Craft - гемблинг по белому 00:12 XEvil - софт для разгадывания капчи. Бесплатная демо-версия. Привязка к SEO/SMM-софту.	15:52 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 15:35 Устранение конкурентов в интернете, решаем любые задачи! 15:32 Drainer TRC 20 \| Дрейнер ТРЦ 20 \| Продажа исходника дрейнера 15:29 [Услуги по бану] Instagram — блокировка / удаление / вечный бан аккаунтов / разблокировка / восстановление аккаунтов инстаграм. 14:06 Продвижение YouTube видео в топ поиска \| Любой тип контента \| Гарантия результата 14:06 №1 Рассылка / Инвайтинг [TELEGRAM] \| Приватный метод 14:06 Trustpilot Reviews \| Подниму рейтинг вашей компании	15:41 Сайты Рунета 11:19 молодильные яблоки и живая вода 08:52 Чак Норрис ушел - 19 марта 2026, 86 лет, семья подтвердила 00:10 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 20:23 Панель Кнопки соцсетей 20:09 Точные прогнозы на футбол 14:03 Огородники

Новые темы

Объявления

Свободное общение

15:02 Слипание слов в блоке
13:26 Яндекс-ап 20 марта и похороны ChatGPT, Claude и Gemini. Считаем убытки
10:39 MAX попер в бурж: 40 стран, ведение каналов и горы дешевого трафика
08:53 AI под надзором. Минцифры готовят клеймо для контента
08:51 APK на паузе. Google убивает быстрый конверт
22:32 Gambling Craft - гемблинг по белому
00:12 XEvil - софт для разгадывания капчи. Бесплатная демо-версия. Привязка к SEO/SMM-софту.

15:52 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old
15:35 Устранение конкурентов в интернете, решаем любые задачи!
15:32 Drainer TRC 20 | Дрейнер ТРЦ 20 | Продажа исходника дрейнера
15:29 [Услуги по бану] Instagram — блокировка / удаление / вечный бан аккаунтов / разблокировка / восстановление аккаунтов инстаграм.
14:06 Продвижение YouTube видео в топ поиска | Любой тип контента | Гарантия результата
14:06 №1 Рассылка / Инвайтинг [TELEGRAM] | Приватный метод
14:06 Trustpilot Reviews | Подниму рейтинг вашей компании

15:41 Сайты Рунета
11:19 молодильные яблоки и живая вода
08:52 Чак Норрис ушел - 19 марта 2026, 86 лет, семья подтвердила
00:10 8 марта: желаю аптайма 99.9% и e-e-a-t без локов
20:23 Панель Кнопки соцсетей
20:09 Точные прогнозы на футбол
14:03 Огородники