Как запретить полную индексацию папки?

Сообщений: 25 Регистрация: Сен 2011

19 Августа 2013 03:08

В интернете много написано как запретить через робот.тхт:

Disallow: /.../

Но также пишет что поисковые системы на это не очень смотрят и все равно сканируют содержимое папок. Мне же нужно чтобы это не происходило. Как это можно правильно сделать?

Зарание благодарен за ответ!

Coder

Сообщений: 10609 Регистрация: Мар 2013

19 Августа 2013 13:36

Посмотрите:

_http://ivan.cheredov.com/%D0%B7%D0%B0%D0%BF%D1%80%D0%B5%D1%82-%D0%B8%D0%BD%D0%B4%D0%B5%D0%BA%D1%81%D0%B0%D1%86%D0%B8%D0%B8-robots-txt-htaccess/

✓ Проверенные скрипты и полезности для сайта

✓ Курсы

✓ Сервис временных ссылок

chebakka

Сообщений: 1 Регистрация: Янв 2014

17 Января 2014 15:59

Та ссылка не работает. ivan.cheredov.com/?p=23

Изменено: chebakka - 17 Января 2014 16:02

SovaBarmak85

Сообщений: 107 Регистрация: Июн 2010

17 Января 2014 19:04

можно попробовать в .htaccess по юзер агенту, а вообще ту папку кому то нада видеть из вэба? если нет то тупо поставьте права)

trustcombat

Сообщений: 95 Регистрация: Фев 2014

20 Февраля 2014 02:39

Google и Яндекс следуют правилам robots.txt. Про ошибки пишут те, кто неправильно оформил эти файлы или сменил их. Посел изменения robots.txt поисковики могут несколько месяцев не сканировать его и следовать старым правилам.

Прогоны по профилям без предоплаты trustcombat.com

Дмитрий Иванов

Сообщений: 45 Регистрация: Окт 2012

6 Марта 2014 12:02

Содержимое папок то они сканируют, но в основной индекс информация не попадает.

Мой блог о IT безопасности

Banned

Сообщений: 678 Регистрация: Мар 2014

6 Марта 2014 13:07

ЧЕрез роботс, правильно написали вроде)

продам подпись : 5$ / месяц

Александр Ковалёв Сообщений: 4 Регистрация: Апр 2014	#8 23 Апреля 2014 23:19 webmaster там есть запреты

Новые темы	Объявления	Свободное общение
09:57 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 19:33 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 17:02 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 15:12 Несколько статей хорошо выдаются в Гугле, но отвратительно в Яндексе 13:40 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 11:41 2Index - быстрая индексация страниц сайта и обратных ссылок 23:00 Продвижение по ключам	19:55 JustProxy.Biz - Резидентные прокси без ограничения по трафику 15:41 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust 13:32 TokenTrade — Ваш новый надежный обменник 11:17 Oblaka.in — Обмен криптовалюты быстро, выгодно и безопасно 20:45 SnapSwap.io — мгновенный обмен BTC, XMR, ETH, USDT и других криптовалют без регистрации! 18:11 Clearex.io - Больше чем обменник 16:04 Продам базу данных предприятий Украины, России, Великобритании, Германии, Испании, Италии, Нидерландов, Польши, Франции, Швейцарии и др.	16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 20:43 Добро пожаловать в цифровой мир... 15:59 Про мясо 23:09 ПП от PMS remote.team - 200$ за команду 13:28 Компьютерная мышь 22:55 Ну что, кто куда деваете свои сайты? 22:34 Используете беспроводные наушники?

Новые темы

Объявления

Свободное общение

09:57 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг
19:33 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options
17:02 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
15:12 Несколько статей хорошо выдаются в Гугле, но отвратительно в Яндексе
13:40 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!
11:41 2Index - быстрая индексация страниц сайта и обратных ссылок
23:00 Продвижение по ключам

19:55 JustProxy.Biz - Резидентные прокси без ограничения по трафику
15:41 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust
13:32 TokenTrade — Ваш новый надежный обменник
11:17 Oblaka.in — Обмен криптовалюты быстро, выгодно и безопасно
20:45 SnapSwap.io — мгновенный обмен BTC, XMR, ETH, USDT и других криптовалют без регистрации!
18:11 Clearex.io - Больше чем обменник
16:04 Продам базу данных предприятий Украины, России, Великобритании, Германии, Испании, Италии, Нидерландов, Польши, Франции, Швейцарии и др.

16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру
20:43 Добро пожаловать в цифровой мир...
15:59 Про мясо
23:09 ПП от PMS remote.team - 200$ за команду
13:28 Компьютерная мышь
22:55 Ну что, кто куда деваете свои сайты?
22:34 Используете беспроводные наушники?