Индексация сайта с запретом Deny from

Сообщений: 24 Регистрация: Май 2019

19 Ноября 2019 12:52

Добрый день. Подскажите пожалуйста. почему при такой конструкции в .htaccess :
Order allow,deny
Allow from all
Deny from 37.113.15.58

Сделано было так чтоб разработчик мог работать над сайтом а остальные люди в интернете его не видели.

А так же robots.txt

User-Agent: *
Disallow: /

Сайт все равно проиндексировал все страницы?

Александр

Сообщений: 230 Регистрация: Авг 2012

19 Ноября 2019 13:37

Ничего не понял....
У вас сайт открыт для всех, но запрещен для одного IP.
Нужно было так:
Deny from all
Allow from 37.113.15.58

Охотникам пригодится

Александр

Сообщений: 24 Регистрация: Май 2019

19 Ноября 2019 14:05

Цитата
Александр пишет: Ничего не понял.... У вас сайт открыт для всех, но запрещен для одного IP. Нужно было так: Deny from all Allow from 37.113.15.58

Ошибся. Не с того сайа скопировал.

Вот так у меня написано на сайте который проиндексировался:
Order Deny,Allow
Deny from all
Allow from 195.98.73.105

Александр

Сообщений: 230 Регистрация: Авг 2012

19 Ноября 2019 15:32

Пробовали с другого IP заходить? Такая конструкция должна сработать. Во всяком случае у меня работает, когда я сайт закрываю и оставляю для одного IP. Сайт просто никак не может проиндексировать, если при посещении роботу Пса отдается 403 Forbidden.

Александр Сообщений: 24 Регистрация: Май 2019	#5 19 Ноября 2019 15:43 Александр, да. Все верно у меня на других пк не работает сайт. Выдает ошибку 403 Forbidden.

Новые темы	Объявления	Свободное общение
19:29 Новая программа монетизации контента VK Видео увеличила доход авторов в 2,5 раза 17:22 LGaming - экосистема и партнерская программа в gambling и betting вертикалях 08:13 Роскомнадзор отказал в регистрации трети блогеров-десятитысячников 07:42 У Google наблюдается снижение трафика и, как следствие, уменьшение прибыли 20:36 Python скрипт безопасной накрутки посещаемости сайта 19:26 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 15:37 Adtrafico - Правильная партнёрская сеть под бурж трафик	19:15 Sapfirex.com - Современный сервис обмена криптовалют 19:09 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика 18:42 Sectormoney.com - быстрый и удобный обменник 13:58 Мобильные и Резидентные Прокси Для Соц Сетей \| 3 Гб Бесплатно 13:51 Быстрые и Надежные Мобильные Прокси – От 15$ в Неделю! 08:14 Продвижение и создание сайтов - фрилансер для долгосрочной работы 04:13 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка	19:31 НейроБабушка наказывает мошенников 19:27 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 12:41 Блогеров с аудиторией более 1 тыс. человек могут обязать сообщить о себе в РКН 07:49 Конгресс США заявил о лабораторном происхождении коронавируса 07:48 Пятница 13-ое: VK принял радикальное решение и закрыл доступ к порно контенту 21:17 Осторожно! Криптовалюта 16:04 Половина скидок на распродажах — фейк

Новые темы

Объявления

Свободное общение

19:29 Новая программа монетизации контента VK Видео увеличила доход авторов в 2,5 раза
17:22 LGaming - экосистема и партнерская программа в gambling и betting вертикалях
08:13 Роскомнадзор отказал в регистрации трети блогеров-десятитысячников
07:42 У Google наблюдается снижение трафика и, как следствие, уменьшение прибыли
20:36 Python скрипт безопасной накрутки посещаемости сайта
19:26 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!
15:37 Adtrafico - Правильная партнёрская сеть под бурж трафик

19:15 Sapfirex.com - Современный сервис обмена криптовалют
19:09 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика
18:42 Sectormoney.com - быстрый и удобный обменник
13:58 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно
13:51 Быстрые и Надежные Мобильные Прокси – От 15$ в Неделю!
08:14 Продвижение и создание сайтов - фрилансер для долгосрочной работы
04:13 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка

19:31 НейроБабушка наказывает мошенников
19:27 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко
12:41 Блогеров с аудиторией более 1 тыс. человек могут обязать сообщить о себе в РКН
07:49 Конгресс США заявил о лабораторном происхождении коронавируса
07:48 Пятница 13-ое: VK принял радикальное решение и закрыл доступ к порно контенту
21:17 Осторожно! Криптовалюта
16:04 Половина скидок на распродажах — фейк

21.11.2023 23:40	переезд сайта на новый домен
01.08.2023 16:00	Яндекс добавил страницы сайта а потом их удалил за один день из поисковой выдачи
17.04.2023 09:38	Сколько времени занимает индексация картинок на Яндексе
06.12.2022 06:57	Какие параметры сайта требуются для роста ИКС?
16.09.2022 16:32	Новинка "Ниша сайта" в Яндекс.Вебмастере