Индексация сайта с запретом Deny from

Сообщений: 24 Регистрация: Май 2019

19 Ноября 2019 12:52

Добрый день. Подскажите пожалуйста. почему при такой конструкции в .htaccess :
Order allow,deny
Allow from all
Deny from 37.113.15.58

Сделано было так чтоб разработчик мог работать над сайтом а остальные люди в интернете его не видели.

А так же robots.txt

User-Agent: *
Disallow: /

Сайт все равно проиндексировал все страницы?

Александр

Сообщений: 230 Регистрация: Авг 2012

19 Ноября 2019 13:37

Ничего не понял....
У вас сайт открыт для всех, но запрещен для одного IP.
Нужно было так:
Deny from all
Allow from 37.113.15.58

Охотникам пригодится

Александр

Сообщений: 24 Регистрация: Май 2019

19 Ноября 2019 14:05

Цитата
Александр пишет: Ничего не понял.... У вас сайт открыт для всех, но запрещен для одного IP. Нужно было так: Deny from all Allow from 37.113.15.58

Ошибся. Не с того сайа скопировал.

Вот так у меня написано на сайте который проиндексировался:
Order Deny,Allow
Deny from all
Allow from 195.98.73.105

Александр

Сообщений: 230 Регистрация: Авг 2012

19 Ноября 2019 15:32

Пробовали с другого IP заходить? Такая конструкция должна сработать. Во всяком случае у меня работает, когда я сайт закрываю и оставляю для одного IP. Сайт просто никак не может проиндексировать, если при посещении роботу Пса отдается 403 Forbidden.

Александр Сообщений: 24 Регистрация: Май 2019	#5 19 Ноября 2019 15:43 Александр, да. Все верно у меня на других пк не работает сайт. Выдает ошибку 403 Forbidden.

Новые темы	Объявления	Свободное общение
17:55 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 17:04 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 15:43 Adtrafico - Правильная партнёрская сеть под бурж трафик 12:50 Партнерская программа OWNR WALLET 01:46 Настроить поставщиков в программе E-Trade PriceList Importer 15:26 Найти элемент в коде 11:51 Bropush - твой бро в монетизации сайта push-уведомлениями	18:22 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика 12:33 Услуга чертежника и 3D моделирования 20:40 Ural-obmen.ru — выгодный сервис обмена 20:29 Obama.ru - безопасный обмен криптовалют и электронных денежных средств 16:54 Прием платежей для HIGH RISK \| Прием платежей без сайта 16:54 Услуги рассылки Viber\|Whatsapp\|IMO. 16:53 Услуги рассылки Вконтакте	15:49 Точные прогнозы на футбол 16:32 Видимо, похороны СУПРа уже прошли как-то по-тихому 12:48 Каспкрски ОС 11:21 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 14:41 Бесплатный мини-аудит юзабилити и конверсии + технический SEO-аудит в подарок 15:24 Добро пожаловать в цифровой мир... 22:58 У меня дикая просадка по РСЯ за последние 3 суток

Новые темы

Объявления

Свободное общение

17:55 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!
17:04 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
15:43 Adtrafico - Правильная партнёрская сеть под бурж трафик
12:50 Партнерская программа OWNR WALLET
01:46 Настроить поставщиков в программе E-Trade PriceList Importer
15:26 Найти элемент в коде
11:51 Bropush - твой бро в монетизации сайта push-уведомлениями

18:22 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика
12:33 Услуга чертежника и 3D моделирования
20:40 Ural-obmen.ru — выгодный сервис обмена
20:29 Obama.ru - безопасный обмен криптовалют и электронных денежных средств
16:54 Прием платежей для HIGH RISK | Прием платежей без сайта
16:54 Услуги рассылки Viber|Whatsapp|IMO.
16:53 Услуги рассылки Вконтакте

15:49 Точные прогнозы на футбол
16:32 Видимо, похороны СУПРа уже прошли как-то по-тихому
12:48 Каспкрски ОС
11:21 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди
14:41 Бесплатный мини-аудит юзабилити и конверсии + технический SEO-аудит в подарок
15:24 Добро пожаловать в цифровой мир...
22:58 У меня дикая просадка по РСЯ за последние 3 суток

21.11.2023 23:40	переезд сайта на новый домен
01.08.2023 16:00	Яндекс добавил страницы сайта а потом их удалил за один день из поисковой выдачи
17.04.2023 09:38	Сколько времени занимает индексация картинок на Яндексе
06.12.2022 06:57	Какие параметры сайта требуются для роста ИКС?
16.09.2022 16:32	Новинка "Ниша сайта" в Яндекс.Вебмастере