Индексация сайта с запретом Deny from

Сообщений: 24 Регистрация: Май 2019

19 Ноября 2019 12:52

Добрый день. Подскажите пожалуйста. почему при такой конструкции в .htaccess :
Order allow,deny
Allow from all
Deny from 37.113.15.58

Сделано было так чтоб разработчик мог работать над сайтом а остальные люди в интернете его не видели.

А так же robots.txt

User-Agent: *
Disallow: /

Сайт все равно проиндексировал все страницы?

Александр

Сообщений: 230 Регистрация: Авг 2012

19 Ноября 2019 13:37

Ничего не понял....
У вас сайт открыт для всех, но запрещен для одного IP.
Нужно было так:
Deny from all
Allow from 37.113.15.58

Охотникам пригодится

Александр

Сообщений: 24 Регистрация: Май 2019

19 Ноября 2019 14:05

Цитата
Александр пишет: Ничего не понял.... У вас сайт открыт для всех, но запрещен для одного IP. Нужно было так: Deny from all Allow from 37.113.15.58

Ошибся. Не с того сайа скопировал.

Вот так у меня написано на сайте который проиндексировался:
Order Deny,Allow
Deny from all
Allow from 195.98.73.105

Александр

Сообщений: 230 Регистрация: Авг 2012

19 Ноября 2019 15:32

Пробовали с другого IP заходить? Такая конструкция должна сработать. Во всяком случае у меня работает, когда я сайт закрываю и оставляю для одного IP. Сайт просто никак не может проиндексировать, если при посещении роботу Пса отдается 403 Forbidden.

Александр Сообщений: 24 Регистрация: Май 2019	#5 19 Ноября 2019 15:43 Александр, да. Все верно у меня на других пк не работает сайт. Выдает ошибку 403 Forbidden.

Новые темы	Объявления	Свободное общение
00:40 Стоит ли добавлять сайт в Rambler топ 100? 19:33 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 09:02 Как продвигать сайт с неуникальным контентом 08:57 Absence в Армении 14:50 Индексация страниц 12:36 У кого новостник, дайте пару советов плиз 13:53 AviTool - мощный инструмент для автоматизации работы с Avito	22:17 Продам копию сайта. 21:42 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника 15:52 AllCharge.online. Современный, быстрый и надёжный обменник 15:32 CactusPay.PRO \| Умная платёжная система с выводом в USDT TRC-20 12:01 PonyBit.ru - обменный пункт PonyBit.ru (Понибит.ру) 04:11 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 01:31 Скрипт обменника валют	21:05 Точные прогнозы на футбол 11:07 Ну что, кто куда деваете свои сайты? 22:09 Добро пожаловать в цифровой мир... 19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор 22:08 Накрутка поисковых подсказок 14:01 Union Pharm - топовая фарма-партнерка для профессионалов! 10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди

Новые темы

Объявления

Свободное общение

00:40 Стоит ли добавлять сайт в Rambler топ 100?
19:33 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!
09:02 Как продвигать сайт с неуникальным контентом
08:57 Absence в Армении
14:50 Индексация страниц
12:36 У кого новостник, дайте пару советов плиз
13:53 AviTool - мощный инструмент для автоматизации работы с Avito

22:17 Продам копию сайта.
21:42 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника
15:52 AllCharge.online. Современный, быстрый и надёжный обменник
15:32 CactusPay.PRO | Умная платёжная система с выводом в USDT TRC-20
12:01 PonyBit.ru - обменный пункт PonyBit.ru (Понибит.ру)
04:11 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
01:31 Скрипт обменника валют

21:05 Точные прогнозы на футбол
11:07 Ну что, кто куда деваете свои сайты?
22:09 Добро пожаловать в цифровой мир...
19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор
22:08 Накрутка поисковых подсказок
14:01 Union Pharm - топовая фарма-партнерка для профессионалов!
10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди

21.11.2023 23:40	переезд сайта на новый домен
01.08.2023 16:00	Яндекс добавил страницы сайта а потом их удалил за один день из поисковой выдачи
17.04.2023 09:38	Сколько времени занимает индексация картинок на Яндексе
06.12.2022 06:57	Какие параметры сайта требуются для роста ИКС?
16.09.2022 16:32	Новинка "Ниша сайта" в Яндекс.Вебмастере