Веб-краулер AppleBot существует

В справочном центре корпорации Apple появилась страница, посвященная веб-краулеру (поисковому роботу) AppleBot, который используется для сбора данных для Siri и Spotlight. Ранее в Сети ходили многочисленные слухи о его существовании, но в Купертино комментариев на эту тему не давали.

При сборе данных Apple будет придерживаться правил robots.txt и мета-тегов robots. Если AppleBot не упоминается в robots.txt, то корпорация будет следовать указаниям для GoogleBot. Для блокировки AppleBot и GoogleBot веб-мастеру достаточно заблокировать только GoogleBot.

В Купертино подчеркнули, что если веб-мастер заметит необычную активность со стороны AppleBot, то ему рекомендуется связаться со специалистами компании по email: Apple-NOC@apple.com

Также Apple Insider сообщил, что корпорация "стремительно расширяет внутреннюю группу поиска" для построения собственной версии поисковой системы на базе Spotlight.

7 Мая 2015

Возврат к списку

Новые темы	Объявления	Свободное общение
16:23 МyLead дает советы по продвижению 15:50 Profit Pixels - In-House Форекс, Крипто, Трейдинг CPA Офферы \| Еженедельные Выплаты \| CPA до $950 14:39 XEvil - софт для разгадывания капчи. Бесплатная демо-версия. Привязка к SEO/SMM-софту. 14:11 Как сделать свой БУРЖ прокси-сервер 11:37 GPT-4 от ChatGPT языковая модель нового поколения 01:39 ChatGPT от Microsoft начал хамить пользователям, требовать извинений и жаловаться на жизнь 00:08 Сайт полностью выпал с поиска	16:16 ALTVPN.com - анонимный и безопасный VPN и Прокси сервис 15:18 Ural-obmen.ru — выгодный сервис обмена 13:48 Expa24.com Обмен Криптовалют. Ввод/Вывод наличные Украина/Северный Кипр/Мир 13:38 Ручное размещение вечных статей и ссылок на хороших площадках. Опыт 15 лет! 12:31 Дешевые просмотры YouTube с гарантией, лайки, подписчики Instagram, ВК, Facebook, ОK, Twitter - SmmPanele.Ru 12:03 ProxyWins.com - 15% по промо-коду "venividivici" 10:30 Obama.ru - безопасный обмен криптовалют и электронных денежных средств	22:00 Список обновленных тем пуст... 10:46 МТС нехорошие люди 01:16 Как заставить себя? 01:13 Платформа АНТИСТАВОК - ставки на события с обратным исходом! 18:46 Сотрудники Wildberries готовят забастовку из-за штрафов за возврат товара 22:41 Искусственный интеллект назвал профессии, которые скоро отберет у людей 19:35 В России разработают литограф для производства чипов по 7-нм техпроцессу