Веб-краулер AppleBot существует

В справочном центре корпорации Apple появилась страница, посвященная веб-краулеру (поисковому роботу) AppleBot, который используется для сбора данных для Siri и Spotlight. Ранее в Сети ходили многочисленные слухи о его существовании, но в Купертино комментариев на эту тему не давали.

При сборе данных Apple будет придерживаться правил robots.txt и мета-тегов robots. Если AppleBot не упоминается в robots.txt, то корпорация будет следовать указаниям для GoogleBot. Для блокировки AppleBot и GoogleBot веб-мастеру достаточно заблокировать только GoogleBot.

В Купертино подчеркнули, что если веб-мастер заметит необычную активность со стороны AppleBot, то ему рекомендуется связаться со специалистами компании по email: Apple-NOC@apple.com

Также Apple Insider сообщил, что корпорация "стремительно расширяет внутреннюю группу поиска" для построения собственной версии поисковой системы на базе Spotlight.

7 Мая 2015

Возврат к списку

Новые темы	Объявления	Свободное общение
20:13 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 19:41 25$ (ежемесячно) AdSense 21:39 Подскажите где продвигать сайт. 10:57 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 19:12 Мошенники-копирайтеры 08:57 Индексация страниц 23:16 Есть ли альтернатива Адсенсу и РСЯ?	04:10 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 23:58 Аккаунты работадателей HH.RU 23:53 Продам аккаунты HH.RU 23:40 GoogleWalker - устранение конкурентов в Google Ads \| Автоматизированная система склика \| АНТИБАН 20:37 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 17:39 Ural-obmen.ru — выгодный сервис обмена 14:06 Обменный пункт cashalot.one. Выгодный обмен.	00:12 Огородники 22:36 Точные прогнозы на футбол 10:59 Новости искусственного интеллекта 04:26 Хром ругается на форум 18:41 С юмором по жизни! 14:22 SENDERSEX.COM - Тизерная партнёрка онлайн игры Эротические Фанты Онлайн 20:32 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди