Веб-краулер AppleBot существует

В справочном центре корпорации Apple появилась страница, посвященная веб-краулеру (поисковому роботу) AppleBot, который используется для сбора данных для Siri и Spotlight. Ранее в Сети ходили многочисленные слухи о его существовании, но в Купертино комментариев на эту тему не давали.

При сборе данных Apple будет придерживаться правил robots.txt и мета-тегов robots. Если AppleBot не упоминается в robots.txt, то корпорация будет следовать указаниям для GoogleBot. Для блокировки AppleBot и GoogleBot веб-мастеру достаточно заблокировать только GoogleBot.

В Купертино подчеркнули, что если веб-мастер заметит необычную активность со стороны AppleBot, то ему рекомендуется связаться со специалистами компании по email: Apple-NOC@apple.com

Также Apple Insider сообщил, что корпорация "стремительно расширяет внутреннюю группу поиска" для построения собственной версии поисковой системы на базе Spotlight.

7 Мая 2015

Возврат к списку

Новые темы	Объявления	Свободное общение
23:11 Как раскрутить сайт? 19:21 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 19:01 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 15:59 Profit Pixels - In-House Форекс, Крипто, Трейдинг CPA Офферы \| Еженедельные Выплаты \| CPA до $950 13:14 2Index - быстрая индексация страниц сайта и обратных ссылок 14:59 Партнерская программа OWNR WALLET 14:41 SharkBoss - партнёрская программа для монетизации ЛЮБЫХ видов трафика (включая спам).	23:01 Партнёрка для вебмастеров 20:47 EasyBusy.bz Проводи обмены легко и быстро вместе с нами 19:17 Johnny.Do \| Обмен криптовалют с круглосуточной техподдержкой 18:13 Ural-obmen.ru — выгодный сервис обмена 16:48 Obama.ru - безопасный обмен криптовалют и электронных денежных средств 15:52 Продам аккаунты HH.RU 15:24 Мобильные и Резидентные Прокси Для Соц Сетей \| 3 Гб Бесплатно	17:34 С юмором по жизни! 22:08 Точные прогнозы на футбол 08:11 Добро пожаловать в цифровой мир... 20:36 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 09:45 Подтягиваем физкультурку 15:02 Замедление скорости YouTube будет происходить по естественным причинам 09:47 Китайцы создали себе национальный Linux, напичканный ИИ-функциями