Веб-краулер AppleBot существует
Веб-краулер AppleBot существуетВ справочном центре корпорации Apple появилась страница, посвященная веб-краулеру (поисковому роботу) AppleBot, который используется для сбора данных для Siri и Spotlight. Ранее в Сети ходили многочисленные слухи о его существовании, но в Купертино комментариев на эту тему не давали.

При сборе данных Apple будет придерживаться правил robots.txt и мета-тегов robots. Если AppleBot не упоминается в robots.txt, то корпорация будет следовать указаниям для GoogleBot. Для блокировки AppleBot и GoogleBot веб-мастеру достаточно заблокировать только GoogleBot.

В Купертино подчеркнули, что если веб-мастер заметит необычную активность со стороны AppleBot, то ему рекомендуется связаться со специалистами компании по email: Apple-NOC@apple.com

Также Apple Insider сообщил, что корпорация "стремительно расширяет внутреннюю группу поиска" для построения собственной версии поисковой системы на базе Spotlight.


7 Мая 2015

Возврат к списку



Новые темыОбъявленияСвободное общение
13:39 ClickDealer- свои люди на рынке буржа! 
13:10 Ищу парсер кинопоиск 
11:48 Что за плагин 
11:45 Adsense личный опыт 
11:27 Букварикс: бесплатная программа для быстрого поиска ключевых слов 
10:40 Новая биржа вечных ссылок Seolinkerman.ru 
10:37 Четверг 22 февраля 2018 Апдейт Яндекс выдача 
14:13 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc 
14:08 Внешнее продвижение сайтов качественно! Быстрое выполнение, на форуме с 2009 года! 
10:53 [Продажа] скрипт CPA/CPS-партнерской программы 
10:40 Автонаполняемый сайт фильмы онлайн 
00:43 Профильный прогон 200 рублей, ТИЦ от 10, проверен Checktrust 
23:24 9MC.RU Быстрые приватные SOCKS5 
19:27 Быстрые Dedicated servers, Выделенные сервера, Дедики 
14:16 Сайты нарушающие закон 
13:39 Оказывается я просто не правильно делаю сайты. Представляете? 
03:45 Переезд сайта с одной CMS на другую 
02:25 С праздником 23 февраля 
02:00 Купил первую зеркалку месяц назад - хожу извращаюсь. 
01:42 SkyNet - наши мысли читают поисковые системы. Ведётся слежка! 
01:31 Вкладываем в кобальт?