Веб-краулер AppleBot существует
Веб-краулер AppleBot существуетВ справочном центре корпорации Apple появилась страница, посвященная веб-краулеру (поисковому роботу) AppleBot, который используется для сбора данных для Siri и Spotlight. Ранее в Сети ходили многочисленные слухи о его существовании, но в Купертино комментариев на эту тему не давали.

При сборе данных Apple будет придерживаться правил robots.txt и мета-тегов robots. Если AppleBot не упоминается в robots.txt, то корпорация будет следовать указаниям для GoogleBot. Для блокировки AppleBot и GoogleBot веб-мастеру достаточно заблокировать только GoogleBot.

В Купертино подчеркнули, что если веб-мастер заметит необычную активность со стороны AppleBot, то ему рекомендуется связаться со специалистами компании по email: Apple-NOC@apple.com

Также Apple Insider сообщил, что корпорация "стремительно расширяет внутреннюю группу поиска" для построения собственной версии поисковой системы на базе Spotlight.


7 Мая 2015

Возврат к списку



Новые темыОбъявленияСвободное общение
21:28 Каких результатов Вы добились после подключения турбо страниц? 
21:15 Зачем нужна накрутка трафика, что она дает? 
21:11 Отрубается база данных 
21:08 АП 20 октября Яндекс выдача | Jack SparroW: Если сайт ГС ему никакие ссылки не помогут 
20:42 Вывод последних записей с изображениями 
20:17 Adsense личный опыт 
20:14 Стоит ли выкладывать рекламу в яндекс ? 
21:13 Мастерский копирайтинг от Кота. Добавлена ЭПС Qiwi 
20:52 Рерайт 10р/1к 
19:42 Продам Стоматологический сайт 400 уников 
19:41 Продам трастовый IT сайт vise.im, возраст 6 лет, ТИЦ 50 
19:03 LOADgroup: Сервис по продаже Инсталлов. 
16:06 Качественный прогон Хрумером, Zennoposterом всего 10 WMZ, Большой опыт работы. Статьи, комментарии, профиля, гостевые. 
15:13 Продажа Dedicated servers (дедиков)! 
20:53 С наступающим Новым Годом 2019! 
17:46 Автоматический сервис продвижения(накрутки). 18 соц сетей! Бонус местным! 
16:16 Конверт трафика инстаграмм 
16:00 Скрины спама 
01:05 РИА Новости: Американские финансисты прогнозируют обвал доллара 
22:28 Месменджеры 
19:27 Сайт по накрутке подписчиков