Applebot est le robot d'exploration d'Apple utilisé pour Siri et les suggestions Spotlight.
Le robot d'Apple respecte les instructions données dans un fichier robots.txt. Si le robots.txt ne mentionne pas Applebot mais mentionne Googlebot, le robot d'Apple va suivre les instructions du robots.txt pour Googlebot.
Exemple de robots.txt ciblant Applebot pour bloquer l'exploration du dossier /personnel/ :
User-agent: Applebot
Disallow: /personnel/Par ailleurs, le User-Agent utilisé par Apple contient toujours le nom Applebot :
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_10_1) AppleWebKit/600.2.5 (KHTML, like Gecko) Version/8.0.2 Safari/600.2.5 (Applebot/0.1)
Plus d'informations sur la page officielle du robot d'Apple.