Apple独自のWebクローラー「Applebot」、公式に認める - ITmedia ニュース

2015/05/07 52 users Googlebot Webクローラー Spotlight

米Appleはこのほど、独自のWebクローラー「Applebot」の存在を認めた。SiriとSpotlightなどに活用するためのものだという。 Appleがサポートページで公開した情報によると、Applebotは他社クローラーと同様にサイトのrobot.txtを尊重し、Applebotへの指示がない場合はGooglebotへの指示に従うという。 UserAgent表示には「Applebot」のほ... 続きを読む