日本国内のCDNシェア:Geekなぺーじ

2017/11/16 246 users ページ CNAME CDN ＤＮＳ Webクローラー

JStreamによる、日本のCDNシェアに関する調査結果が公表されています。 JStreamブログは、CDNに関連する色々な調査結果をブログで公開していて面白いです。 日本のCDNシェアについて調査結果＠2017年10月 JStreamブログの「市場調査」タグ 2017年10月版国内CDNシェアの調査方法は、Webクローラーによるもので、DNSに登録されたCNAMEや、HTTPメッセージに含まれる... 続きを読む

MOONGIFT: » クローラーを作るためのフレームワーク「Anemone」:オープンソースを毎日紹介

2009/07/07 372 users Anemone MASHUP MOONGIFT クローラー

RSSフィードやWeb API、Mashupなどの単語が注目を集める中、Webクローラーを通じて外部のWebサイトにあるデータをかき集め、それを解析して別な形にするというのはよく見られるものになってきた。 あるURLを指定し、そこからリンクされているURLを一覧表示できる そうした数々のシステムの中で、クローラーとなる基盤は大きな違いはない。Webサイトのデータを取得し、次のリンクを洗い出して取得... 続きを読む