台風8号の風速をアニメーションで可視化する「Earth」が美しい | アプリオ

2014/07/08 43 users アプリオ EARTH 風速 アニメーション 猛威

7月8日現在、過去最強クラスの台風8号が本州に近づいてきている。台風は人間にとって大きすぎる脅威だが、自然の猛威に美しさを見出すこともできるだろう。 すごいぞGoogleマップ、"過去最強クラス"台風8号の衛星画像がほぼリアルタイムで一目瞭然 「Earth」は、世界中の風速などの気象データをアニメーションで表現しているサービスだ。地図データをNatural Earthから、気象データをGFSなどか... 続きを読む

グーグル発「Hadoop」、日本企業も利用へ - 「情報爆発」を支えるテクノロジー：ITpro

2011/01/17 453 users Hadoop ITpro MapReduce テクノロジー

Hadoopは、グーグルが検索エンジン用に開発したバッチ処理システムをオープンソース化したものだ。グーグルが開発した分散ファイルシステム「Google File System（GFS）」を模した「Hadoop Distributed File System（HD FS）」と、データ処理機構「MapReduce」を模した「Hadoop MapReduce」で構成する。 米国では米VISAや米JPモル... 続きを読む

そろそろHadoopについてひとこと言っておくか - nokunoの日記

2011/01/03 279 users nokuno Hadoop reduce ひとこと クローン

もうこの手の話題は出尽くした感がありますが、最近Hadoopについて考えることが多いので、エントリにしてみます。なお、ここではベーシックなMapReduce+HDFSのことをHadoopと呼ぶことにします。 HadoopとはHadoopとは言わずと知れたGoogleのMapReduce/GFSのオープンソースのクローンです。MapReduceではプログラマはMapとReduceという2つの関数を書... 続きを読む

アリエル　エリア - ドキュメント-Google File System(GFS)技術メモ

2005/10/20 303 users Labs アリエル Papers GNU ノート

Google file system(GFS) * 参照した論文 + http://labs.google.com/papers/gfs-sosp2003.pdf * 特徴 + 安いPC(OSはGNU/Linux)で分散ファイルシステムを構築しています(*注1)。 + PCは壊れるという前提で設計しています(*注2)。このため、分散システムを構成するノードが壊れた時、データが失われないことと、自動... 続きを読む