Google、大規模データをリアルタイムに分析できるクラウドサービス「Google Cloud Dataflow」を発表。「1年前からMapReduceは使っていない」 － Publickey

2014/06/26 400 users MapReduce Hadoop Publickey 処理系

Google、大規模データをリアルタイムに分析できるクラウドサービス「Google Cloud Dataflow」を発表。「1年前からMapReduceは使っていない」 大規模分散処理のフレームワークとしてGoogleが開発し、Hadoopに採用されて広く使われているMapReduce。しかしGoogleはもうMapReduceを使わず、より優れた処理系の「Google Cloud Dataflo... 続きを読む

「次世代Hadoopの開発に着手する」Yahoo!が宣言、数万台以上のクラスタをサポートへ － Publickey

2011/02/21 59 users Publickey Hadoop スケーラビリティ クラスタ

米Yahoo!が大規模分散処理のフレームワーク「Hadoop」の次世代版を開発することを、ブログYahoo! Developers Networkにポストしたエントリ「The Next Generation of Apache Hadoop MapReduce」で明らかにしました。Yahoo!によると、現在のHadoopの実装では1クラスタあたり4000台程度でスケーラビリティの限界にあたるため、... 続きを読む

GoogleのMapReduceアルゴリズムをJavaで理解する (1/2) - @IT

2008/07/08 554 users Java Google MapReduce 小山博史 利点

GoogleのMapReduceアルゴリズムを Javaで理解する 特集：いま再注目の分散処理技術（前編） 株式会社ガリレオ 小山博史 2008/7/8 最近注目を浴びている分散処理技術「MapReduce」の利点をサンプルからアルゴリズムレベルで理解し、昔からあるJava関連の分散処理技術を見直す特集企画（編集部） いま注目の大規模分散処理アルゴリズム 最近、大規模分散処理が注目を浴びています。... 続きを読む