Google Spanner のアーキテクチャを知る - Yuichi Murata's Engineering Blog

2017/02/27 214 users アーキテクチャ Spanner リソース 論文 ベータ公開

2017 - 02 - 26 Google Spanner のアーキテクチャを知る Cloud Spanner 最近 Cloud Spanner のベータ公開によって話題の Spanner。 気になっていたので論文を読んだり勉強会などで情報収集していました。日本語のリソースもそこまで多くないので、調べてわかったことを纏めておきます。 簡単にまとめると特徴は以下のとおりです。 Bigtable / ... 続きを読む

Googleがグローバルな分散データベースCloud Spannerをローンチ、SQLとNoSQLの‘良いとこ取り’を実装 | TechCrunch Japan

2017/02/15 201 users NoSQL ミッションクリティカル SQL ローンチ 一連

Googleが今日、Cloud Spannerのベータローンチを 発表した 。それは、ミッションクリティカルなアプリケーションのための、グローバルな分散データベースだ。Cloud SpannerはGoogleの一連の、クラウドベースのデータベースサービスの仲間に加わる…それらは、Bigtable, Cloud SQL, そしてCloud Datastoreなどだが、しかしその重要な特徴は、従来的な... 続きを読む

Google、HBase API互換のCloud Bigtableを公開、Googleの基盤で使われてきたNoSQLデータベースが利用可能に。Cloud Datastoreとの違いは？ － Publickey

2015/05/11 35 users Publickey スケーラブル NoSQLデータベース

Googleは5月6日、10年以上にわたりGoogleのほとんどの重要なアプリケーションを稼働させてきたNoSQLデータベースのBigtableを、クラウドサービスの「Google Cloud Bigtable」として公開しました。 Cloud BigtableはフルマネージドのスケーラブルなNoSQLデータベースで、高い性能が特長。大規模なデータ収集、分析などに向いているとされています。 HBa... 続きを読む

Googleがスケーラビリティとパフォーマンスの高いNoSQLデータベースCloud Bigtableをベータで提供開始 | TechCrunch Japan

2015/05/06 48 users スケーラビリティ ベータ TechCrunch JAPAN

Googleが今日（米国時間5/6）、新しいNoSQLデータベースCloud Bigtableをローンチする。名前が示しているように、それは同社のデータストレージシステムBigtableを利用しているが、APIはApache HBaseのそれと互換性があり、というかHBaseもGoogleのBigtableプロジェクトを利用しているのだ。BigtableはGmail（メール）やGoogle Sea... 続きを読む

「Apache HBase」がバージョン1.0に到達、開発開始から7年で － Publickey

2015/03/02 30 users Publickey Hadoop HBase 到達 特長

GoogleのBigTableを参考にオープンソースで開発されたHBaseは、HadoopのファイルシステムであるHDFS上に構築されたキーバリューストア型のデータベース。高いスケーラビリティや柔軟なテーブル構造、自動シャーディングやフェイルオーバー機能などを特長とします。 そのHBaseがバージョン1.0に到達したことが、The Apache Software Foundation Blogにポ... 続きを読む

HBaseを触ってみよう （1/5）：CodeZine

2013/01/16 103 users CodeZine MapReduce HBase RDB 標準

HBaseは、Googleの基盤ソフトウェアである「Bigtable」のオープンソースクローンであり、大量データに対応した分散ストレージシステムです。HBaseを用いることで、スケーラブルで信頼性のあるデータベースを構築することができます。また、MapReduceを標準でサポートしており、HBaseに保存したデータに対してバッチ処理を行うことも可能です。しかし、SQLで扱えないことや、RDBとのス... 続きを読む

GoogleのリアルタイムビッグデータツールDremelがオープンソース化してApache Drillへ

2012/08/18 254 users Apache Drill Google ドキュメ ソース化

Googleには、今さら言うまでもなく、大量のデータがあり、それらを扱うためのツールを数多く作ってきた。中でもとくに有力な製品として、MapReduceやGoogleFSはオープンソースのApache Hadoopを生み、BigTableはApache HBaseを孵（かえ）した。 でも、それで終わりではない。同社はその後もビッグデータを処理するためのツールを作り続け、それらに関する論文やドキュメ... 続きを読む

Google のソフトウェア･インフラは時代遅れだと、元 Wave エンジニアが語る « Agile Cat — in the cloud with openness

2011/06/07 36 users Agile Cat インフラ エンジニア ソフトウェア

Filed under: .Chronicle,Google — Agile Cat @ 7:12 am Tags: Apache Hadoop, Bigtable, Dhanji R. Prasanna, Google, Google App Engine, Google Wave, Infrastructure, MapReduce, Prasanna Ex-Google Engineer S... 続きを読む

Googleの巨大分散データストアBigtableとDatastoreを理解する - データベース新基礎知識：ITpro

2011/01/20 176 users DataStore ITpro 地平 データベース 工夫

今回は、米Googleのクラウド環境に存在するデータベースBigtableとDatastoreサービスを紹介します。「巨大分散」という新たなデータベースの地平を切り開くためにどのような工夫をしているか、じっくり見ていきましょう。 「Bigtable」は、Googleの主要なサービスを支える独自の巨大分散データストアです＊1。Bigtableは、2005年4月から本格的な運用（プロダクション利用）が... 続きを読む

もう1つの、DBのかたち、分散Key-Valueストアとは (1/3) - ＠IT

2009/07/02 671 users 分散Key-Valueストア かたち RDB グーグル 本命

有限会社スティルハウス 吉川和巳 2009/7/2 RDBとは別の、クラウド時代のデータベースとして注目を浴びている「分散Key-Valueストア」。その本命ともいえる、Googleの数々のサービスの基盤技術「Bigtable」について徹底解説 クラウド時代のデータベース「分散Key-Valueストア」 グーグルがインターネットの世界をここまで席けんできた最大の理由は何でしょうか。実は、それは同社... 続きを読む

RDBMSの時代の終わりが見えてきた - きしだのはてな

2008/12/12 345 users RDBMS Azure SQL Microsoft はてな

クラウドと一緒にやってきたもの最近、クラウドが流行ってます。GoogleのMapResuceから始まって、MicrosoftのAzureまで、大手のクラウド製品が出揃った感じ。で、そこで、こんなクラウド製品が出ましたというときに、必ずといっていいほどそのクラウド用のデータベースの説明があります。そして、それはRDBMSではありません。GoogleだとBigTable、MicrosoftだとSQL ... 続きを読む

Googleの誇る巨大データベースBigTableのオープンソースクローン「Hypertable」 - GIGAZINE

2008/02/08 287 users GIGAZINE alpha クローン 分散データベース 人々

Googleのあの巨大な検索システムなどを支えるデータベース「BigTable」は書き込みが毎秒700MB、読み込みが毎秒18GBという化け物システムなのですが、それのクローンを作るプロジェクト「Hypertable」というのがあるようです。既にバージョンが今年の2月4日に「0.9 Alpha」まで到達しており、超巨大な分散データベースを考えている人々から注目されているようです。 詳細は以下から。... 続きを読む