タグ データウェアハウス
人気順 5 users 10 users 100 users 500 users 1000 usersデータウェアハウスのデータモデリングを整理してみた - Qiita
概要 スタースキーマからスノーフレーク、ギャラクシー、そしてデータボールトやアンカーモデリングまで、各スキーマの特徴、利点、そして適用シナリオを掘り下げます。 スタースキーマ スタースキーマを元に整理します。 スタースキーマ または 星型スキーマ はデータウェアハウスに利用される最も単純なスキーマである... 続きを読む
DWHにおけるデータモデリングで大事にしている考え方
こんにちは。データエンジニアリングの支援を行っているstable株式会社の代表の宮﨑(@ikki_mz)です。弊社では、クライアント社内のデータウェアハウス(DWH)におけるデータモデリングをサポート... 続きを読む
新しいデータ基盤アーキテクチャである「データレイクハウス」について調べてみた - Taste of Tech Topics
最近ソーダストリームを買い、炭酸水を飲むのにはまってます。機械学習エンジニアの@yktm31です。 以前に「AWS Lake Formationでデータレイク体験!」という記事を書いてみて、データ基盤アーキテクチャに興味が湧いてきました。 データレイクハウスは、「データウェアハウス」と「データレイク」を統合したようなアーキ... 続きを読む
Dockerでデプロイ、60ノードまでスケールアウト、Sparkで分析 テラバイト・クラスの集計処理もあっさり返すdashDB LocalでDWHを構築する - はてなニュース
日本アイ・ビー・エム(以下、日本IBM)の「IBM dashDB Local」は、プライベートクラウド/ハイブリッドクラウドに最適な構成を持つデータウェアハウス(DWH)向けの製品である。Dockerコンテナとしてデプロイ、スケールアウト(規模拡大)でき、データ量や処理負荷の急増に柔軟に対応できる。インメモリの列指向データベースと並列処理により検索処理を高速に実行する。システムの成長に柔軟に対応で... 続きを読む
[速報]「Amazon Redshift Spectrum」発表。Amazon S3にデータを保存したまま複雑なクエリを高速で実行可能に。AWS Summit 2017 San Francisco - Publickey
[速報]「Amazon Redshift Spectrum」発表。Amazon S3にデータを保存したまま複雑なクエリを高速で実行可能に。AWS Summit 2017 San Francisco Amazon Web Servicesは、サンフランシスコでイベント「AWS Summit 2017 San Francisco」を開催。データウェアハウスの新サービス「Amazon Redshift ... 続きを読む
これからAmazon Redshiftを始める技術者が注意すべき11つのポイント | Developers.IO
Amazon Redshiftを使った実案件を経験してこれは注意したほうがいいなというポイントをまとめました。自分が経験した範囲で書いているので多少偏っているかもしれませんが、参考になれば幸いです。データウェアハウスって何?という方は以前入門記事を書きましたのでこちらの記事をご覧ください。 気軽に始めてみよう!クラウド時代のデータウェアハウス超入門 注意事項一覧 PostgreSQLと違う点に注意... 続きを読む
Amazon Redshiftで構築するビッグデータ分析環境の構成要素と全体像 (1/2):CodeZine
数多くのAWS(Amazon Web Sevices)サービスのうち、“ビッグデータ”を扱う環境として注目を浴びているのが、データウェアハウス(以下、DWH)サービスの「Amazon Redshift」です。機能追加や改善リリースも頻繁に行われています。しかし、興味や関心はあるものの、使い方や環境構築に不安、疑問をお持ちの方も多いのではないでしょうか。この連載では、Amazon Redshiftと... 続きを読む
数百億件のデータを30秒で解析――クラウド型DWH「Treasure Data」に新サービス - ITmedia エンタープライズ
Hadoopベースのクラウド型DWHサービス「Treasure Data Service」に、数百億件のデータを30秒程度で分析できるというオプションサービスが追加された。 クラウド型のデータウェアハウス(DWH)サービス「Treasure Data Service」を手掛けるトレジャーデータは12月9日、クエリの実行速度を従来比で10~50倍に高速化するというオプションサービス「Treasure... 続きを読む
「Amazon Redshift」を使ってみた ~使いどころと、つまずきがちなポイント (1/2):CodeZine
2013年6月から東京リージョンでも利用可能になったAmazon Redshift。本記事では、サービス開始当初からいち早く触れてきた筆者が、使ってみた印象、そしてその際につまずいた点などを紹介します。 はじめに Amazon Redshiftは、Amazon Web Services(AWS)が提供するデータウェアハウス(DWH)サービスで、2013年2月に正式リリースされ、同6月4日には東京リ... 続きを読む
第1回 Amazon Redshiftとは[前編]:Amazon Redshiftではじめるビッグデータ処理入門|gihyo.jp … 技術評論社
Amazon Redshiftではじめるビッグデータ処理入門 第1回 Amazon Redshiftとは[前編] 2013年4月15日 藤川幸一 RedShift, データウェアハウス, AWS, PostrgeSQL この記事を読むのに必要な時間:およそ 2 分 Amazon Web Services(AWS)は次々と新しいサービスを世の中に出して,クラウド・コンピューティングの可能性を広げてい... 続きを読む
SaaSでデータウェアハウスを価格破壊, Treasure Dataが分散データベース"Plazma"をローンチ - TechCrunch
SaaSでデータウェアハウスを価格破壊, Treasure Dataが分散データベース"Plazma"をローンチ [筆者: Michael Seo] データウェアハウスをクラウドから提供するTreasure Dataがそのサービスをローンチしてからまだ半年しか経っていないが、すでに順調な成長カーブに乗っているようだ。昨年黒字に転じたTreasure Dataは、今年は月商が前年比で500%伸びた。... 続きを読む
SaaSでデータウェアハウスを価格破壊, Treasure Dataが分散データベース“Plazma”をローンチ | TechCrunch Japan
SaaSでデータウェアハウスを価格破壊, Treasure Dataが分散データベース“Plazma”をローンチ [筆者: Michael Seo] データウェアハウスをクラウドから提供するTreasure Dataがそのサービスをローンチしてからまだ半年しか経っていないが、すでに順調な成長カーブに乗っているようだ。 昨年黒字に転じたTreasure Dataは、今年は月商が前年比で500%伸びた... 続きを読む
[速報]Amazonクラウド、新サービス「RedShift」発表。データウェアハウスの価格破壊へ - Publickey
Amazonクラウドを運営する米Amazon Web Services(AWS)は初めての大型カンファレンス「re:Invent」をラスベガスで開催。初日の基調講演で、クラウド上でデータウェアハウスを提供する新サービス「Redshift」を発表しました。 基調講演では企業向けにクラウドの有効性を説くことに焦点が当てられ、そのハイライトがこのRedshiftの発表でした。Redshiftの発表はAW... 続きを読む
グーグルによるMapReduceサービス「BigQuery」が登場。SQLライクな命令で大規模データ操作 - Publickey
「数兆件のデータも対話的に、高速に分析できる」。グーグルは5月19日にこのような表現で新しいサービス「BigQuery」の登場を紹介するエントリを、ブログにポストしています。 グーグルが公開したBigQueryは、Hadoopやデータウェアハウスなどを用いて多くの企業が行おうとしている大規模データ(いわゆる「Big Data」)の分析を、グーグルのクラウドを用いて行うことを可能にするAPIです。利... 続きを読む