タグ データ分析環境
人気順 10 users 50 users 100 users 500 users 1000 usersマクドナルド、数千店舗にGoogle Cloudを導入 オペレーションを大幅改善へ
米McDonald’sが「Google Distributed Cloud」を活用し、世界中にある店舗でデータ分析基盤を整備。クルーの業務負担軽減やサービスの質向上などの実現に向けて活用する。 米McDonald'sは「Google Cloud」を活用し、数千の店舗にクラウドベースのデータ分析環境を導入してAIソリューションを開発すると発表した(注1)。 ... 続きを読む
BigQuery や Google Workspace のログを使って分析環境を管理する|Mercari Analytics Blog
BI Product チームの野本です。 メルカリでは Google BigQuery 監査ログと Google Workspace ログイベントを BigQuery にエクスポートして、データ分析環境の管理に活用しています。アクセス履歴を詳細に調べられる BigQuery 監査ログは、分析環境のコスト最適化やテーブルの変更時の影響範囲調査などの管理業務にとても... 続きを読む
AWSがモダンなデータ分析環境に本腰 主要サービスをサーバレス提供
「ハイパースケーラー」として世界的にも高いシェアを誇るAWSが、モダンデータ分析環境の提供に本気を出す。主要なサービスをサーバレスで提供し、スケーラブルなデータ分析環境をオンデマンドで利用できるようになる見込みだ。 Amazon Web Serviceは2022年7月12日(現地時間)、3つの新しいデータ分析関連サービスを発... 続きを読む
Apache Hudi を用いてレコード単位で削除可能なデータレイクを構築した話
こんにちは。データ統括本部でYahoo!広告のデータエンジニアをしている江島です。 本記事では、Yahoo!広告のデータ分析環境であるデータレイク上のデータを、Apache Hudi を用いてレコード単位で削除可能にした事例を紹介します。 Yahoo!広告のデータ分析環境 Yahoo!広告における データマーケティングソリューション で... 続きを読む
Dockerでデータ分析環境を手軽に作る方法 - 天色グラフィティ
何かデータ分析を行わなければいけないとき、手軽に分析環境を用意したいというニーズがあります。 Jupyter Notebook上でnumpy、pandas、matplotlib、scikit-learnあたりが使えれば十分でしょうか。XGBoostやLightGBMといったライブラリも使えるようにしておきたいという人もいるかと思います。 一方、ローカルにいろい... 続きを読む
AIを使ったデータ分析環境を柔軟に構築--富士通がマーケティング向けツールを強化 - CNET Japan
富士通は5月8日、マーケティング領域でのAI活用を加速する「ビッグデータ分析基盤マーケティングAIコンテナ」の機能を強化したと発表した。 ビッグデータ分析基盤マーケティングAIコンテナは、同社の「FUJITSU Digital Business Platform MetaArc」で展開するデジタルマーケティング体系「FUJITSU Digital Marketing Platform CX360」... 続きを読む
データファースト開発
データファースト開発 1. データファースト開発 2015.10.14 @ Developers Summit 2015 Autumn 開発チームのためのデータ分析環境の構築と 継続的改善の仕組み Presented By: Katsunori Kanda(@potix2) CyberAgent Inc. 2. 自己紹介 神田勝規(かんだかつのり) 株式会社サイバーエージェント アドテク本部 AM... 続きを読む
ブラウザ上でデータ分析が出来る!Clojure/Gorilla入門 - あんちべ!
2014-09-07 ブラウザ上でデータ分析が出来る!Clojure/Gorilla入門 Clojure incanter テキストマイニング 機械学習 データマイニング 概要 この記事は、Gorillaという ブラウザ上でClojureという言語を利用出来るライブラリを利用し、 ブラウザ上でデータ分析環境を構築するための入門記事です。 Clojureの事前知識は一切不要で、 ClojureやGo... 続きを読む
「サーバ/インフラエンジニア養成読本 ログ収集〜可視化編」を献本いただきました - インフラエンジニアway - Powered by HEARTBEATS
こんにちは。斎藤です。 先週、「インフラエンジニア養成読本 ログ収集〜可視化編」(以下、本書)を献本いただきました。どうもありがとうございます。 せっかくですので、私自身の視点で、本書の紹介、刺さった所、及び感想を残しておこうかと思います。 サーバ/インフラエンジニア養成読本 ログ収集~可視化編 [現場主導のデータ分析環境を構築!] (Software Design plus)posted wit... 続きを読む
書きました: サーバ/インフラエンジニア養成読本 ログ収集~可視化編 - BLOG.harukasan
2014-07-18 書きました: サーバ/インフラエンジニア養成読本 ログ収集~可視化編 ということで、技術評論社から発売されるサーバ/インフラエンジニア養成読本 ログ収集~可視化編の執筆に参加させて頂きました。 来月の2014年8月8日発売になります。 サーバ/インフラエンジニア養成読本 ログ収集~可視化編 [現場主導のデータ分析環境を構築!] (Software Design plus)作者... 続きを読む
Clouderaで作るデータ分析環境 - 科学と非科学の迷宮
2014-05-07 Clouderaで作るデータ分析環境 wyukawaさんがデータ分析環境について書いていましたが、全部 CDH を使えば実現可能なので便乗して書いておこうと思います。 1. ETL 処理 CDH なら以下のツールがあります。 Sqoop RDBMS / DWH などに対するインポート・エクスポートツール。最近日本語の本も出版されたので皆さん買ってください。 Hue を使えば ... 続きを読む