年末だしRedashのクエリ棚卸しでもしましょう (調査用サンプルクエリ付き) - エムスリーテックブログ

2023/12/09 44 users redash 煤払い エムスリーテックブログ 宮中 木田

これはエムスリー Advent Calendar 2023の9日目の記事です。 前日の記事はSREチーム後藤の「共有会をより効果的にするために考えたあれやこれ」でした。 エムスリーエンジニアリンググループ データ基盤チームの木田です。 師走です。12月といえば年末に向けて大掃除の季節です。 古来日本では12月に宮中で「煤払い」と... 続きを読む

trocco・BigQuery・Tableauを採用。アソビューがデータ分析基盤の再構築に挑んだ理由 - what we use（技術スタックデータベース）

2023/11/01 19 users アソビュー 反面 技術スタックデータベース 近年 選択肢

はじめまして、アソビューでデータ基盤チームに所属している霧生です。 近年、モダンデータスタックの登場などによりデータ分析基盤は一層盛り上がりを見せています。選択肢も増えてできることが多くなった反面、どう構築していくか迷う場面も多いのではないでしょうか。今回はアソビューのデータ分析基盤の構成と現状の... 続きを読む

エムスリー、データ基盤チームはじめました - エムスリーテックブログ

2023/07/04 9 users エムスリー 肩書 鳥山 to_lz エムスリーテックブログ

エンジニアリンググループ、データ基盤チームの鳥山(@to_lz1)です。 私は過去何度かデータ基盤に関連する記事を出していますが、データ基盤チームという肩書を付けるのは今回が初めてとなります。それもそのはず、エムスリーでは2023年4月に新たにデータ基盤チームを新設したからです*1。 エンジニアリンググループ紹介... 続きを読む

H&Mコンペで銀メダルを獲得したソリューション - ANDPAD Tech Blog

2022/05/19 18 users ソリューション 銀メダル ANDPAD Tech Blog

アンドパッドのデータ基盤チームに所属している成松です。 先日までkaggleで開催されていたH&M Personalized Fashion Recommendationsにて、私が参加したチームが2,952チーム中22位で銀メダルを獲得しました！ そこで、本記事ではH&Mコンペの簡単な概要説明と私個人のSolution（Private 36位相当）について紹介します。 ... 続きを読む

エンジニアの活動情報からFour Keysを集計、可視化した話 - ペパボテックブログ

2022/01/06 18 users Four Keys ペパボテックブログ 集計 エンジニア 後半

データ基盤チームの @udzura です。今回は、昨年の後半にかけてデータ基盤チームで取り組んできた、開発者の生産指標である Four Keys の可視化についてお話をします。 Four Keysとは何か 生産性ダッシュボードプロジェクトの全体図 開発活動のExtractとLoadパイプライン 取得したデータのTransform ビュー部分 まとめと... 続きを読む

OSS「Coppe」の公開 〜 BigQuery基盤のデータ監視ツールによるデータ品質担保 - ZOZO TECH BLOG

2022/01/05 12 users BigQuery 纐纈 OSS OSSツール 課題

はじめに こんにちは、データシステム部データ基盤ブロックの纐纈です。9月から22卒内定者として、チームにジョインしました。 本記事では、弊社のデータ基盤チームが抱えていた課題と、その解決のために公開したOSSツール「Coppe」を紹介します。Coppeは、以下のような方にお勧めできるツールです。 BigQueryを使用した... 続きを読む

DataWareHouse,DataMartを整備して分析がやりやすくなった話 - ANDPAD Tech Blog

2021/10/15 10 users ANDPAD ANDPAD Tech Blog 分析 全体像

こんにちは、データ基盤チームの大洞です。 2021年4月にANDPADにジョインしてから、データ基盤やデータ分析にかかわってきました。 今回は、データ分析を効率的にするために、DataWareHouse、DataMartを整備した話を紹介したいと思います。 データ基盤の全体像 まずは、簡単にデータ基盤の全体像を紹介します。 左から順... 続きを読む

GMOペパボのインフラ担当が感じた”Kubernetes”化の不安　”GitOps”でアプリケーション稼働は快適になる - ログミーTech

2021/05/31 15 users Kubernetes GitOps SRE GMOペパボ 主催

GMOペパボが主催の「Pepabo Tech Conference #14」では、GMOペパボのプラットフォームテクノロジーをテーマに、技術基盤チーム・データ基盤チーム・プラットフォームグループ（SRE）・セキュリティ対策室のメンバーが登壇し、各チームの取り組みについて発表しました。菅原氏は、「カラーミーショップ」へのKubernetes導... 続きを読む

データ基盤チームの振り返り〜ペパボテックカンファレンス#14 - ペパボテックブログ

2021/04/14 7 users ペパボテックブログ

技術部 データ基盤チームに所属している@tosh2230です。2/25にペパボテックカンファレンス#14が開催されましたが、実は私も登壇しておりました。発表内容をご紹介するとともに、この場を借りて振り返りをしていきたいと思います。 発表内容 「データ駆動の実現を担う事業部横断組織」というビジョンのもと、2021年1月に... 続きを読む