マルチAWSアカウント環境のセキュリティって無理ゲーじゃね？

2024/07/24 272 users 無理ゲー セキュリティ SRE CCoE AWS

対象読者 様々なプロダクトへ AWS アカウントや環境を提供する SRE / CCoE チームを想定しています。 マルチAWSアカウント環境 SRE / CCoE は各プロダクトが安全かつ便利に AWS を利用できるよう、AWS アカウントの設定・払い出しや周辺コンポーネントの提供（踏み台・ID管理・ログ収集 etc...）を行います。 個別プロダ... 続きを読む

僕たちはどうマイクロサービスのログを収集するのか - Mercari Engineering Blog

2018/12/14 104 users 僕たち Mercari Engineering Blog

Mercari Advent Calendar 2018 の14日目はメルペイ DataPlatform チームの @syu_cream がお送りします。 本記事では表題の通り、メルカリとメルペイにおける、マイクロサービスのログ収集に関する課題と取り組みについて記載します。 メルカリとメルペイでは、現在クライアントアプリやサーバサイドのログを効率的に収集... 続きを読む

オフィス・AWS環境をセキュリティ監視するためのログ収集 - クックパッド開発者ブログ

2018/05/30 214 users セキュリティ クックパッド開発者ブログ クックパッド 水谷

2018 - 05 - 31 オフィス・AWS環境をセキュリティ監視するためのログ収集 セキュリティ インフラストラクチャー部セキュリティグループの水谷 ( @m_mizutani ) です。 現在、クックパッドのセキュリティグループではセキュリティ監視を高度化に対して取り組んでいます。サービスに関連する部分の監視は以前から やってきた のですが、ここしばらくはそれ以外のインフラやオフィスで発生す... 続きを読む

S3に保存したログファイルをストリーム処理するサーバーレスアプリケーションの紹介 - クックパッド開発者ブログ

2018/05/02 134 users ログファイル サーバーレスアプリケーション クックパッド

2018 - 05 - 02 S3に保存したログファイルをストリーム処理するサーバーレスアプリケーションの紹介 S3に保存したログファイルをストリーム処理するサーバーレスアプリケーションの紹介 インフラストラクチャー部セキュリティグループの水谷( @m_mizutani )です。 クックパッドでは現在セキュリティ監視の高度化に取り組んでおり、その一環としてセキュリティ関連のログ収集およびその分析に... 続きを読む

DMMゲームのログ解析~ログ収集と解析の概要~ - dmmlabotech

2015/08/21 243 users KPI ロク DMMオンラインゲーム バックエンド 解析

2015-08-20 DMMゲームのログ解析~ログ収集と解析の概要~ 現在オンラインゲームのバックエンド、KPIシステムを担当していますマサヨシです。 今回のブログでは【DMMオンラインゲームで実際に実装しているログとKPI】に関して3回にわたってご紹介致します。 DMMオンラインゲームでは、これまではオンラインゲームのプロジェクトごとに行っていたログの収集方法を統一し、プロジェクトに依存しない基... 続きを読む

15分で作る、Logstash＋Elasticsearchによるログ収集・解析環境 - さくらのナレッジ

2014/11/25 189 users ナレッジ さくら 解析環境 15分

たとえば、inputに「stdin」、outputに「file」というプラグインを使用すれば、標準入力からイベントを受け取り、それをファイルに出力することが可能となる。そしてLogstashが注目されている理由の1つのが、出力先として「Elasticsearch」が利用できる点だ。 検索機能に優れた分散型データベース「Elasticsearch」 Elasticsearchはオープンソースで開発さ... 続きを読む

Fluentdのお勧めシステム構成パターンについて発表しました - Y-Ken Studio

2014/09/12 165 users fluentd Y-Ken Studio サーバ ノウハウ

2014-09-12 Fluentdのお勧めシステム構成パターンについて発表しました fluentd 2014年9月9日開催の『サーバ/インフラエンジニア養成読本 ログ収集〜可視化編』　出版記念！執筆者が語る大講演会！にてトークしてきました。 今回は「Fluentdのお勧めシステム構成パターン」というタイトルで、ユースケース毎にどのようなシステム構成をすると運用しやすいかのノウハウをお話しさせてい... 続きを読む

サービス改善はログデータ分析から

2014/09/09 257 users DMP Presentation Transcript

サービス改善はログデータ分析から Presentation Transcript サービス改善は ログデータ解析から 鈴木健太 @suzu_v 『サーバ/インフラエンジニア養成読本 ログ収集～可視化編』出版イベント 2014/09/09 @ GMO Yours 自己紹介 • 鈴木健太, すずけん, @suzu_v • VOYAGE GROUPの子会社adingoにて、広告データの分析基 盤(DMP... 続きを読む

Fluentdとログ収集のパターン - Go ahead!

2014/07/31 464 users fluentd ToDo ログコレクタ Go ahead ロク

「ログを集めて保存する」と言うのは簡単だけど，ログ収集の構成にはいくつか方法があり，勉強会などでちょくちょく聞かれるので，いくつかのパターンについて書く(TODO: 簡単なイメージ図を貼る)． 「俺はもうバリバリログ収集やってるぜ！」という人は多分すでに知っていることが書かれているので，タブを閉じて良い． ここではログコレクタにFluentdを想定しているが，他のログ収集プロダクトにも適用出来るは... 続きを読む

ログ収集や可視化で話題のFluentd、Elasticsearch、Kibanaを徹底解説したムック本が発売となります - Y-Ken Studio

2014/07/28 225 users fluentd elasticsearch Kibana

2014-07-28 ログ収集や可視化で話題のFluentd、Elasticsearch、Kibanaを徹底解説したムック本が発売となります fluentd elasticsearch 2014年8月8日、ログ収集や可視化を始めたいエンジニア必携の書籍が技術評論社より刊行されます。 本邦初公開となる、全編書き下ろしの特集で構成された本書を読むことで、ログ解析の有用性からログ収集、保存、可視化手法を... 続きを読む

柔軟なログ収集を可能にする「fluentd」入門 - さくらのナレッジ

2013/12/09 628 users fluentd ナレッジ アーキテクチャ サーバー 入門

複数台のサーバーやクラウド環境を組み合わせてのサービス運用においては、ログの収集方法に工夫が必要となる。こういった場合に有用なのが、さまざまなログの収集手段を提供するfluentdだ。今回はfluentdのアーキテクチャやそのインストール/設定方法、基礎的な設定例などを紹介する。 さまざまな方法でログを収集できるfluentd 今回紹介するfluentdは、Treasure Dataが開発するログ... 続きを読む

DeployGate - 開発中のアプリの配布を、びっくりするぐらい簡単に

2012/09/10 491 users DeployGate ワイヤレス USBケーブル 端末 ロク

DeployGate は、開発途中のスマートフォンアプリの実機確認をワイヤレスで実現する、アプリ開発関係者向けサービスです。開発中のアプリの配布を びっくりするぐらい、簡単に。 USBケーブルにさようなら。配布、ログ収集、アップデート、 すべてをワイヤレス、リアルタイムで。 無料で新規登録！ ワイヤレスで、USB不要 アプリの配信、ログの収集、アプリの更新、すべてがワイヤレスに。たくさんの端末を手... 続きを読む