API gateway + lambda + S3でDDoS攻撃を受けて1日あたりで$3000溶かした話 - Qiita

2020/07/15 279 users Lambda Qiita DDoS攻撃 木曜 ばいせん

qiita夏祭りに乗り遅れてしまったので一人後夜祭 ~2019年某日~ パイセン「それじゃあ、ワイ君は明日からフロントのログデータを飛ばすのにAPI gatewayとlambdaでS3に保存するようにしてな。木曜までな。その間に自分はサービンのドメイン取ったりRoute53周りの構築するから」 ワイ「これもcloud formationに書くんです？... 続きを読む

男女比，平均年齢，掛け持ち――ログデータから明かされるゲームアプリの姿。JOGA「オンラインゲーム・マーケティングセミナー」をレポート - 4Gamer.net

2018/07/02 102 users JOGA マーケティングセミナー 箭本進一 ゲームアプリ

男女比，平均年齢，掛け持ち――ログデータから明かされるゲームアプリの姿。JOGA「オンラインゲーム・マーケティングセミナー」をレポート ライター：箭本進一 一般社団法人 日本オンラインゲーム協会（JOGA）は2018年6月26日，東京都内にて「オンラインゲーム・マーケティングセミナー」を開催した。ゲームビジネスに特... 続きを読む

Pascal〜Puree + ngx_lua + Fluentd + BigQueryでつくるメルカリのログ分析基盤〜 - Mercari Engineering Blog

2015/09/09 146 users fluentd BigQuery cubicdaiya 初期

2015-09-09 Pascal〜Puree + ngx_lua + Fluentd + BigQueryでつくるメルカリのログ分析基盤〜 エンジニアではなくプログラマと呼ばれたい@cubicdaiyaです。今回はメルカリのログ分析基盤のお話です。 メルカリにおけるログデータ分析 メルカリでは初期の頃からログデータの分析をサービスの成長にとって重要なタスクとして位置づけ、そのための基盤作りに取り... 続きを読む

BigQueryにTwitterのタイムラインを入れる [Ruby] - 9mのブログ

2014/07/03 188 users Twitter groonga MongoDB MySQL

Twitterのタイムラインを保存しておくとなにかと便利なので、色々と保存形式を変えながら4年くらい記録し続けている。かつてはテキストで、MongoDBやMySQLとかGroongaとかいろいろやってきた。どれも問題ないんだけど、増え続けるログデータを保存する場所として考えるとBigQueryが現代にマッチしてるようなのでそちらに移行した。 BigQueryにTLを保存するとできること TLの全て... 続きを読む

PHPアプリのイベントをKibana3+Elasticsearch+Fluentdで解析するための勘所 | nanapi TechBlog

2014/01/15 7777 users nanapi TechBlog PHPアプリ akiyan

サーバーサイドアプリのイベントを Kibana3 で解析したい エンジニアのakiyanです。 ログ解析、してますか？ 大量のログを超かっこよく可視化してくれる Kibana3 を最近知ったんですけど、すごいですよね。もう、エンジニアお手製のチマチマとした集計画面を作る気がしません。 参考：ElasticSearch+Kibanaでログデータの検索と視覚化を実現するテクニックと運用ノウハウ (sl... 続きを読む

Fluentdが流行る理由がいま分かる、10の実践逆引きユースケース集 - Y-Ken Studio

2013/12/04 471 users fluentd Y-Ken Studio トレンド ビジネス

2013-12-04 Fluentdが流行る理由がいま分かる、10の実践逆引きユースケース集 fluentd ElasticSearch MySQL ログデータを活用してビジネスに役立てようという最近のトレンドは理解できる。 しかし、なぜログ収集ソフトウェアのFluentdがこれほどまで話題になるのか、不思議に感じている方もいるのではないだろうか。単にログデータを収集するならばsyslog-ngや... 続きを読む

ElasticSearch+Kibanaでログデータの検索と視覚化を実現するテクニックと運用ノウハウ

2013/11/12 219 users Nov 自己紹 テクニック 運用ノウハウ 視覚化

Elasticsearch kibnana fluentd management tips Presentation Transcript 12th Nov, 2013 ElasticSearch+Kibanaでログデータの検索と 視覚化を実現するテクニックと運用ノウハウ Kentaro Yoshida in ElasticSearch Study #2 page 1 1. はじめに 2. 自己紹... 続きを読む

北海道と長野県にはゴキブリが少ないという検索的推察　―地域検索の世界― - Yahoo!検索 スタッフブログ

2009/07/23 747 users 推察 ゴキブリ Yahoo イケミー 北海道

いつものように検索のログデータを眺めていたら、 突然あることに気がつきました。 「もしかして、北海道と長野県にはゴキブリが（ほとんど）いない!?」 ＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊ こんにちは、検索ランキングのイケミーです。 毎回少し変わった視点の検索分析コラムをお届けするこのはみだしコーナー、 今回のテーマは「地域検索」です。 インターネットを利用する際、各端末にはそれぞれ固有の住所のようなも... 続きを読む