タグ ログデータ
人気順 5 users 50 users 100 users 500 users 1000 usersMicrosoftがセキュリティログを紛失 複数の製品に影響
コンピュータ情報サイト「Bleeping Computer」は2024年10月17日(現地時間、以下同)、Microsoftが同年9月2~19日にわたりセキュリティログを紛失していたことを企業顧客に警告したと報じた。 この問題はバグが原因とされており、不正なアクティビティーの検出に重要なログデータが一部欠落する事態に陥っていることが分... 続きを読む
【Google Cloud】プロジェクト横断のロギング基盤を構築(データ収集から可視化まで) - Insight Edge Tech Blog
目次 1. はじめに 2. ログデータの収集 GCP インフラ構成の説明 各サービスの設定 ディレクトリ構成 共通リソースの作成 個別プロジェクトリソースの作成 3. ログデータの可視化 4. まとめ 1. はじめに こんにちは。Insight Edge で Developer をしている熊田です。 普段システム開発を進める上で、システムの利用者数や... 続きを読む
TiDBによる大規模ログデータ管理の挑戦!シャーディングなしで大量インサートをさばくには? - LINE株式会社 - TiDB User Day 2023
TiDBによる大規模ログデータ管理の挑戦!シャーディングなしで大量インサートをさばくには? - LINE株式会社 - TiDB User Day 2023 イベント開催日:2023年7月7日 講演者:LINE株式会社 ITSC データベース室 MySQL 1チーム ソフトウェアエンジニア 大塚 知亮 氏 本スライドでは、TiDBで大量のログデータを管理するRDB... 続きを読む
[アップデート]Amazon CloudWatch Logsでログデータに含まれた機密情報を保護出来るようになりました #reinvent | DevelopersIO
こんにちは、AWS事業本部@福岡オフィスのべこみん(@beco_minn)です。 遂にAWS re:Invent 2022が始まりましたね。それに合わせてたくさんのアップデートが出てきました。 本記事ではそのうちの一つ、「Amazon CloudWatch Logsでの転送中の機密データ保護」についてまとめます。 ざっくりまとめ Amazon CloudWatch Logsで... 続きを読む
Amazon Elasticsearch ServiceによるECSアプリケーションのログ解析基盤の構築 - BASEプロダクトチームブログ
こんにちは、BASE BANK 株式会社 Dev Division でエンジニアとしてインターンをしている前川です。 今回、Amazon Elasticsearch Service(以下、Amazon ES)による、ECS/Fargate で稼働するアプリケーションのログデータの解析基盤を新規で構築することになったので、構築するにあたって調査した内容や関連する内容、実際... 続きを読む
API gateway + lambda + S3でDDoS攻撃を受けて1日あたりで$3000溶かした話 - Qiita
qiita夏祭りに乗り遅れてしまったので一人後夜祭 ~2019年某日~ パイセン「それじゃあ、ワイ君は明日からフロントのログデータを飛ばすのにAPI gatewayとlambdaでS3に保存するようにしてな。木曜までな。その間に自分はサービンのドメイン取ったりRoute53周りの構築するから」 ワイ「これもcloud formationに書くんです?... 続きを読む
【コラム】データドリブンなマーケティングオートメーションに関する特許 – コラムバックナンバー | アナリティクス アソシエーション
【コラム】データドリブンなマーケティングオートメーションに関する特許 Option合同会社 柳井 隆道 発信元:メールマガジン2019年9月18日号より 先日以下の情報処理装置に対する特許が取得されました。 一のユーザによるアプリケーションプログラムの利用履歴を示すログデータを取得するログデータ取得部と、 機械学習... 続きを読む
CloudWatch Logs Insightsで始める簡単!!ログ集計 - GA technologies Tech Blog
GA technologies SREチームの永冶です。 社内でログを集計した際にCloudWatch Logs Insightsが便利だと感じたので早速ブログにしました。 これからCloudWatch Logs Insightsを使用する方の助けになればと思います。 CloudWatch Logs Insightsとは CloudWatch Logsのログデータを分析する機能です。 専用のクエリ言語が用... 続きを読む
Amazon Elasticsearch Service でペタバイト規模のクラスタを実行する | Amazon Web Services ブログ
Amazon Web Services ブログ Amazon Elasticsearch Service でペタバイト規模のクラスタを実行する ログデータに Amazon Elasticsearch Service (Amazon ES) を使用するのは、あたかも強力な消火ホースから水を飲むようなもので、システムそのものの潜在力は絶大です。Elasticsearch と Kibana の知識が深まるにつれ、よ... 続きを読む
ソーシャルゲームの価値を上げるログデータのつくりかた – てっくぼっと!
はじめに 現在データ分析基盤の再構築を担当している、サーバーサイドエンジニアの小川です。これまで私は4つのソーシャルゲームの新規開発・運用を経験してきました。そこでの知見と考察をまとめます。 ログデータは、調査などに必要なただの履歴という立場に置かれがちです。ですが、作業工数を大幅カットしたり、定量... 続きを読む
ソーシャルゲームの価値を上げるログデータのつくりかた – てっくぼっと!
はじめに 現在データ分析基盤の再構築を担当している、サーバーサイドエンジニアの小川です。これまで私は4つのソーシャルゲームの新規開発・運用を経験してきました。そこでの知見と考察をまとめます。 ログデータは、調査などに必要なただの履歴という立場に置かれがちです。ですが、作業工数を大幅カットしたり、定量... 続きを読む
男女比,平均年齢,掛け持ち――ログデータから明かされるゲームアプリの姿。JOGA「オンラインゲーム・マーケティングセミナー」をレポート - 4Gamer.net
男女比,平均年齢,掛け持ち――ログデータから明かされるゲームアプリの姿。JOGA「オンラインゲーム・マーケティングセミナー」をレポート ライター:箭本進一 一般社団法人 日本オンラインゲーム協会(JOGA)は2018年6月26日,東京都内にて「オンラインゲーム・マーケティングセミナー」を開催した。ゲームビジネスに特... 続きを読む
ホテルのカードキーを1分で偽造する方法を、15年かけて見つけた研究者の執念|WIRED.jp
SHARE STORY 2018.05.09 WED 19:00 ホテルのカードキーを1分で偽造する方法を、15年かけて見つけた研究者の執念 ホテルのドアがこじ開けられた形跡も、カードキーのログデータに記録もないのに、誰かが侵入してノートパソコンを持ち去った──。そんな手品のような窃盗事件の謎を解明しようとしていたセキュリティ研究者が、ホテルのカードキーの脆弱性を15年かけて発見した。全部屋の鍵を... 続きを読む
保険金目当ての自宅放火事件で容疑者の心臓ペースメーカーのログが調査される | スラド YRO
保険金目当てでの自宅への放火が疑われた米オハイオ州の男性に対し、心臓ペースメーカーのログデータを使った検証が行われたという。その結果、「自作自演」の疑いが高いという結論になったそうだ( Engadget Japanese 、 Washington Post 、 WLWT )。 この男性は、「自宅が燃えているのに気付いて服や所持品などをスーツケースやほかのバッグに入れて窓から放り投げ、その後自身も家... 続きを読む
ASCII.jp:バショー、IoT/ログなど時系列データ用NoSQL「Riak TS」
Bashoジャパンは11月20日、同社が開発する分散型NoSQLデータベース(DB)シリーズにおいて、IoTセンサーデータやログデータなど、大量の“時系列データ(タイムスタンプのあるデータ)”を読み書きする用途に適したNoSQL DB「Riak TS」を発表した。12月より国内販売を開始する。 Bashoジャパンは、米Basho Technologies(バショーテクノロジーズ)の日本法人。Bas... 続きを読む
Pascal〜Puree + ngx_lua + Fluentd + BigQueryでつくるメルカリのログ分析基盤〜 - Mercari Engineering Blog
2015-09-09 Pascal〜Puree + ngx_lua + Fluentd + BigQueryでつくるメルカリのログ分析基盤〜 エンジニアではなくプログラマと呼ばれたい@cubicdaiyaです。今回はメルカリのログ分析基盤のお話です。 メルカリにおけるログデータ分析 メルカリでは初期の頃からログデータの分析をサービスの成長にとって重要なタスクとして位置づけ、そのための基盤作りに取り... 続きを読む
はてなブログのログデータを買い取りたい!利用規約に抵触するかな?人類補完計画を目指して(^ω^)禁煙881日目・今日のはてブ。 - 団劇スデメキルヤ伝外超
2014-09-07 はてなブログのログデータを買い取りたい!利用規約に抵触するかな?人類補完計画を目指して(^ω^)禁煙881日目・今日のはてブ。 はてな アフィリエイト 日記 スポンサーリンク 今日のひとことはてなブログの寄稿者機能って、あまり使ってる人は知らないですが、原稿料とか出して、nanapiみたなことしたいですね。だけど、みんなが城(砂)を作れるのがブログの良さです。でも、今日もブロ... 続きを読む
BigQueryにTwitterのタイムラインを入れる [Ruby] - 9mのブログ
Twitterのタイムラインを保存しておくとなにかと便利なので、色々と保存形式を変えながら4年くらい記録し続けている。かつてはテキストで、MongoDBやMySQLとかGroongaとかいろいろやってきた。どれも問題ないんだけど、増え続けるログデータを保存する場所として考えるとBigQueryが現代にマッチしてるようなのでそちらに移行した。 BigQueryにTLを保存するとできること TLの全て... 続きを読む
PHPアプリのイベントをKibana3+Elasticsearch+Fluentdで解析するための勘所 | nanapi TechBlog
サーバーサイドアプリのイベントを Kibana3 で解析したい エンジニアのakiyanです。 ログ解析、してますか? 大量のログを超かっこよく可視化してくれる Kibana3 を最近知ったんですけど、すごいですよね。もう、エンジニアお手製のチマチマとした集計画面を作る気がしません。 参考:ElasticSearch+Kibanaでログデータの検索と視覚化を実現するテクニックと運用ノウハウ (sl... 続きを読む
バイドゥ、スマホ向け日本語IME「Simeji」のログ送信認める - 理由は"バグ" | マイナビニュース
日本語入力ソフト「Simeji」を提供するバイドゥは12月26日、同社が利用者に無断でログ情報などを送信しているとされる問題に対する見解を発表した。 同社によると、報道を受けて社内調査を行った結果、Simejiアプリはログセッションのデータ送信をオフにしていた場合でも一部のログデータを送信していた事実を確認したという。 ログセッションは、変換精度の向上を目的として同社は活用しているが、今年3月にリ... 続きを読む
Fluentdが流行る理由がいま分かる、10の実践逆引きユースケース集 - Y-Ken Studio
2013-12-04 Fluentdが流行る理由がいま分かる、10の実践逆引きユースケース集 fluentd ElasticSearch MySQL ログデータを活用してビジネスに役立てようという最近のトレンドは理解できる。 しかし、なぜログ収集ソフトウェアのFluentdがこれほどまで話題になるのか、不思議に感じている方もいるのではないだろうか。単にログデータを収集するならばsyslog-ngや... 続きを読む
ElasticSearch+Kibanaでログデータの検索と視覚化を実現するテクニックと運用ノウハウ
Elasticsearch kibnana fluentd management tips Presentation Transcript 12th Nov, 2013 ElasticSearch+Kibanaでログデータの検索と 視覚化を実現するテクニックと運用ノウハウ Kentaro Yoshida in ElasticSearch Study #2 page 1 1. はじめに 2. 自己紹... 続きを読む
クラウドからログ管理を提供するLogglyが$10.5Mを調達, 第二世代製品ではデータの‘意味’の視覚化を充実 | TechCrunch Japan
【抄訳】 ログ管理をクラウドからのサービスとして行うLogglyが、新たな投資家であるCiscoとData Collectiveから1050万ドルを調達した。Trinity VenturesとTrue Ventures、およびMatrix Partnersもこのラウンドに加わり、このサンフランシスコの企業の総資金額は2090万ドルになった。 同社のSaaSはどんなデバイスからでもログデータを取り、... 続きを読む
ドスパラ、MP3プレーヤーとFMラジオ付きのGPSデータロガー--音楽を聴きながら軌跡を記録 - CNET Japan
ドスパラは8月9日、直販サイト「上海問屋」において、MP3再生機能とFMチューナを搭載したGPSロガー「DN-10051」の販売を開始した。直販サイト価格は6999円。 DN-10051は、GPS衛星からの信号を受け取り、現在位置の記録を取ることができるGPSロガー。内蔵GPSチップには高感度、低電力で定評のある「SiRF Star III GPSチップ」を搭載している。ログデータをPCで取り込む... 続きを読む
ssig33.com - text/歴史から理解するプリズム事件
なぜ FBI なのか? プリズム事件は簡単に言うとアメリカ連邦捜査局(FBI)がアメリカ国家安全保障局(NSA)と協力し、複数の IT 企業の保有するログデータを収集していたという事件です。この事件の構造を理解するためには、アメリカの治安機関、情報機関の概要とその歴史を理解する必要がありますのでそれを簡単に解説します。 まず今回の事件の重要なポイントはアメリカ中央情報局(CIA)と NSA が仕組... 続きを読む