巨大モノレポのKubernetes移行プロジェクト：食べログの実践的アプローチ - Tabelog Tech Blog

2024/11/26 16 users アプローチ ロク Tabelog Tech Blog 目次

目次 目次 1章 はじめに 2章 食べログのKubernetes移行について Kubernetes移行の背景 デプロイ/ロールバックの時間短縮 インフラ作業を素早く実施できるように 変更容易性を高める これまでの歩み CI/CD モニタリング ロギング 3章 巨大モノレポのKubernetes移行におけるチームの課題 現状 課題 城をイメージせずに城の... 続きを読む

EKSでKubernetes DaemonSetを用いたロギング：Fluent-bitの運用とトラブル事例 - MonotaRO Tech Blog

2024/09/25 13 users EKS 運用 MonotaRO Tech Blog

モノタロウのプラットフォームエンジニアリング部門 コンテナ基盤グループの宋 明起です。 私たちは、アプリケーション開発者からコンテナシステムの認知負荷を取り除き、アプリ開発に専念できるコンテナ基盤の構築と基盤を改善し、開発者はより楽に、より安全にアプリケーションのデプロイと運用できるように支援してい... 続きを読む

AWSサーバーレス環境でのロギング - Qiita

2023/03/10 126 users Lambda Qiita AWS サーバレス環境 運用

はじめに 最近、プロジェクトで運用回りの設計を行う機会があったので、その際に学習したことをまとめました。AWSのLambdaなどを使っている方でロギングに興味があるけど、まだ良く理解できていないという方のためになれば幸いです。ここではサーバレス環境でのロギングの基本について解説しています。 ログ戦略 マイク... 続きを読む

【図解】Log4jの脆弱性 CVE-2021-44228 (Log4shell or LogJam) について

2021/12/12 158 users 図解 Log4j LDAP インタフェース ＤＮＳ

JNDI とはJava Naming and Directory Interface という、Java アプリケーションが DNS や LDAP 等のサービスを利用するための汎用的なインタフェース (ライブラリ) です。 Log4j と JNDI lookupApache Software Foundation が開発した、Java ベースのロギングに関するライブラリです。JNDI lookup という機能があり、書... 続きを読む

Firebase Functionsのロギングを改善した話 - Studyplus Engineering Blog

2021/06/25 8 users Studyplus Engineering Blog

はじめまして、モバイルクライアントグループの市川です。昨年9月からポルトの開発にジョインしました！ porto-book.jp ポルトはFlutterとFirebaseで開発しているサービスです。 サーバサイドの処理は全てFirebase Functionsで実装されており、エンドポイントの数は40近くあります。 その中には、課金に関するクリティカ... 続きを読む

Pythonのログ出力にlogzeroを使う - kumilog.net

2018/12/10 56 users kumilog.net ログローテーション Python

Python その2 Advent Calendar 2018 10日目の記事です。 はじめに インストール 使い方 基本 ログレベルの設定 ファイルに出力 ログローテーション フォーマット変更 まとめて設定 おわりに はじめに Pythonでログ出力する際に何を使っていますか、printでしょうか。それともloggingでしょうか。ロギングは奥が深いよう... 続きを読む

あなたの知らない
データベースのロギングの世界 / logging queries - Speaker Deck

2018/09/11 115 users Speaker Deck データベース 世界 あなた

All slide content and descriptions are owned by their creators. 続きを読む

【レポート】コンテナを丸裸にする方法（モニタリング、ロギング、デバッグ）と関連ツールの紹介 #reinvent ｜ Developers.IO

2017/12/04 24 users reinvent デバッグ 丸裸 AWS モニタリング

【レポート】コンテナを丸裸にする方法（モニタリング、ロギング、デバッグ）と関連ツールの紹介 #reinvent AWS re:Invent 2017 Docker ECS レポート 今回のre:Invent2017でも、コンテナ関連について、かなり重要な新サービスやアップデートが多数発表されましたね。 【速報】AWSのマネージドKubernetesサービス、Elastic Container Se... 続きを読む

モバイルアプリで困らないエラーハンドリングとロギングのベストプラクティス // Speaker Deck

2017/09/16 27 users エラーハンドリング ベストプラクティス モバイルアプリ

Speaker Details https://yoichitgy.github.io https://github.com/yoichitgy View Speaker Details 続きを読む

CloudWatch LogsのS3エクスポート ｜ Developers.IO

2017/04/30 18 users CloudWatch Logs Lambda Clou 要件

渡辺です。 個人的に好きなAWSのサービスのひとつがCloudWatch Logsです。 各サーバに保存されるログを保存するだけでなく、簡易検索や保存期間の指定ができるため、ロギングに関する最低限の要件を満たすことができます。 利用方法もEC2インスタンスであればエージェントをインストールするだけという手軽さもポイントですね。 Lambdaを組み合わせれば簡単なログ監視もできます。 本日はClou... 続きを読む

Amazon S3上のファイルをX-Sendfileで配信する - NaCl非公式ブログ

2017/01/06 46 users NaCl エンドユーザ nginx ファイル ドキュメント

NaCl の田中です。 Amazon S3に格納したファイルを、X-Sendfileを使って配信する仕組みを構築しました。この記事ではその実現方法を紹介します。 X-Sendfileとは？ X-Sendfileとは、 NGINXのドキュメント によると「認証、ロギングなどをバックエンドで処理した後、内部リダイレクトされた場所からエンドユーザにコンテンツを配信するようにWebサーバが処理することで、... 続きを読む

Swiftプロジェクトのビルド時間を計測・改善するxcprofilerを作った話 - クックパッド開発者ブログ

2016/12/28 101 users iOS giginet 計測 指標 一環

2016 - 12 - 28 Swiftプロジェクトのビルド時間を計測・改善するxcprofilerを作った話 技術部モバイル基盤グループの@ giginet です。 我々のチームでは、iOS/Androidアプリの認証、決済、ロギングと言った基幹部分の開発のほか、各事業部のモバイルエンジニアの開発効率を上げるための業務改善を日々行っています。 その一環として、さまざまなモバイル開発上の指標を収集... 続きを読む

複雑さに潜り込む - 大規模PHPアプリケーションにおける例外・モニタリング・ロギング - すずけんメモ

2016/12/15 151 users techlog PHP VOYAGE GROUP 複雑さ 以下

2016 - 12 - 15 複雑さに潜り込む - 大規模PHPアプリケーションにおける例外・モニタリング・ロギング php みなさん、 PHP 書いてますか？ここ2ヶ月くらい PHP も書いていたのでその話を書きます。 この記事は VOYAGE GROUP techlog / Advent Calendar 2016 の記事です。 例えば以下のような話に身に覚えはありませんでしょうか。 例外がど... 続きを読む

【新機能】CloudTrailでS3オブジェクトレベルのアクセスをロギングする ｜ Developers.IO

2016/11/30 14 users CloudTrail Put Delete オブジェクト 虎塚

こんにちは、虎塚です。 先日のAWSアップデートによって、CloudTrailで S3オブジェクトレベルのロギング ができるようになりましたので、ご紹介します。 これまでもS3バケットレベルでの操作はCloudTrailで記録できましたが、オブジェクトへのアクセスのロギングはサポートされていませんでした。 今回のアップデートで、S3オブジェクトのPutやDeleteといった操作がCloudTail... 続きを読む

Javaのロギングライブラリの歴史と現状をふんわり把握する（初学者向け） - Qiita

2016/06/10 92 users Qiita ロギングライブラリ Java API 武器

かつて、 Log4j というロギングライブラリがありました。 最強でした。1999年のお話です。 ロギングの大切さと Log4j の素晴らしさが見直され、Java標準に java.util.logging というAPIが追加されました。2002年のお話です。 java.util.logging は Log4j を参考に作られましたが、ところどころ使いづらかったため、「標準」という武器をもってしても... 続きを読む

ロギングにおける十戒 | Yakst

2016/03/17 446 users Yakst

どのように何をロギングするかを知ることは、ソフトウェアエンジニアが解決すべき最高に難しいことの一つだ。アプリケーションのログを拡張する手助けとなるのがこの「十戒」だ。 新年の私のブログにようこそ。監視とログのモニタリングについてのParisのdevopsメーリングリストでのスレッドに返信を書いた後、長らく心... 続きを読む

golangでセンサーデータをMQTTで受けてloggerする | Natural Days

2015/12/03 28 users golang MQTT Kibana Elastic IoT

Go その2 Advent Calendar 2015の記事です。 golangで複数のセンサーからのデータをMQTTで受けてfluentdを使ってロギング、elastic/kibana, splunkで可視化します。これは実際にET展のマクニカさんのMpressionによるIoTのPoC(Proof of Concept)にて展示してきた内容の詳細です。実際の展示中の内容はこちらです。会場と世界... 続きを読む

第12回　複数のプロセスにおける協調動作のための仕組み─コーディネーション：Hadoopはどのように動くのか ─並列・分散システム技術から読み解くHadoop処理系の設計と実装｜gihyo.jp … 技

2015/10/21 30 users コーディネーション Hadoop レプリケーション 並列 実装

はじめに 前回は，分散システム技術を基本とする耐障害性のための仕組みとして，レプリケーションとロギングについて述べました。今回は，分散システムにおいて複数のプロセスが協調して動作するための仕組みであるコーディネーションについて，その概要を説明します。 コーディネーションとは 並列データ処理系におけるコーディネーションは，複数のプロセス間において，協調して動作をする，または，同意を取るための技術です... 続きを読む

Fluentdのロギング - Qiita

2014/10/05 93 users Qiita fluentd logging ログレベル 英語

Fluentdの公式ドキュメントにloggingのページがあるんですが，まだ英語しかなく，運用の話を聞いてるとここに書いてあることで解決出来るケースがいくつかあったので，とりあえず日本語で記事にしておきます． プラグイン毎のログレベル 昔のFluentdはグローバルに一つしかログレベルを設定出来なかったんですが，今ならプラグイン毎に設定出来ます．プラグインが対応している必要がありますが，まぁ今時の... 続きを読む

【翻訳】デバッグを必修科目にするべき理由 | POSTD

2014/09/12 154 users POSTD IDE デバッグ コンソール 必修科目

更新版: まずはここで私がコンソール ロギングでのデバッグを非難したり、無視しようとしているのではないということをはっきりさせておきたいと思います。コンソール ロギングは組み込み型プログラムやIDEがソースコードをスタッ […]更新版: まずはここで私がコンソール ロギングでのデバッグを非難したり、無視しようとしているのではないということをはっきりさせておきたいと思います。コンソール ロギングは組... 続きを読む

Big Sky :: Windows でも色付きでログが出せる golang のライブラリ「go-colorable」書いた。

2014/07/30 42 users golang logger コマンドラインオプション ロク

golang には logger が星の数ほどあるのですが go言語におけるロギングについて — さにあらず コマンドラインオプションについて 分かり辛いので、僕の分かった事だけをメモしておきます。 ログの出力処理は glog.go#output を読めば大体分かります。 -logtostderr これを指定... http://blog.satotaichi.info/logging-frame... 続きを読む

neue cc - Http, SQL, Redisのロギングと分析・可視化について

2013/07/30 49 users http redis SQL neue cc 分析

改善は計測から。何がどれだけの回数通信されているか、どれだけ時間がかかっているのか、というのは言うまでもなく重要な情報です。障害対策でも大事ですしね。が、じゃあどうやって取るの、というとパッとでてくるでしょうか？そして、それ、実際に取っていますか？存外、困った話なのですねー。TraceをONにすると内部情報が沢山出てきますが、それはそれで情報過多すぎるし、欲しいのはそれじゃないんだよ、みたいな。 ... 続きを読む

monによるMySQLのデッドロック検知とロギング - FAT47の底辺インフラ議事録

2013/03/14 69 users InnoDB MySQL アプリケーションサーバ munin

更新が激しいDB（MySQL)でInnoDBのロック競合が発生し、アプリケーションサーバが詰まる状況が発生してしまいました。障害監視はmonというアプリケーションで行なっているのですが、今回はこのmonを使ってMySQLデッドロックの検知とロギングを行いたいと思います。monについては下記の資料をご参照ください。Mon, Muninによる楽々監視生活デッドロック解析は下記サイトのSQLを利用してい... 続きを読む

java-ja『LOG.debug("nice catch!")』に参加してきた #java_ja - Shinya’s Daily Report

2012/06/28 41 users java-ja t-wada Togetter TRY 例外

LOG.debug(”nice catch!”) - connpass2012/06/27 java-ja 『LOG.debug(”nice catch!”)』#java_ja #javaja - Togetter(写真：会場入り口。あれ、イベント名が…こちらが正式名称だったのかな。) try { java-jaで例外とロギングについて勉強します 話していただくのは 俺たちのt-wadaこと和田さ... 続きを読む

fluentd を使った大規模ウェブサービスのロギング - coﾘ・ー・ﾝ＜2nd life

2012/03/07 144 users fluentd クックパッド Fluentd meetup

先月行われた Fluentd meetup in Japanというイベントで発表してきました！一ヶ月前だけどエントリーにするの忘れていたので、今更ながらエントリーに。fluentd を利用した大規模ウェブサービスのロギングView more presentations from hotchpotchfluentd、クックパッドではすでに100台以上のサーバに入れて各種ログを集約してますが本当に便利... 続きを読む