構造化ログのフォーマット logfmt vs JSON lines - methaneのブログ

2024/03/04 139 users methane クォート プラクティス エスケープ 改行

構造化ログのプラクティスをあちこちで調べていたら、logfmtを推奨する記事を見つけたので調べてみました。 先に結論を言うと、JSON linesを使っておくのが良さそうです。 logfmt について logfmtとはスペース区切りで key=value を並べたフォーマットです。文字列にはクォートとエスケープによってスペースや改行を含め... 続きを読む

もっと log/slog を使おう

2023/12/24 87 users Zap zerolog log サードパーティ製 パッケージ

はじめに この記事は Go アドベントカレンダー 2023 の最終日 25 日目の記事です。 皆さん log/slog 使ってますか。便利なのでぜひ使ってください。 slog は構造化ログを出力する為のパッケージで Go 1.21 で導入されました。これまでも zap や zerolog といったサードパーティ製のロガーを使う事で構造化ログを出力する... 続きを読む

GCPで理想の構造化ログを出力する方法

2020/12/25 7 users GCP stdout stderr GKE Engine

はじめに GCP には Cloud Logging(旧Stackdriver Logging)というサービスがあり、Google App Engine[1] や Cloud Run、Cloud Functions、GKE といったマネージドサービス上に構築したアプリケーション内で標準入出力(stdoutやstderr)にログを出力するだけで専用のログビューアで見ることができます。 この Cloud Logging... 続きを読む

Kubernetes 上のアプリケーションから Stackdriver Logging に構造化ログを送る - Quipper Product Team Blog

2019/03/20 18 users Kubernetes SRE yuya-takeyama

SRE チームの @yuya-takeyama です。 Quipper の SRE チームでは AWS や Kubernetes を用いたインフラの構築、CI/CD パイプラインの構築・改善等様々な Developer Experience の向上、社内のあらゆるサービスのマイクロサービス化のサポート、そしてそれに伴う複雑化にも耐え得るよう、サービスの安定稼働を支えるための... 続きを読む

TCPパケットを解析して構造化ログでダンプするツール tcpdp を作った - Copy/Cut/Paste/Hatena

2018/09/24 365 users Paste Cut Copy Hatena

やっと形になってきました。 github.com 「データベースのクエリログを取得したい」 例えば、データベース（RDBMS）のクエリログを取得したいとき一番確実な方法は、そのRDBMSに備わっているログ機構を利用することです。 一方で、全てのクエリログを出力するとなるとそれなりにIO負荷がかかることが予想されるので、負... 続きを読む