CloudWatch Logs へのログ転送と logrotate を併用すると、ログが欠損します。原因と対処法を教えてください | DevelopersIO

2022/09/06 15 users logrotate DevelopersIO ログファイル

困っていた内容 CludWatch エージェントを使用して EC2 インスタンス内部のログファイルを CloudWatch Logs へ転送していますが、対象のログファイルに logrotate を適用してファイルをローテーションさせると、CloudWatch Logs へのログ転送が欠損する場合があります。この原因と対処法を教えてください。 どう対応すれ... 続きを読む

FluentdからAmazon Elasticsearch Serviceへログ転送する時の注意点 | 本日も乙

2016/01/07 42 users fluentd elasticsearch AWS側 本日

昨年10月に Amazon Elasticsearch Service(Amazon ES) がリリースされました。 今まではEC2インスタンスにElasticsearch をインストールして運用していましたが、AWS側でマネージドしてくれるということでとても便利そうだなと思い使ってみました。 動作環境は以下の通りです。 Fluentd 0.10.58 fluent-plugin-elastics... 続きを読む

fluent-agent-hydraで省エネログ転送 - Mercari Engineering Blog

2015/12/15 74 users cubicdaiya アクセスログ メルカリ APIサーバ

2015 - 12 - 15 fluent-agent-hydraで省エネログ転送 Site Reliability Engineering Teamの @cubicdaiya です。 今回はGo製のログ転送エージェントである fluent-agent-hydra とメルカリでの利用事例について紹介します。 メルカリとFluentd メルカリではAPIサーバのアクセスログやアプリケーション固有のロ... 続きを読む

Fluentd v0.12のリリース - Qiita

2014/12/15 36 users Qiita フィルタ RubyGems.org ラベル 互換性

https://rubygems.org/gems/fluentd 12月12日にFluentd v0.12をリリースしました．ここでは出たばかりのv0.12について書きます．v0.12はv1リリースのための準備マイナーバージョンアップの一つで，なるべく互換性を維持しつつ新機能や新しいAPIを実装しています．以下がv0.12で提供される主な新機能です． フィルタ ラベル ログ転送でのAt-leas... 続きを読む