CentOS7.5 の fsnotify がレースコンディションを起こすバグを nginx + td-agent + in_tail プラグインで踏む - hibomaの日記

2018/06/06 95 users td-agent fluentd hiboma nginx

2018 - 06 - 06 CentOS7.5 の fsnotify がレースコンディションを起こすバグを nginx + td-agent + in_tail プラグインで踏む エントリの概要 CentOS7.5 の fsnotify() がレースコンディションを起こすバグを、 nginx + td-agent (fluentd) + in_tail プラグイン で踏んだ際の調査内容を記してい... 続きを読む

fluentd - fluent-plugin-stdinで手軽にローカルのファイルを転送する - Qiita

2015/01/19 22 users repeatedly elasticsearch 転送 手元

logstash を使って手元にあるファイルを elasticsearch に取り込むを読んで，確かに標準入力から読み込めるとちょっと便利だなぁと思ったので標準入力からログを受け取るstdinプラグインを書いた． repeatedly/fluent-plugin-stdin fluentdにはin_tailがあるので，複数ファイルを一気に転送とかだとそっちの方が楽だけど，1ファイルだけこまめに転送... 続きを読む

fluentd - fluent-plugin-file-alternativeで出力したログをin_tailで読み込む - Qiita

2014/05/09 27 users Qiita fluentd ロク

Fluentdでは出力側が詰まると、バッファがたまっていき、ある程度するとバッファが詰まり、今度はそこにForwardしているバッファが詰まり、数珠つなぎにバッファが詰まっていく。大量にたまらないときは出力側が流れ出したら、復帰してくれてとても便利だ。memoryバッファにしておくと、プロセスを再起動しないといけないときに消えちゃうので、fileバッファにするのがいまのところ王道設定である。 しか... 続きを読む

td-agent の in_tail プラグインを使っている際に対象ログがローテーションする瞬間を見たい - ようへいの日々精進

2013/08/15 39 users fluentd Apache ようへい td-agent アク

2013-08-15 td-agent の in_tail プラグインを使っている際に対象ログがローテーションする瞬間を見たい fluentd redis ruby きっかけ ということで、td-agent(fluentd) のin_tail プラグインでログのローテーションをどのように捕捉して追従していくかを調べたい やってみた 下記の環境においてクライアントから apache に ab でアク... 続きを読む