memorycraft: Fluentdってなんじゃ？（設定ファイルをリモートから読み込む）

2013/05/28 11 users fluentd Path conf リモート ドキュメント

2013年5月28日火曜日 Fluentdってなんじゃ？（設定ファイルをリモートから読み込む） fluentdのドキュメントに以下のような記載がありました。 Configuration File - (3) Include Directive # absolute path include /path/to/config.conf # if using a relative path, the d... 続きを読む

memorycraft: Kibanaってなんじゃ？（Kibana+elasticsearch+fluentdでログ解析）

2013/04/18 105 users Kibana logstash elasticsearch

2013年4月18日木曜日 Kibanaってなんじゃ？（Kibana+elasticsearch+fluentdでログ解析） 前回の記事では splunk enterpriseを使ってみました。 今回もログ解析プラットホームである、Kibanaを使ってみます。 Kibanaは検索などにElasticsearchを利用します。 またKibanaはデータの収集にLogstashの利用を推奨しています。... 続きを読む

memorycraft: Fluentdってなんじゃ？（datacounter+Growthforecast＋RDSでステータスコードの傾向を可視化)

2013/01/15 24 users ステータスコード GrowthForecast ロク 傾向

2013年1月15日火曜日 Fluentdってなんじゃ？（datacounter+Growthforecast＋RDSでステータスコードの傾向を可視化) Fluentdではさまざまなデータを構造化することができるので、フロント側の可視化ツールに渡すことも柔軟に対応できます。今回はGrowthForecastという可視化ツールに表示させてみます。 データはApacheのログを使い、表示する内容はHT... 続きを読む

memorycraft: EMRってなんじゃ？（ログ、ゆりかごから墓場まで）

2012/12/21 29 users ログファイル アクセスログ ゆりかご 墓場 AWS

2012年12月21日金曜日 EMRってなんじゃ？（ログ、ゆりかごから墓場まで） AWS Advent Calendar 2012 に参加させてもらいました。21日担当です。 AWSでWEBサイトをホストするときのログのライフサイクルについて、まとめてみました。 WEBサーバーの一般的なログの扱いは以下のような感じだと思います。 各インスタンスのアクセスログを1箇所に集める 複数のログファイルを１... 続きを読む