Fluentdでログのフィルタリング統合ログ管理基盤としてのFluentdを試してみました。†td-agentログにエラーが出て、bufferファイルが残る場合がある。bufferファイルの中身を調べたい場合。eraseしただけでは色々ゴミが残っていた。fluent-plugin-rds-logSQLの抽象化。v0.14)以降、「${tag[1]}」が使えるため、「fluent-plugin-forest」は不用にできるかも。Engineer問題ログファイルが大きく、ファイル数も多いと同時にgzipやアップロード等の処理が実行されるため、CPU使用率が跳ね上がる。tailプラグインだと、同一ログファイルに対して、posやbufferのパスを変えても、複数のsourceを定義できない?片方だけが有効に見える。毎にファイル分割される。は古いログの到着を待つ時間。サイズを超えると、ファイル分割されアップロードされる。index+1される。v0.14)以降、「${tag[1]}」が使えるため、「fluent-plugin-forest」は不用にできるかも。問題out_forwardの接続先ホストのDNS更新があっても、再試行に失敗する。DNSキャッシュのタイムアウトを設定する。0だとキャッシュしないため、パフォーマンスに影響が出る可能性がある。Route53のデフォルトTTLの5分に設定。†2015-05-22現在、デフォルトでインストールされるtd-agentが2.x系に変わっている。互換性が無いためリポジトリのパスが変わっている。fluentdに直接メッセージを送れる。