Fluentd Casual Talks #3

fluentd-casual-talks-3.md

19:00-19:10 開始

19:10-19:20 @tagomoris norikraの話

• before
  • numeric_monitor
  • 再起動がいる
• after
  • 再起動いらない
• fluent-plugin-norikura
  • 処理結果をoutに出来る

19:20-19:35 @sonots (DeNA枠)Fluentdでshadowサーバ用意したら捗った話

• haikanko, yohoushi

• shadowサーバ

  • リクエストを複製する
    • kage(ruby), geest(perl) etc..

• deliver.confで全データを別サーバにも転送

• dummy_log_generator

• 安定してるparam

  • buffer chunk limit(out_forward) 1m
  • flush_interval 0s
  • num_threads 32
  • -> 10万line/sec

• fluent-plugin-sampling-filter

19:35-19:50 @stanaka fluentd go implementation (仮)

19:50-20:05 @okahashi117 Windows版fluentdで幸せになれますか

• windows版ブランチ

20:05-20:20 @kzk_mover TD枠で何か

• モニタリングの話

• プロセス、ポート、システム

• fluentd特化

  • バッファ溢れ
  • リトライ回数

• monitor_agent

• TresureAgent Monitoring Service

20:20-20:30 休憩

20:30-20:35 @kenjiskywalker 増えすぎた設定ファイルの行数をどうするかみたいな話をChefのcookbookとくっつけて

• include

20:35-20:40 @yoshi_ken Fluentd as a Middleware Engine

• yamabiko
• mysql -> yamabiko -> elasticsearch

20:40-20:45 @bash0C7 ご家庭でfluentd

20:45-20:50 @kazegusuri OutputとBufferedOutputの間をうめる

20:50-20:55 @choplin postgres関連の何か

• postgresに放り込む
• fluent-plugin-pgjson
• pg_msgpack

20:55-21:05 @frsyuki Fluentd v11について

• 無停止再起動
  • listernをsupervisorプロセスで
• マルチプロセス化
  • 別プロセスで実験的なプラグインを動かしたりする
• エラーストリーム
• プラグインのバージョン管理
• プラグイン毎のログレベル
• タグの書き換えせずにストリーム処理できる
  • matchをネストできる