VTRyo Blog

一歩ずつ前に進むブログ

fluentd

サーバが再起動されたときにtd-agentの転送だけが失敗している問題

やたらピンポイントなタイトルですが、本当に困っていました。 というのも、td-agentが稼働しているサーバが停止 or rebootすると、td-agentのログ転送だけ止まっているという。 今回は解消の備忘録。

redshift+fluentdでh2oのaccess_logを解析する

アジェンダ 1 redash可視化! 1.1 h2oのログフォーマットをLTSVにしておく 1.2 redshiftのテーブル作成 1.3 td-agent.conf 1.3.1 サービス再起動 1.4 redashクエリ 1.5 トラブルシューティング 1.6 参考

FluentdでログをS3に保存させようとしたが失敗する

WEBに転がっている記事や公式を元に、EC2に吐かれるログをFluentd→S3という形で保存させようとしたときにめちゃくちゃハマってしまった。 いまいま考えてみれば初歩の初歩だったりして余計に悲しくなるというエンジニアあるあるですが、同じようにハマッてい…