tag: firehose

FireLens で rewrite_tag による複数ターゲットへのログの振り分け

By msysh on 2020-07-19

FireLens fluent bit でログを振り分けたい場合、 fluent bit の設定ファイル内で Parsers_File などで指定した別のファイルを用いて、カスタム docker イメージを作成するサンプルが多いかと思いますが、カスタムイメージを作成することなく( Parsers_File 無しで)ささやかながら実現した例を紹介したいと思います。

#aws #fluentbit #firelens #ecs #logging #firehose #elasticsearch

Read more

CloudWatch Logs から Subscription Filter で Firehose, S3 へ

By msysh on 2020-04-06

CloudWatch Logs(CWL)から Subscription Filter で Kinesis Data Firehose(Firehose) を利用して、S3 へログを保存というケースで、
Firehose で Lambda による Transform を実施したいことがある(ある情報をマスクする、秘匿化するなど)。
その時の考慮事項、実装方法など。

#aws #cloudwatch #firehose #lambda

Read more