FireLens で rewrite_tag による複数ターゲットへのログの振り分け
By msysh on 2020-07-19
FireLens fluent bit でログを振り分けたい場合、 fluent bit の設定ファイル内で Parsers_File などで指定した別のファイルを用いて、カスタム docker イメージを作成するサンプルが多いかと思いますが、カスタムイメージを作成することなく（ Parsers_File 無しで）ささやかながら実現した例を紹介したいと思います。
#aws #fluentbit #firelens #ecs #logging #firehose #elasticsearch
CloudWatch Logs から Subscription Filter で Firehose, S3 へ
By msysh on 2020-04-06
CloudWatch Logs（CWL）から Subscription Filter で Kinesis Data Firehose（Firehose） を利用して、S3 へログを保存というケースで、
Firehose で Lambda による Transform を実施したいことがある（ある情報をマスクする、秘匿化するなど）。
その時の考慮事項、実装方法など。