# Amazon Data Firehose の記事一覧

Kinesis Data Firehoseで分単位のパーティション(yyyy/MM/dd/HH/mm)を設定してみた

การใช้ Lambda Function เพื่อแปลงข้อมูลใน Firehose

AWS Step FunctionsからAmazon Kinesis Data Firehoseに複数のJSONデータをPutRecordBatch APIでPutする（AWS CDK）

AWS Step FunctionsからAmazon Kinesis Data FirehoseにJSONデータを”改行コード付きで”Putする（AWS CDK）

การส่งข้อมูลจาก EC2 ไปยัง Firehose

Amazon Kinesis Data FirehoseでLambda Processorを使わずにレコード間に改行コードを自動挿入するアイデア（AWS CDK）

การใช้งาน S3 ควบคู่กับ Amazon Kinesis Data Firehose

Pythonのboto3を実行してAmazon Kinesis Data Firehoseを触ってみた

CloudWatch Logs に取り込んだ syslog を Kinesis Data Firehose + Lambda で動的パーティショニングしつつ S3 に出力してみた

AWS WAFのログで記録されたBlockログのみSyslogサーバに転送する

Amazon RedshiftからAmazon Kinesisのストリームデータをニアリアルタイムにインジェストしてみた

Amazon Kinesis

SESのメール送信履歴をOpenSearch Serviceで表示してみた

Making use of Amazon Kinesis Firehose to pump Data to S3

Amazon Kinesis Data Firehose に Coralogix統合機能が追加されたのでためしてみた

API GatewayのカスタムアクセスログをAthenaでクエリ出来るようにするためのログ形式の追加設定

Amazon Auroraでデータベースアクティビティストリームを有効にしてKMSで暗号された監査ログを復号してS3保存してみた

Aurora PostgreSQLでpgAuditを有効にして監査ログを取得する

KinesisでAPIGatewayを使用してS3にデータを送信してみた。

Amazon OpenSearch Serviceを使用してApacheログ分析をしてみた

[小ネタ] Kinesis Data FirehoseのIAMポリシーに含まれるプレースホルダーについて

Kinesis Agent for Windowsで ログファイルをS3 に送信してみた。

Kinesis Data Firehose で「Lambda.InvokeAccessDenied」が発生するときの対処方法

Kinesis Data FirehoseのJSONがつながった形式のレコードをJSON Lines形式に変換して出力する（Node.js）

Amazon CloudWatch Logsを別アカウントのKinesis Data Firehoseにプッシュする手順で脳内CPUが100%になったので図に描いてみた

［AWS］Amazon ConnectのCTRデータをAmazon OpenSearch Serviceで可視化してみる

FireLens(Fluent Bit)のカスタムログルーティングで「cannot increase buffer: current=4096 requested=36864 max=4096」が出力したときの対策

Firehose で S3 に保存したgzipファイルが正常に解凍出来ない問題の対処方法

Amazon Kinesis Data Firehoseの動的パーティショニング(jqパーサー)を試してみた

Amazon Kinesis Data Firehose For S3 Destination Using CloudFormation

【小ネタ】[Amazon Kinesis Data Firehose] Transform source records with AWS Lambda でレコード毎に改行を追加する

Kinesis Data Firehose를 구성하고 Data Generator를 이용한 로드 테스트 방법

CloudWatch LogsからKinesis Data Fireshoseサブスクリプションフィルターを使ってS3へログを転送した時のログ形式を、オリジナルのログ形式に戻す

Kinesis Data Firehose の Lambda変換を設定した際に”processing-failed”フォルダが作成される

VPC上にデプロイしたSIEM on Amazon ESで既存S3バケットのログを分析してみた

AWS WAFのロギング設定で”aws-waf-logs-“から始まる以外の配信ストリームを指定可能とする方法はあるのか確認してみた