Making use of Amazon Kinesis Firehose to pump Data to S3
Amazon Kinesis Data Firehose に Coralogix統合機能が追加されたのでためしてみた
API GatewayのカスタムアクセスログをAthenaでクエリ出来るようにするためのログ形式の追加設定
Amazon Auroraでデータベースアクティビティストリームを有効にしてKMSで暗号された監査ログを復号してS3保存してみた
Aurora PostgreSQLでpgAuditを有効にして監査ログを取得する
KinesisでAPIGatewayを使用してS3にデータを送信してみた。
Amazon OpenSearch Serviceを使用してApacheログ分析をしてみた
[小ネタ] Kinesis Data FirehoseのIAMポリシーに含まれるプレースホルダーについて
Kinesis Agent for Windowsで ログファイルをS3 に送信してみた。
Kinesis Data Firehose で「Lambda.InvokeAccessDenied」が発生するときの対処方法
Kinesis Data FirehoseのJSONがつながった形式のレコードをJSON Lines形式に変換して出力する(Node.js)
Amazon CloudWatch Logsを別アカウントのKinesis Data Firehoseにプッシュする手順で脳内CPUが100%になったので図に描いてみた
[AWS]Amazon ConnectのCTRデータをAmazon OpenSearch Serviceで可視化してみる
FireLens(Fluent Bit)のカスタムログルーティングで「cannot increase buffer: current=4096 requested=36864 max=4096」が出力したときの対策
Firehose で S3 に保存したgzipファイルが正常に解凍出来ない問題の対処方法
Amazon Kinesis Data Firehoseの動的パーティショニング(jqパーサー)を試してみた
Amazon Kinesis Data Firehose For S3 Destination Using CloudFormation
【小ネタ】[Amazon Kinesis Data Firehose] Transform source records with AWS Lambda でレコード毎に改行を追加する
Kinesis Data Firehose를 구성하고 Data Generator를 이용한 로드 테스트 방법
CloudWatch LogsからKinesis Data Fireshoseサブスクリプションフィルターを使ってS3へログを転送した時のログ形式を、オリジナルのログ形式に戻す
Kinesis Data Firehose の Lambda変換を設定した際に”processing-failed”フォルダが作成される
VPC上にデプロイしたSIEM on Amazon ESで既存S3バケットのログを分析してみた
AWS WAFのロギング設定で”aws-waf-logs-“から始まる以外の配信ストリームを指定可能とする方法はあるのか確認してみた
[AWS CDK] Kinesis Data FirehoseのデータのS3出力失敗時のログを記録してみた
AWS CDKで構築したSIEM on Amazon ESで、FSx for Windows File Serverのファイルアクセス監査ログを可視化してみた
AWS WAF v2のS3へのログ出力をAWS CDK(一部AWS CLI)で設定してみた
FSx for Windows File Serverの監査ログをKinesis Data Firehose経由でS3バケットに保存してみた
[アップデート] FSx for Windows File Server でアクセス監査ログの取得が可能になりました
Audioデータをクラウドに送ってみました。 コスト計算
Audioデータをクラウドに送ってみました。 証明書を使用してAmazon Kinesis Data Streamsへ(Authorizing Direct Calls)
Audioデータをクラウドに送ってみました。 MQTT(basic ingest) + Amazon Kinesis Data Streams + Amazon Kinesis Data Firehose + S3 (バイナリ)
Audioデータをクラウドに送ってみました。 Amazon Kinesis Data Streams + Amazon Kinesis Data Firehose + S3 (バイナリ)
Audioデータをクラウドに送ってみました。 Amazon Kinesis Data Streams + Amazon Kinesis Data Firehose + S3 (JSON)
Audioデータをクラウドに送ってみました。 Amazon Kinesis Data Firehose + S3 (JSON)
Audioデータをクラウドに送ってみました。 MQTT + Amazon Kinesis Data Firehose + S3 (JSON)
Amazon CloudWatch Metric Streams で New Relic にメトリックデータを流し込んでみる(Step-by-Step)
© Classmethod, Inc. All rights reserved.