困っていた内容 Kinesis Data Firehose で Lambda 関数によるデータ変換を設定しています。データを送信すると、S3 バケットのprocessing-failedフォルダに次のエラーが記録され、変 […]
Kinesis Data FirehoseのJSONがつながった形式のレコードをJSON Lines形式に変換して出力する（Node.js）
こんにちは、CX事業本部 IoT事業部の若槻です。 今回は、Amazon Kinesis Data FirehoseのJSONがつながった形式のレコードをJSON Lines形式に変換して出力する方法を確認してみました。 […]
［AWS］Amazon ConnectのCTRデータをAmazon OpenSearch Serviceで可視化してみる
Amazon Connectではレポート機能もありますが、Amazon OpenSearch Service (Amazon Elasticsearch Service の後継サービス)を利用することでダッシュボードを作 […]
Amazon Kinesis Data Firehoseの動的パーティショニング(jqパーサー)を試してみた
AWSチームのすずきです。 Amazon Kinesis Data Firehose、動的パーティショニング をサポートするアップデートがありました。 今回、動的パーティショニングを有効にした Firehose 配信スト […]
【小ネタ】[Amazon Kinesis Data Firehose] Transform source records with AWS Lambda でレコード毎に改行を追加する
1 はじめに IoT事業部の平内（SIN）です。 ストリームに流れるレコードを、そのままS3へ保存するような場合、Amazon Kinesis Data Firehoseが非常に便利に利用されると思います。そして、レコー […]…