AWS はじめの一歩
新機能

Amazon Kinesis Data Streams が一般目的 S3 バケットへのデータ配信を開始

Amazon Kinesis Data Streams はストリーミングデータを直接 S3 に配信し、配信パイプラインの構築や管理が不要になる

Amazon Kinesis Data Streams がストリーミングデータを直接一般目的の Amazon S3 バケットに配信する機能を提供開始した。これにより、ストリーミングデータを S3 に送るために複数のサーバーレスサービスを連鎖させることや、カスタム消費者アプリケーションを構築する必要がなくなり、運用負荷やコストが削減される。S3 一般目的配信では、使用量ベースの料金で、オンデマンドアドバンテージとオンデマンドスタンダードのキャパシティモードをサポートし、成功したデータのみが課金される。Kinesis Data Streams が利用可能なすべての AWS リージョンで利用可能。

この更新の位置づけ

この変更は、ストリーミングデータを S3 に送る必要があるユーザーに影響を与える。既存の配信パイプラインを簡略化し、コストと管理の負担を軽減する

AWS 公式の元記事を読む

関連する記事 / 用語

リアルタイムデータストリーミング - Amazon Kinesis で実現する即時データ処理Kinesis Data Streams と Data Firehose を組み合わせたリアルタイムデータパイプラインの設計パターンを解説。シャード設計、バッファリング、Lambda 変換、S3・Redshift・OpenSearch への配信を紹介します。Amazon Kinesisリアルタイムストリーミングデータの収集・処理・分析を行うサービスストリーミングデータ処理の設計 - Kinesis によるリアルタイムデータパイプラインの構築Amazon Kinesis Data Streams と Amazon Data Firehose (旧 Kinesis Data Firehose) を活用したストリーミングデータ処理の設計手法を解説し、Lambda 連携によるリアルタイムデータパイプラインの構築方法を紹介します。Amazon Kinesis で構築するリアルタイムデータパイプライン - Data Streams と Data Firehose の使い分けData Streams でリアルタイムデータを取り込み、Data Firehose で S3・Redshift・OpenSearch に自動配信する。シャード設計とオンデマンドモードの使い分けでストリーミングパイプラインを構築する方法を解説します。Amazon DocumentDB の Change Streams で構築するイベント駆動アーキテクチャDocumentDB の変更データキャプチャで Lambda トリガーと連携し、リアルタイムデータ同期のイベント駆動アーキテクチャを構築する手法を紹介します。