Amazon Kinesis Data Streams vs Firehose vs Analytics

Amazon Kinesis Data Streams

- 실시간 데이터 스트리밍 서비스

- 데이터를 수집 및 캡처

- 최종 저장소

Amazon Kinesis Data Analytics

Spark on EMR

Amazon EC2

AWS Lambda

Amazon Kinesis Data Firehose

- 데이터 스트림을 AWS 데이터 저장소로 로드하는 기능 제공

- 데이터 스트림을 캡처, 변환 및 AWS 데이터 스토어로 로드

- 데이터를 분석 및 모니터링

Amazon S3

Amazon Redshift

Amazon Elasticsearch Service

Splunk

HTTP 엔드포인트*

Amazon Kinesis Data Analytics

- SQL질의를 통해 스트리밍 데이터의 유입 데이터 필터링, 변환 및 요약 등의 기능을 수행

- Apache Flink를 사용하여 실시간으로 스트리밍 데이터를 변환하고 분석할 수 있음

- 데이터를 변환하여 S3, OpenSearch 및 기타 서비스로 전송 가능