Amazon Managed Service for Apache Flink 요금
소개
Apache Flink를 사용하여 스트리밍 데이터를 실시간으로 변환하고 분석하세요.
Amazon Managed Service for Apache Flink를 사용하면 데이터 스트림 처리를 위한 오픈 소스 프레임워크 및 엔진인 Apache Flink를 통해 스트리밍 데이터를 실시간으로 변환하고 분석할 수 있습니다. Amazon Managed Service for Apache Flink는 Apache Flink 워크로드의 구축 및 관리를 간소화하며 애플리케이션을 다른 AWS 서비스와 손쉽게 통합하는 데 도움이 됩니다.
Amazon Managed Service for Apache Flink를 사용하면 기간 및 KPU 수에 대한 요금이 1초 단위로 청구됩니다. 단일 KPU는 vCPU 컴퓨팅 1개와 메모리 4GB로 구성됩니다.
Amazon Managed Service for Apache Flink 스트리밍 애플리케이션 요금
Apache Flink 애플리케이션의 경우 오케스트레이션에 사용되는 애플리케이션별로 단일 추가 KPU 요금이 청구됩니다. 스토리지 및 내구성 있는 백업 실행에 대한 비용도 애플리케이션에 부과됩니다. 실행 중인 애플리케이션 스토리지는 Amazon Managed Service for Apache Flink의 상태 유지 처리 기능에 사용되며 GB/월 단위로 청구됩니다. 내구성 있는 백업은 선택 사항이며 애플리케이션에 대한 특정 시점 복구를 제공하며 GB/월 단위로 청구됩니다.
스트리밍 모드에서 Amazon Managed Service for Apache Flink는 메모리 및 컴퓨팅 요구 사항이 변함에 따라 스트림 처리 애플리케이션에 필요한 KPU 수를 자동으로 조정합니다. 필요한 KPU 수로 애플리케이션을 프로비저닝하도록 선택할 수 있습니다.
Amazon Managed Service for Apache Flink Studio 요금
대화형 모드에서는 Studio 애플리케이션당 추가 KPU 2개 요금이 부과됩니다. KPU 1개는 Apache Flink 애플리케이션 오케스트레이션에 사용되고 다른 1개는 서버리스 대화형 개발 환경에 사용됩니다. 상태 저장 처리 기능에 사용되는 애플리케이션 스토리지 실행 요금도 부과됩니다. 애플리케이션 스토리지 실행 요금은 GB/월 단위로 부과됩니다.
Studio 노트북에서 개발하는 경우 내구성 있는 애플리케이션 백업을 생성하는 옵션을 사용할 수 없습니다. 그러나 대화형 모드에서 스트리밍 모드로 Studio 노트북에 애플리케이션을 배포하면 내구성 있는 애플리케이션 백업을 생성할 수 있습니다.
일반 KPU 사용 지침
애플리케이션에 필요한 KPU 수를 정확하게 추정하려면 프로덕션 로드로 애플리케이션을 테스트하는 것이 좋습니다. KPU 사용량은 데이터 볼륨 및 속도, 코드 복잡성, 통합 등에 따라 상당히 달라질 수 있습니다. Amazon Managed Service for Apache Flink에서 Apache Flink 런타임을 사용하는 경우에는 특히 그렇습니다. 예를 들어 내부 테스트 결과, 상태가 없는 단순한 애플리케이션의 경우에는 KPU별로 초당 수백 MB의 처리량이 관찰되었으며, 기계 학습(ML) 알고리즘을 많이 사용하는 복잡한 애플리케이션의 경우에는 KPU별로 초당 1MB 미만의 처리량이 관찰되었습니다. 이러한 사항을 감안하여 애플리케이션 테스트 전에 제공하는 일반 지침은 KPU별로 초당 1MB입니다.
AWS 리전별 요금
요금 예
모두 열기Amazon Managed Service for Apache Flink에서 Apache Flink 애플리케이션을 사용하여 Kinesis Data Streams에서 캡처한 로그 데이터를 Amazon Simple Storage Service(Amazon S3)로 지속적으로 변환하고 전달합니다. 로그 데이터는 다른 로그 이벤트에 대한 스키마 적용, 이벤트 유형별 데이터 파티셔닝, 타임스탬프별 데이터 정렬 및 전송 1시간 전 데이터 버퍼링을 포함한 여러 연산자를 사용하여 변환됩니다. 애플리케이션에는 여러 변환 단계가 있지만 컴퓨팅 집약적인 단계는 없습니다. 이 스트림은 하루 12시간 동안 초당 2,000개의 레코드에 있는 데이터를 수집하고, 이를 하루 12시간 동안 초당 8,000개의 레코드로 늘립니다. 내구성 있는 애플리케이션 백업은 생성하지 않습니다. Amazon Managed Service for Apache Flink의 월별 요금은 다음과 같이 계산됩니다.
월별 요금
미국에서의 가격 동부(버지니아 북부) 리전은 KPU-시간당 0.11 USD입니다. Amazon Managed Service for Apache Flink는 KPU당 50GB의 실행 애플리케이션 스토리지를 할당하고 GB당 월 0.10 USD의 요금을 부과합니다.
과중한 워크로드: 12시간의 과중한 워크로드 기간에 Amazon Managed Service for Apache Flink 애플리케이션은 초당 8,000개의 레코드를 처리하고 자동으로 KPU 8개까지 스케일 업됩니다. 워크로드가 많은 기간 이후 Amazon Managed Service for Apache Flink 애플리케이션은 처리량이 6시간 동안 낮아진 이후 애플리케이션을 스케일 다운합니다. 애플리케이션은 하루 총 18시간 동안 KPU 8개로 스케일 업됩니다.
30일/월 * 18시간/일 = 540시간/월
월별 KPU 요금 = 540시간/월 * KPU 8개 * 0.11 USD/시간 = 475.20 USD
월별 실행 중인 애플리케이션 스토리지 요금 = 540시간/월 * KPU 8개 * 50GB/KPU * 0.10 USD/GB-월 = 30.00 USD
월별 KPU 및 스토리지 요금 = 475.20 USD + 30.00 USD = 505.20 USD
가벼운 워크로드: 남은 6시간의 가벼운 워크로드 기간에 Amazon Managed Service for Apache Flink 애플리케이션은 초당 2,000개의 레코드를 처리하고 자동으로 KPU 2개까지 스케일 다운됩니다.
30일/월 * 6시간/일 = 180시간/월
월별 KPU 요금 = 180시간/월 * KPU 2개 * 0.11 USD/시간 = 39.60 USD
월별 실행 중인 애플리케이션 스토리지 요금 = 180시간/월 * KPU 2개 * 50GB * 0.10 USD/GB-월 = 2.50 USD
월별 KPU 및 스토리지 요금 = 39.60 USD + 2.50 USD = 42.10 USD
각 Apache Flink 애플리케이션은 애플리케이션당 추가 KPU에 따라 요금이 부과됩니다.
추가 KPU 월별 요금 = 30 * 24 * KPU 1개 * 0.11 USD/시간 = 79.20 USD
요금 합계 = 505.20 USD + 42.10 USD + 79.20 USD = 626.50 USD
Amazon Managed Service for Apache Flink에서 Apache Flink 애플리케이션을 사용하여 Amazon Simple Storage Service(Amazon S3)의 로그 데이터를 배치 모드로 변환합니다. 로그 데이터는 다양한 로그 이벤트에 스키마 적용, 이벤트 유형별 데이터 분할, 타임스탬프별 데이터 정렬 등 여러 연산자를 사용하여 변환됩니다. 애플리케이션에는 여러 변환 단계가 있지만 컴퓨팅 집약적인 단계는 없습니다. 이 애플리케이션은 30일 동안 매일 10분 동안 초당 2,000개 레코드 속도로 데이터를 수집합니다. 내구성 있는 애플리케이션 백업은 생성하지 않습니다. Amazon Managed Service for Apache Flink의 월별 요금은 다음과 같이 계산됩니다.
월별 요금
미국에서의 가격 동부(버지니아 북부) 리전은 KPU-시간당 0.11 USD입니다. Amazon Managed Service for Apache Flink는 KPU당 50GB의 실행 애플리케이션 스토리지를 할당하고 GB당 월 0.10 USD의 요금을 부과합니다.
배치 워크로드: Amazon Managed Service for Apache Flink 애플리케이션은 하루에 10분 동안 초당 2,000개의 레코드를 처리하고 있으며, 여기에는 KPU 2개가 필요합니다.
30일/월 * 10분/일 = 300분/월
월별 KPU 요금 = 300분/월 * KPU 2개 * 0.11 USD/시간 = 1.10 USD
월별 실행 애플리케이션 스토리지 요금 = 300시간/월 * KPU 2개 * 50GB * 0.10 USD/GB-월 = 0.07 USD
월별 KPU 및 스토리지 요금 = 1.10 USD + 0.07 USD = 1.17 USD
각 Apache Flink 애플리케이션은 애플리케이션당 추가 KPU에 따라 요금이 부과됩니다.
월별 요금 = KPU 1개 * 0.11 USD/시간 * 10분/월 = 0.02 USD(1센트 미만은 올림 처리)
요금 합계 = 1.17 USD + 0.02 USD = 1.19 USD
사용자가 Amazon Managed Service for Apache Flink Studio를 사용하여 Amazon Kinesis Data Streams에서 캡처한 스트리밍 데이터를 지속적으로 필터링하고 원하는 레코드만 유지합니다. 레코드를 실시간으로 보고 시각화하는 기능과 SQL 및 Python으로 쿼리 및 프로그램을 손쉽게 작성할 수 있는 기능을 원합니다. 내구성 있는 상태 백업은 원하지 않습니다. 입력 스트림의 처리량에 따라 Studio 노트북에 사용할 KPU 4개를 프로비저닝합니다. Amazon Managed Service for Apache Flink의 월별 요금은 다음과 같이 계산됩니다.
월별 요금
미국에서의 가격 동부(버지니아 북부) 리전은 스트림 처리 애플리케이션에 사용된 KPU/시간당 0.11 USD입니다. 이 간단한 애플리케이션은 수신 데이터 스트림 처리에 4개의 KPU를 사용합니다. 각 Studio 노트북 애플리케이션(예: 대화형 모드)에는 애플리케이션당 추가 KPU 2개 요금이 부과됩니다.
월별 KPU 요금 = 30일 * 24시간 * ((KPU 4개 + Studio 노트북용 추가 KPU 2개) * 0.11 USD/시간) = 475.20 USD
Apache Flink 애플리케이션은 KPU당 50GB의 실행 애플리케이션 스토리지를 사용하고 Studio 노트북 애플리케이션을 위해 추가 50GB의 실행 스토리지를 사용하며 US-East-1의 경우 GB당 월 0.10 USD의 요금이 부과됩니다.
월별 실행 애플리케이션 스토리지 요금 = 30일 * 24시간 * (KPU 4개 + Studio 노트북용 추가 KPU 1개) * (50GB * 0.10 USD/GB-월) = 25.00 USD
요금 합계 = 475.20 USD + 25.00 USD = 500.20 USD
Amazon Managed Service for Apache Flink Studio를 사용하여 Amazon Managed Streaming for Apache Kafka(Amazon MSK) 클러스터의 주제가 캡처한 스트리밍 데이터에 대한 슬라이딩 윈도우를 구축합니다. 매월 1일 10:30에 시작하는 KPU 4개가 포함된 Studio 노트북을 사용하여 쿼리를 개발하고 테스트합니다. 개발 후에는 17:00시에 KPU 2개가 있는 스트리밍 애플리케이션으로 애플리케이션을 배포합니다. 스트리밍 애플리케이션이 배포되면 1시간 후인 18:00에 Studio 노트북을 중지합니다. 스트리밍 애플리케이션은 지속 가능한 애플리케이션 상태를 사용할 수 있으며 매일 지속 가능한 상태 백업을 생성합니다.
미국에서의 가격 동부(버지니아 북부) 리전은 스트림 처리 애플리케이션에 사용된 KPU/시간당 0.11 USD입니다.
월별 요금
Amazon Managed Service for Apache Flink Studio를 사용하여 쿼리 개발 및 테스트:
Studio 애플리케이션은 한 달에 450분 동안 실행됩니다(1일 10:30부터 18:00까지).
KPU 요금 = 450분 * (KPU 4개 + Studio 노트북용 추가 KPU 2개) * 0.11 USD/시간) = 4.95 USD
Apache Flink 애플리케이션은 KPU당 50GB의 실행 애플리케이션 스토리지를 사용하고 Studio 노트북 애플리케이션을 위해 추가 50GB의 실행 스토리지를 사용하며 US-East-1의 경우 GB당 월 0.10 USD의 요금이 부과됩니다.
실행 애플리케이션 스토리지 요금 = 450분* (KPU 4개 + Studio 노트북용 추가 KPU 1개) * (50GB * 0.10 USD/GB-월) = 0.26 USD
지속적으로 실행하고 애플리케이션 백업을 수행하기 위해 스트리밍 애플리케이션으로 배포:
스트리밍 애플리케이션은 해당 월에 703시간 동안 실행됩니다(1일 17:00부터).
KPU 요금 = 703시간 * (KPU 2개 + 스트리밍 애플리케이션용 추가 KPU 1개) * 0.11 USD/시간) = 231.99 USD
Apache Flink 애플리케이션은 KPU당 50GB의 실행 중인 애플리케이션 스토리지를 사용하고, US-East-1에서 월별 GB당 0.121 USD의 요금이 부과됩니다.
실행 애플리케이션 스토리지 요금 = 703시간 * KPU 2개 * (50GB * 0.10 USD/GB-월) = 9.76 USD
내구성 있는 애플리케이션 스토리지 요금 = 703시간 * (1MB/백업 * 1GB/1,000MB) * 0.023 USD/GB-월 = 0.01 USD(1센트 미만은 올림 처리)
요금 합계 = 4.95 USD + 0.26 USD + 231.99 USD + 9.76 USD + 0.01 USD = 246.97 USD