firehose 썸네일형 리스트형 [AWS DEA] 문제로 공부하기 6 - Firehose + Lambda AWS DEA-C01데이터 엔지니어스트리밍 · FirehoseParquet 변환최소 운영 오버헤드 실시간 로그 수집 → Parquet 변환 → S3 — Firehose + Lambda가 정답인 이유 AWS DEA-C01 시험에 자주 나오는 스트리밍 ETL 문제입니다. 여러 애플리케이션의 로그를 중앙 집중식으로 수집하면서 Apache Parquet으로 변환해 S3에 거의 실시간 전달해야 할 때, Firehose / Kinesis Data Streams / Glue ETL / EMR Hive 중 최소 운영 오버헤드로 요구사항을 충족하는 솔루션을 도식과 함께 비교 정리합니다. 📋 문제 전자 상거래 회사가 AWS에서 여러 애플리케이션을.. 더보기 이전 1 다음
