본문 바로가기

LAMBDA

AWS DEA-C01 공식 샘플 문제 — Firehose + Lambda 실전 문제 + 정답 해설 AWS DEA-C01 데이터 엔지니어 스트리밍 · Firehose Parquet 변환 최소 운영 오버헤드실시간 로그 수집 → Parquet 변환 → S3 — Firehose + Lambda가 정답인 이유AWS DEA-C01 시험에 자주 나오는 스트리밍 ETL 문제입니다. 여러 애플리케이션의 로그를 중앙 집중식으로 수집하면서 Apache Parquet으로 변환해 S3에 거의 실시간 전달해야 할 때, Firehose / Kinesis Data Streams / Glue ETL / EMR Hive 중 최소 운영 오버헤드로 요구사항을 충족하는 솔루션을 도식과 함께 비교 정리합니다.📋 문제전자 상거래 회사가 AWS에서 여러 애플리케이션을 실행한다. 이 회사는 중앙 집중식 스트리밍 로그 수집 솔루션을 설계하려고 .. 더보기
AWS DEA-C01 공식 샘플 문제 — Lambda + EventBridge 실전 문제 + 정답 해설 AWS DEA-C01 데이터 엔지니어 서버리스 · 스케줄러 최소 운영 오버헤드온프레미스 크론(cron) → AWS 마이그레이션 — Lambda + EventBridge가 정답인 이유AWS DEA-C01 시험에 자주 나오는 스케줄링 마이그레이션 문제입니다. 온프레미스 크론으로 매일 실행하던 Python 스크립트를 최소 운영 오버헤드로 AWS에 이전할 때, CloudShell / Lambda / EC2 / EventBridge 중 무엇을 선택해야 하는지 도식과 운영 오버헤드 비교로 정리합니다. (복수 정답 유형)📋 문제한 컨설턴트 회사가 클라우드 기반 시간 추적 시스템의 REST API에서 전날 레코드를 CSV로 가져오는 작업을 운영 중이다. 현재 온프레미스 크론(cron)이 매일 아침 같은 시간에 Pyt.. 더보기
AWS DEA-C01 공식 샘플 문제 — Lambda · EFS 실전 문제 + 정답 해설 AWS DEA-C01 데이터 엔지니어 스토리지 마이그레이션 Lambda · EFS온프레미스 NFS → AWS 마이그레이션 — Lambda에서 EFS를 써야 하는 이유AWS DEA-C01 시험에 자주 나오는 스토리지 마이그레이션 문제 유형입니다. 온프레미스 NFS 파일 공유를 AWS로 이전하면서 Lambda 함수가 NFS 프로토콜로 데이터를 공유해야 할 때, EFS / EBS / DynamoDB / Lambda 로컬 스토리지 중 무엇을 선택해야 하는지 도식과 함께 비교 정리합니다.📋 문제회사의 데이터가 온프레미스 NFS 파일 공유에 있다. 회사는 AWS로 마이그레이션할 계획이며, 데이터 분석에 데이터가 사용된다. 이 회사는 AWS Lambda 함수를 작성해 데이터를 분석한다. 그리고 Lambda가 액세스.. 더보기