Post 썸네일형 리스트형 [AWS DEA] 실생활 비유로 전체 그림 잡기 내부부터 사용============================================= --> AWS DEA-C01 데이터 엔지니어 어소시에이트시험 범위 완벽 정리 처음 보는 사람도 이해할 수 있게 — 실생활 비유로 전체 그림 잡기 4 시험 도메인 65문 총 문항 수 170분 시험 시간 720점 합격 기준 (1000점 만점) 📊 도메인별 출제 비율 🚚 Domain 1 수집·변환 34% .. 더보기 [AWS DEA] Domain 1 데이터 파이프라인 오케스트레이션 완전 정리 AWS DEA-C01 Domain 1 · Task 3 파이프라인 오케스트레이션 Step Functions · MWAA · Glue DAG · 재시도 · 이벤트 기반 AWS Skill Builder AWS DEA-C01 Domain 1 Task 3 — 데이터 파이프라인 오케스트레이션(Orchestrate Data Pipelines) 완전 정리 AWS Skill Builder 공식 강의 기반. 데이터 아키텍처 유형, 오케스트레이션 개념, Step Functions 상태 머신, AWS Glue 워크플로, Amazon MWAA(Airflow), DAG, 재시도·백오프 전략, 이벤트 기반 파이프라인, 실패.. 더보기 [AWS DEA] 문제로 공부하기 20 - OpenSearch AWS DEA-C01데이터 엔지니어검색 · OpenSearch메타데이터 인덱싱 S3 스캔 문서 메타데이터 검색 최적화 — OpenSearch가 정답인 이유 AWS DEA-C01 시험에 자주 나오는 검색 성능 최적화 문제입니다. S3에 저장된 수십만 개의 스캔 문서에서 ML로 추출한 메타데이터를 지원자 이름·날짜·텍스트로 빠르게 검색해야 할 때, OpenSearch / Athena / Redshift / EMR Presto 중 어떤 방식이 성능에 가장 최적화되어 있는지 도식과 함께 비교 정리합니다. 📋 문제 한 회사에서는 수십만 개의 스캔한 문서를 Amazon S3에 이미지로 저장한다. 이 문서에는 타자로 입력된 입사 지.. 더보기 FDE(Forward Deployed Engineer)되기 위한 역량 완전 정리 🔥 2025–2026 가장 핫한 기술 직군 FDE(Forward Deployed Engineer)되기 위한 역량 완전 정리 이론 역량부터 실무 스킬, 커리어 로드맵, 연봉까지 — 데이터 엔지니어·SW 엔지니어가 FDE로 전환하기 위해 알아야 할 모든 것을 정리했습니다. +1,165% 2024→2025 채용 증가율 $174K 미국 중위 연봉 (2025) 1,000+ Salesforce FDE 목표 채용 3-in-1 엔지니어 · 컨설턴트 · PM 📋 목차 FDE란 .. 더보기 [AWS DEA] Domain 1 데이터 변환 및 처리 완전 정리 AWS DEA-C01 Domain 1 · Task 2 데이터 변환 및 처리 OLTP · OLAP · EMR · Glue Spark · Kinesis · Redshift JDBC · ODBC · API Gateway AWS Skill Builder AWS DEA-C01 Domain 1 Task 2 — 데이터 변환 및 처리(Transform and Process Data) 완전 정리 AWS Skill Builder 공식 강의 기반. 데이터 엔지니어링 수명 주기의 변환(Transformation) 단계를 중심으로 OLTP vs OLAP, 데이터 모델링, 배치·스트리밍 변환, Amazon EMR Spar.. 더보기 [AWS DEA] Domain 1 데이터 수집(Data Ingestion) 완전 정리 AWS DEA-C01 Domain 1 데이터 수집 수행 Kinesis · Glue · MSK 배치 · 스트리밍 · 5V AWS Skill Builder AWS DEA-C01 Domain 1 — 데이터 수집 수행(Perform Data Ingestion) 완전 정리 AWS Skill Builder 공식 강의 기반. 데이터 엔지니어링 수명 주기의 수집(Ingestion) 단계를 중심으로 배치 vs 스트리밍, 푸시 vs 풀, 데이터 5V, 멱등성, 재처리 설계, Kinesis 핫 샤드 해결, Redshift COPY 최적화, 스테이트풀 vs 스테이트리스와 AWS 수집 서비스 전체를 도식·비교표로 완전 .. 더보기 [AWS DEA] Data Engineering Fundamentals (with AWS Toolkit) AWS Skill Builder · DEA-C01 기초Data EngineeringFundamentals데이터 엔지니어의 정의, 수명 주기, 책임 영역, 방법론, AWS 도구 키트를 한 장으로 정리Data Lifecycle ETL / ELT Data Pipeline AWS Toolkit DEA-C01 기초01 · 핵심 정의👷Data Engineer데이터 엔지니어데이터를 획득(Acquire)하고, 저장(Store)하고, 데이터 과학자·분석가 등이 사용할 수 있도록 준비(Prepare)하는 사람⚙️Data Engineering데이터 엔지니어링원시 데이터를 수집하여 분석·ML에 사용할 고품질의 일관된 데이터를 생성하는 프로세스 및 시스템을 개발·구현·유지 관리하는 것02 · 목표🎯신뢰할 수 있는 데이터셋 .. 더보기 [AWS DEA] 문제로 공부하기 19 - AppFlow AWS DEA-C01Amazon AppFlowAmazon RedshiftSaaS 데이터 통합최소 운영 오버헤드 SaaS → Redshift 지속 데이터 전송 — Amazon AppFlow가 정답인 이유 AWS DEA-C01 시험에 자주 나오는 SaaS 데이터 통합 문제입니다. SaaS 애플리케이션 데이터를 Amazon Redshift로 코드 없이 지속적으로 전송하는 솔루션으로 Amazon AppFlow 플로가 정답인 이유를 EventBridge(중개 서비스 필요), Lambda UDF(지속 전송 불가), MWAA(추가 관리 필요)와 비교하여 도식으로 정리합니다. 📋 문제 회사가 Amazon Redshift 데이터 웨어하우스를 운영하며, .. 더보기 이전 1 2 3 4 ··· 10 다음