본문 바로가기

Stack/AWS

AWS DEA-C01 각색 문제 Day 01 — VPC·Lake Formation·Lambda 5문제 AWS DEA-C01 문제로 공부하기 — Day 01VPC 네트워킹, Lake Formation 거버넌스, Data Exchange, 데이터 메시, Lambda Layer까지 — 5문제로 Domain 1 핵심 개념을 한 번에 정리합니다.AWS DEA-C01 Domain 1 · 데이터 수집·변환 5문제📋 목차Q1 AWS Glue ETL 작업의 S3 VPC Endpoint 연결 오류 해결Q2 지역별 고객 데이터 접근 제한 — 운영 부담 최소화Q3 추천 시스템 고도화를 위한 외부 데이터 통합Q4 분산 데이터 아키텍처(Data Mesh) 구현 서비스 조합Q5 여러 Lambda 함수에서 공유 코드 일괄 관리Q1 VPC · Networking · Glue ⭐ 자주 출제AWS Glue를 VPC 환경에서 실행할 때 .. 더보기
AWS DEA-C01 Domain 4 핵심 요약 — IAM·Lake Formation·KMS 보안 정리 AWS DEA-C01 › Domain 4 · 전체 압축 정리Domain 4 — 데이터 보안 및 거버넌스핵심만 압축 정리인증 · 권한부여 · 암호화 · 감사로그 · PII 보호 · Task 1~5 한 페이지전체 4.1 인증 4.2 권한부여 4.3 암호화·마스킹 4.4 감사 로그 4.5 프라이버시·거버넌스4.1인증 메커니즘 적용Task 1 · IAM 자격증명·정책·역할·VPC 보안·Secrets Manager18%🔐 인증(Authentication) vs 권한부여(Authorization) 인증 = 사용자를 식별하고 본인이 맞는지 확인 (누구인가?)권한부여 = 인증된 자격증명이 어디까지 접근할 수 있는지 결정 (무엇을 할 수 있는가?)IAM 자격증명 유형 비교유형특징자격증명사용 사례IAM User한 사람·.. 더보기
AWS DEA-C01 Domain 3 핵심 요약 — CloudWatch·Step Functions·CI/CD 정리 AWS DEA-C01 › Domain 3 · 전체 압축 정리Domain 3 — 데이터 운영 및 지원핵심만 압축 정리자동화 · 데이터 분석 · 모니터링 · 품질 보장 · Task 1~4 한 페이지전체 3.1 처리 자동화 3.2 데이터 분석 3.3 모니터링 3.4 품질 보장3.1데이터 처리 자동화Task 1 · IaC·CI/CD·파이프라인 오케스트레이션·API 관리22%CloudFormation + EventBridge 기반 파이프라인 자동화 흐름S3 버킷CloudFormation 생성→EventBridge 규칙파일 업로드 탐지→Lambda파일 유형 확인→Step Functions상태 머신 시작→Glue Job파일 처리→Glue Crawler카탈로그 업데이트→SNS성공/실패 알림CI/CD 파이프라인 자동화코.. 더보기
AWS DEA-C01 Domain 2 핵심 요약 — S3·Redshift·DynamoDB 언제 쓰나 AWS DEA-C01 › Domain 2 · 전체 압축 정리Domain 2 — 데이터 스토어 관리핵심만 압축 정리스토어 선택 · 데이터 카탈로그 · 수명주기 · 스키마진화 · Task 1~4 한 페이지전체 2.1 스토어 선택 2.2 데이터 카탈로그 2.3 수명주기 관리 2.4 스키마 진화2.1데이터 스토어 선택Task 1 · 용도에 맞는 스토리지 서비스를 고르는 법26%스토리지 유형 3종 — 기초 구분유형서비스비유사용 사례객체Amazon S3무한 창고데이터 레이크, 백업, 미디어, 정적 콘텐츠파일Amazon EFS공유 네트워크 드라이브여러 EC2 공유 파일, 웹호스팅, 빅데이터블록Amazon EBS서버 내부 SSDDB 실행, 트랜잭션 앱, 짧은 지연시간 필요파일FSx for Lustre고속 병렬 드라이브.. 더보기
AWS DEA-C01 Domain 1 핵심 요약 — Kinesis·Glue·MSK 한 번에 정리 AWS DEA-C01 › Domain 1 · 전체 압축 정리Domain 1 — 데이터 수집·변환·오케스트레이션핵심만 압축 정리Task 1~4 · 시험에 나오는 것만 · 비유 & 비교표 중심34%Domain 126%Domain 222%Domain 318%Domain 41.1데이터 수집 (Ingestion)Task 1 · 어떤 서비스로 데이터를 가져올 것인가34%서비스한 줄 비유핵심 특징온프렘 대응Kinesis Data Streams실시간 컨베이어 벨트직접 Pull. 샤드 단위 처리량. 기본 24시간 보존Apache KafkaKinesis Data Firehose자동 배달 트럭완전 서버리스. S3/Redshift/OpenSearch 자동 전달. 변환·압축 내장—Amazon MSK대형 우체국완전관리형 Kafk.. 더보기
AWS DEA-C01 시험 범위 한눈에 정리 — AWS 처음인데 합격할 수 있을까? 내부부터 사용============================================= -->AWS DEA-C01데이터 엔지니어 어소시에이트시험 범위 완벽 정리처음 보는 사람도 이해할 수 있게 — 실생활 비유로 전체 그림 잡기4 시험 도메인65문 총 문항 수170분 시험 시간720점 합격 기준 (1000점 만점)📊 도메인별 출제 비율🚚 Domain 1 수집·변환 34%🏪 Domain 2 저장소 26%🔧 Domain 3 운영·지원 22%🔒 Domain 4 보안·거버넌스 18%💡 이 글 사용법 — 먼저 비유로 전체 그림을 잡고, 각 서비스의 이름(주황색 태그)을 기억하세요. 아래 탭으로 도메인별로 필터해서 볼 수 있습니다.전체 보기 🚚 Domain 1 · 수집/변환 🏪 Domain 2 .. 더보기
AWS DEA-C01 공식 샘플 문제 — OpenSearch 실전 문제 + 정답 해설 AWS DEA-C01 데이터 엔지니어 검색 · OpenSearch 메타데이터 인덱싱S3 스캔 문서 메타데이터 검색 최적화 — OpenSearch가 정답인 이유AWS DEA-C01 시험에 자주 나오는 검색 성능 최적화 문제입니다. S3에 저장된 수십만 개의 스캔 문서에서 ML로 추출한 메타데이터를 지원자 이름·날짜·텍스트로 빠르게 검색해야 할 때, OpenSearch / Athena / Redshift / EMR Presto 중 어떤 방식이 성능에 가장 최적화되어 있는지 도식과 함께 비교 정리합니다.📋 문제한 회사에서는 수십만 개의 스캔한 문서를 Amazon S3에 이미지로 저장한다. 이 문서에는 타자로 입력된 입사 지원서가 포함되어 있으며, 지원자 이름, 지원자 성, 지원 날짜, 지원자 위치 및 지원 .. 더보기
AWS DEA-C01 데이터 엔지니어 기초 — 수명주기·ETL·파이프라인 완전 정리 AWS Skill Builder · DEA-C01 기초Data EngineeringFundamentals데이터 엔지니어의 정의, 수명 주기, 책임 영역, 방법론, AWS 도구 키트를 한 장으로 정리Data Lifecycle ETL / ELT Data Pipeline AWS Toolkit DEA-C01 기초01 · 핵심 정의👷Data Engineer데이터 엔지니어데이터를 획득(Acquire)하고, 저장(Store)하고, 데이터 과학자·분석가 등이 사용할 수 있도록 준비(Prepare)하는 사람⚙️Data Engineering데이터 엔지니어링원시 데이터를 수집하여 분석·ML에 사용할 고품질의 일관된 데이터를 생성하는 프로세스 및 시스템을 개발·구현·유지 관리하는 것02 · 목표🎯신뢰할 수 있는 데이터셋 .. 더보기