AWS DEA-C01(Data Engineer-Associate) 자격증 취득 후기

얼마전 Beta에서 GA가 된 DEA-C01 취득에 대한 이야기를 해보고자 한다. AWS의 전체 자격증 취득후 황금자켓을 받았는데 그 후에 요놈이 튀어 나왔다.

 

뭐 어떻게 따야지...싶긴 했고 마침 회사 내에서 Data&Analytics 교육과정을 듣고 있는게 있어서 이때다 싶어서 그냥 skillbuilder에서 모의고사 한번씩 풀어보고 바로 시험에 응시했다.

골든 자켓 수여식때 찍은 사진...입은 사진은 차마 부끄러워 못 보여주겠다..

시험에 출제되는 주요 서비스에 대한 이야기

이 시험에 한 50%이상은 Glue에 대한 문제 20%가 Redshift 나머지가 EMR, Kinesis, Athena, Quicksight, Lake Formation에 대한 이야기이다. 특히 오픈소스 DW에 대한 내용도 은근 나온다(https://aws.amazon.com/ko/blogs/tech/choosing-an-open-table-format-for-your-transactional-data-lake-on-aws/- 이 블로그 한번 꼭 읽어라). 이 블로그는 발행전 리뷰를 내가 해서 이미 익숙해 있었다...

 

특히 ETL에 대한 이야기가 엄청 나오모 PII 데이터 마스킹 또는 권한에 대한 이야기가 나온다. 아래 방식으로 매칭하면 편하다

 

PII 마스킹 - Glue Databrew 혹은 StepFunction 등의 Workflow

PII 접근 권한 - Lake Formaion

 

이거로 얻어 걸린 문제가 많으니 이 차이는 꼭 숙지하자. 그리고 Athena는...음...아마 다들 잘 알지 않을까 싶다. 다만 Athena는 Presto 기반 SQL인데 Spark SQL을 지원하기 위한 Work Group 설정 기능이 있다. 이것도 알아두면 좋다(https://aws.amazon.com/ko/blogs/korea/new-amazon-athena-for-apache-spark/)

 

Redshfft관련 문제는 생각보다 난해한게 나온다. Key, Even, All에 대해 잘 숙지하자. 이건 이전에 DAS 시험에도 단골로 나오던 문제인데 여기서도 그대로 나온다. 간단하게 데이터가 적가 변경이 적은건 All 키로 분배가 잘 되야 한다면 Key 또는 Even(이건 잘못하면 Skew가 발생할 수 있으니 잘 선택하자) 그리고 Redshift의 vacuum(악의 근원)에 대해서도 잘 알아두자.

 

Glue는 지원하는 기능들을 전부 이해하고 있어야 한다. 크롤러, Studio, Job, Data Catalog, Data Brew, Workflow 정말 다양하게 출제된다. 특히 메타데이터로서 활용도가 있어서 Hive와 비교하는 문제가 많은데 당연히 비용효율적이고 운영효율적은건 Glue Data Catalog(어차피 요놈도 Hive다...)일것이다.(모르겠으면 손 덜가는 서버리스 서비스로 선택해라)

 

마지막으로 모의고사 - 스킬빌더 20문제와 65문제

- https://explore.skillbuilder.aws/learn/course/18200/exam-prep-official-practice-question-set-aws-certified-data-engineer-associate-dea-c01-korean

Self-paced digital training on AWS - AWS Skill Builder

- https://explore.skillbuilder.aws/learn/course/internal/view/elearning/18868/exam-prep-official-pretest-aws-certified-data-engineer-associate-dea-c01-korean

Self-paced digital training on AWS - AWS Skill Builder

65문제 짜리는 구독해야 하지만 충분히 가치 있다. 확실히 Skillbuilder가 좋아지긴 했다. 

 

시험 느낌

어차피 현업에서 엄청 쓰고 있고 요즘  RAG나 데이터셋 만드는 작업 그리고 회사 내 교육 과정 진행중이라 따로 서비스 공부는 하나도 안하고 스킬빌더 시험 한번 보고 오답 정리하고 본 시험을 쳤다. 이 시험 어쏘주제에 생각보다 어렵다. 지금까지 AWS 시험 보면서 800점 못 넘긴 시험이 딱 두개 있는데 SAP on AWS와 요놈이다. 

 

본인이야 뭐 항상 쓰던 서비스 공부하던 서비스...그리고 Tech Blog 리뷰 하면서 매번 보는 녀석들이라 그냥 대충 준비하고 들어갔는데 아닌 사람들이라면 어쏘라고 만만히 보고 본 시험을 치면 큰코다칠것 같다. 

 

모의고사 꼭 다 풀고 오답 정리도 다 하고 스킬빌더의 https://explore.skillbuilder.aws/learn/course/internal/view/elearning/18603/exam-prep-enhanced-course-aws-certified-data-engineer-associate-dea-c01-english 이 자격증 준비 과정이 있으니 꼭 이수하고 시험을 응시하길 바란다.