Skip to content

kjhyuok/data-Engineering-hol-kr

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 
 
 
 
 
 
 
 
 

Repository files navigation

README

AWS기반 데이터레이크 구성을 위한 Data Engineering Immersion Day

기존 AWS의 Workshop인 Data Engineering Immersion Day을 한글화 하고, 실습자에게 필요한 부분만 구성합니다.
본 Workshop은 3~4시간 정도 소요되며, 활용되는 AWS Resource 목록은 다음과 같습니다.

Data Engineering Immersion Day 개요

대체 텍스트

Data Engineering Immersion Day?

Data Engineering Immersion Day 에서는 AWS의 데이터 레이크 관점에서의 데이터 수집, 처리, 쿼리 및 소비에 초점을 맞춘 실습을 수행 합니다.
본 Immersion Day에서는 여러분의 IDC에 위치했다고 가정한 원본 데이터베이스의 수집을 위한 AWS DMS(데이터 마이그레이션 서비스), 데이터 카탈로그 및 실행을 위한 AWS GLUE, 데이터 레이크를 위해 S3를 쿼리하고 뷰테이블을 생성하는 AMAZON Athena, 최종적으로 정제된 데이터의 시각화를 위한 AMAZON QuickSight 등 AWS 분석 서비스를 직접 이용할 수 있는 경험을 제공합니다.
본 Immersion Day를 수행하면 클라우드 네이티브 및 서버리스 데이터 레이크를 구축하는 데 도움이 될 수 있습니다.

이 Immersion Day는 크게 3가지의 단계로 이루어져 있으며, 사전에 2개의 단계를 확인 합니다.
0.Introduction 에서는 단계별 실습에서 진행하는 각 Architecture에 대해 기술합니다.
1.Lab: Setting Lab Account 에서는 AWS에서 제공하는 실습용 Account를 Setting하고 AWS Web Console에 접근하여 실습을 할 수 있는 환경을 준비합니다.

AWS 강사님의 준비사항(중요!)

이 워크샵은 On-premise로 가정한 별도 VPC 환경에서 PostgreSQL DB를 AWS DMS를 통해 마이그레이션 해 오는것이 그 첫번째 단계 입니다.
다음의 절차를 통해서 교육생들이 AWS DMS로 접근할 수 있는 Source DB인 PostgreSQL를 생성해 주세요.
강사용 EventEngine이나 AWS Account에서 아래를 수행!
옵션 1. 이 페이지에서 Instructor PreLab을 수행하시면 됩니다.
Instructor PreLab 방문
옵션 2. 아래의 yaml파일을 다운로드하여 강사용 AWS Account에서 CloudFormation을 수행하시면 됩니다.
Instructor CloudFormation Download

Info

본 Workshop에 오류가 있거나 AWS Console UI가 업데이트 되어 심하게 실습과 매칭되지 않는 부분이 있으면 작성자에게 메일 부탁드립니다. [email protected](JongHyuok, Kim)


About

for Data Engineering Immersion Day

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Contributors 4

  •  
  •  
  •  
  •