전체교육일정
교육개요
데이터의 세계에서 진정한 변화를 주도하고자 하는 현직자 여러분, '클라우드 데이터 마스터리' 강의가 길잡이가 될 것입니다. AWS Cloud Platform의 무한한 가능성을 탐험하며, 데이터를 효과적으로 수집, 저장하는 혁신적인 방법을 학습하세요.
Amazon Glue와 Kinesis Firehose를 활용한 심층적인 데이터 처리부터, NoSQL과 RDBMS의 혁신적인 활용법까지,
이 강의는 데이터 수집과 저장의 모든 면모를 다룹니다.
대용량 데이터 관리 및 분석에 필요한 클라우드 저장소 기술을 익혀, 빅데이터의 세계에서 선두주자로 나서십시오.
교육목표
AWS Cloud Platform을 사용하여, 효율적으로 수집, 저장하는 방법을 학습한다.
강의내용
[Chapter1. AWS 빅데이터 수집]
· 학습 목표
AWS를 활용한 빅데이터 파이프라인 구축을 위한 데이터 수집, 전처리, 저장, 스트리밍, 분석 기술 및 Amazon Glue, EMR, S3, Kinesis Firehose 등의 활용법을 합니다.
· 주요 내용
1. AWS를 활용한 빅데이터 데이터 파이프라인 이해
2. 다양한 데이터 소스로부터 데이터 수집(정형/비정형/반정형/실시간 데이터) 전송
3. Amazon Glue - Crowler, Job 모듈 및 EMR를 활용한 데이터 수집
4. AWS S3 저장과 지능형 계층화 아카이브 구성
5. 빅데이터 스트리밍과 Amazon Kinesis Firehose
6. 빅데이터 전처리와 분석 기법
[Chapter2. AWS 빅데이터 저장/처리]
· 학습 목표
AWS 빅데이터 저장/처리에서 NoSQL과 RDBMS 활용 차이, 데이터 형식 및 저장 시스템, Glue Studio 전처리, Lambda Trigger 및 S3, Kinesis 연동, NoSQL 데이터 저장을 합니다.
· 주요 내용
1. NoSQL과 RDBMS의 차이 및 활용
2. 데이터 타입, 저장 형식, 카테고리 별 저장 시스템
3. HDFS, HDFS EC, Azure BLOB, ADLS, S3, DynamoDB, RedShift 이해 및 활용
4. AWS Glue Studio를 이용한 데이터 전처리
5. Lambda Trigger 활용 및 S3와 Kinesis 연동
6. NoSQL(Cosmos, Cassandra, DynamoDB)를 활용한 데이터 저장