전체교육일정
교육개요
이 4일 과정에서는 ECS(Embedded Containerized Services)에서 CDP 데이터 서비스의 아키텍처, 배포, 구성 및 실행을 가르칩니다. CDP 데이터 서비스는 전체 데이터 라이프사이클을 단일 도구 세트로 통합하여 개발 및 배포를 가속화하는 동시에 사용 사례 개발 비용을 절감하는 최첨단 로우 코드 컴퓨팅입니다.
이 과정은 Docker 이미지 및 컨테이너를 관리하여 Docker 개인 레지스트리를 구축하는데 권장되는 실습으로 시작됩니다. Docker 프라이빗 레지스트리는 ECS에 데이터 서비스 클러스터를 배포하는 데 사용됩니다.
학생들은 Cloudera Data Engineering, Cloudera Data Warehouse 및 Cloudera Machine Learning을 설치, 구성 및 검증하는 방법을 배웁니다. 연습에서는 Kubernetes 학습, 프라이빗 클라우드 임베디드 컨테이너 서비스(ECS) 설치, Cloudera Data Services 배포에 중점을 둡니다. 이 과정에는 네트워킹 및 하드웨어에 대한 요구 사항과 CDP 데이터 서비스를 지원하기 위해 동적으로 확장되는 Kubernetes 포드에 대한 설명이 포함되어 있습니다.
교육목표
- CDP 데이터 서비스 아키텍처
- Docker 이미지 및 컨테이너
- 도커 프라이빗 레지스트리
- 임베디드 컨테이너형 서비스 설정 및 설치
- 관리 콘솔 및 환경 구성
- 쿠버네티스 이론
- Cloudera Data Warehouse 설정, 실행 및 관리
- Cloudera Data Engineering 설치, 구성 및 관리
- Cloudera Machine Learning 설치, 구성 및 관리
수강대상
- CDP 관리자
- 최소 3년에서 5년의 시스템 관리 경험자
- Linux 명령 및 인터페이스에 사용자
- HDP에 대한 경험
선수과목
- ADMIN-230 Operating Cloudera Data Platform
- ADMIN-232 Building Secure Cloudera Clusters
강의내용
Big Data to Big Compute
- 마이크로서비스의 중요성
- 컨테이너화된 애플리케이션 개요
- CDP 데이터 서비스의 설계 원칙
Docker 이미지 및 컨테이너
- 이미지 및 컨테이너용 Docker cli
- 컨테이너화된 애플리케이션 구축
Cloudera 데이터 플랫폼용 아키텍처
- 데이터 플랫폼, 데이터 레이크, 데이터 서비스를 위한 아키텍처
- 임베디드 컨테이너 서비스를 위한 아키텍처
도커 프라이빗 레지스트리
- Docker 개인 레지스트리 구축
- Cloudera 이미지 패키지 로드
임베디드 컨테이너화된 서비스를 위한 클러스터
- 네트워크 요구사항
- 하드웨어 요구사항
- 클러스터 권장사항
공유 데이터 경험
- Ranger, Altas, Hive Metastore의 중요성
- Cloudera Data Warehouse를 지원하는 Hive 데이터베이스에 대한 Ranger 정책 생성
내장형 컨테이너 서비스 설정
- 공백이 있는 저장소 관리
- 메타스토어 데이터베이스 확보
- 와일드카드 DNS 및 와일드카드 인증서 생성
임베디드 컨테이너화된 서비스 설치
- 내장된 컨테이너화된 서비스 설치
- ECS Docker 레지스트리 관리
설정 관리 콘솔
- 보안 LDAP 구성
- 관리자 구성
환경 설정
- 사용자 및 그룹 추가
- 환경 만들기
- 환경에 사용자 할당
관리 콘솔 운영
- 알림 관리
- 지원 번들 생성
쿠버네티스 이론
- Kubernetes 클러스터 이론
- Kubernetes 네임스페이스 이론
- Kubernetes 배포 이론
- 임베디드 컨테이너화 서비스 이론
쿠버네티스 관리
- Kubernetes 웹 UI 사용
- kubectl CLI 사용
- K9 터미널 인터페이스 사용
ECS용 스토리지 관리
- 스토리지 아키텍처
- Longhorn 아키텍처
Cloudera 데이터 웨어하우스 실행
- Hive 및 Impala용 가상 창고 만들기
- 관리자 가상 창고
Cloudera Data Engineering 실행
- 주체 및 와일드카드 인증서 설정
- Spark용 가상 클러스터 생성
- 관리자 가상 클러스터
Cloudera Data Engineering 실행
- Spark용 가상 클러스터 생성
- 관리자 가상 클러스터
- 관리자 작업공간
임베디드 컨테이너화된 서비스 관리
- CDP 클러스터 중지 및 시작
- ECS 제거