Introduction to Data Engineering on Google Cloud - 한국어

Instructor: Google Cloud Training

Access provided by FutureX

8 modules

Gain insight into a topic and learn the fundamentals.

Beginner level

No prior experience required

9 hours to complete

Flexible schedule

Learn at your own pace

8 modules

Gain insight into a topic and learn the fundamentals.

Beginner level

No prior experience required

9 hours to complete

Flexible schedule

Learn at your own pace

What you'll learn

데이터 엔지니어의 역할 이해하기
Google Cloud에서의 데이터 엔지니어링 작업과 사용되는 핵심 구성요소 파악하기
Google Cloud에서 다양한 패턴의 데이터 파이프라인을 만들고 배포하는 방법 이해하기
Google Cloud의 다양한 자동화 기법을 파악하고 활용하기

Skills you'll gain

Data Sharing
Cloud Storage
Data Import/Export
Data Processing
Data Pipelines
Metadata Management
Real Time Data
Data Infrastructure
Apache Spark
Data Migration
Google Cloud Platform
Extract, Transform, Load
Serverless Computing
Data Integration
Data Storage
Apache Airflow
Skills section collapsed. Showing 11 of 16 skills.

Details to know

Shareable certificate

Add to your LinkedIn profile

Assessments

6 assignments

Taught in Korean

See how employees at top companies are mastering in-demand skills

Learn more about Coursera for Business

logos of Petrobras, TATA, Danone, Capgemini, P&G and L'Oreal

There are 8 modules in this course

이 과정에서는 Google Cloud의 데이터 엔지니어링, 데이터 엔지니어의 역할과 책임, 그리고 이러한 요소가 Google Cloud 제공 서비스와 어떻게 연결되는지에 대해 알아봅니다. 또한 데이터 엔지니어링 과제를 해결하는 방법에 대해서도 배우게 됩니다.

이 섹션에서는 Introduction to Data Engineering on Google Cloud 과정을 소개하고 과정의 구조와 목표에 대한 개요를 제공합니다.

What's included

1 video

이 모듈에서는 데이터 엔지니어의 역할을 소개합니다. 데이터 소스와 싱크, 데이터 형식, Google Cloud의 스토리지 옵션, 메타데이터 관리, 그리고 Analytics Hub를 사용하여 조직 내외부의 데이터를 공유하는 방법과 같은 주요 개념을 다룹니다.

What's included

9 videos1 assignment1 app item

9 videos Total 17 minutes

모듈 소개 1 minute
데이터 엔지니어의 역할 1 minute
데이터 소스와 데이터 싱크 2 minutes
데이터 형식 1 minute
Google Cloud의 스토리지 솔루션 옵션 5 minutes
Google Cloud의 메타데이터 관리 옵션 1 minute
실습 소개: BigQuery에 데이터 로드하기 1 minute
Google Cloud의 메타데이터 관리 옵션 0 minutes
Coursera: Google Cloud 및 Qwiklabs 시작하기 5 minutes

1 assignment Total 15 minutes

모듈 1: 퀴즈 15 minutes

1 app item Total 90 minutes

실습: BigQuery에 데이터 로드하기 90 minutes

이 모듈에서는 Google Cloud에서의 데이터 복제 및 마이그레이션에 대한 개요를 제공합니다. 기본적인 아키텍처, 'gcloud' 명령줄 도구, Storage Transfer Service, Transfer Appliance, Datastream과 각각의 기능 및 사용 사례를 다룹니다.

What's included

6 videos1 assignment1 app item

6 videos Total 7 minutes

모듈 소개 0 minutes
복제 및 마이그레이션 아키텍처 2 minutes
gcloud 명령줄 도구 0 minutes
데이터 세트 이동 1 minute
Datastream 4 minutes
실습 소개: Datastream: BigQuery로 PostgreSQL 복제하기 0 minutes

1 assignment Total 15 minutes

모듈 2: 퀴즈 15 minutes

1 app item Total 45 minutes

실습: Datastream: BigQuery로 PostgreSQL 복제하기 45 minutes

이 모듈에서는 특히 BigQuery를 사용한 Google Cloud에서의 데이터 추출 및 로딩 프로세스를 중점적으로 다룹니다. 기본적인 추출 및 로딩 아키텍처, bq 명령줄 도구, BigQuery Data Transfer Service, 그리고 기존 추출-로드 패턴의 대안인 BigLake에 대한 내용을 다룹니다.

What's included

6 videos1 assignment1 app item

이 모듈에서는 Google Cloud에서의 ELT(추출, 로드, 변환) 프로세스에 대한 개요를 제공합니다. 기본적인 ELT 아키텍처, 일반적인 ELT 파이프라인 예시, SQL 스크립팅 및 예약을 위한 BigQuery 기능, 그리고 Dataform의 기능과 사용 사례에 대한 내용을 다룹니다.

What's included

5 videos1 assignment1 app item

5 videos Total 10 minutes

모듈 소개 0 minutes
ELT(추출, 로드, 변환) 아키텍처 1 minute
BigQuery를 사용한 SQL 스크립팅 및 예약 3 minutes
Dataform 6 minutes
실습 소개: Dataform에서 SQL 워크플로를 만들고 실행하기 0 minutes

1 assignment Total 15 minutes

모듈 4: 퀴즈 15 minutes

1 app item Total 60 minutes

실습: Dataform에서 SQL 워크플로를 만들고 실행하기 60 minutes

이 모듈에서는 Google Cloud에서의 ETL(추출, 변환, 로드) 프로세스에 대한 개요를 제공합니다. 기본적인 ETL 아키텍처, GUI 도구, 일괄 및 스트리밍 데이터 처리 옵션(Dataproc, Dataproc Serverless), 데이터 파이프라인에서 Bigtable의 역할에 대한 내용을 다룹니다.

What's included

8 videos1 assignment2 app items

8 videos Total 13 minutes

모듈 소개 1 minute
ETL(추출, 변환, 로드) 아키텍처 1 minute
ETL 데이터 파이프라인을 위한 Google Cloud GUI 도구 2 minutes
Dataproc을 사용한 일괄 데이터 처리 5 minutes
실습 소개: Spark용 Dataproc Serverless를 사용하여 BigQuery 로드하기 0 minutes
스트리밍 데이터 처리 옵션 3 minutes
Bigtable과 데이터 파이프라인 1 minute
실습 소개: Dataflow로 실시간 대시보드를 위한 스트리밍 데이터 파이프라인 만들기 0 minutes

1 assignment Total 15 minutes

모듈 5: 퀴즈 15 minutes

2 app items Total 105 minutes

실습: Spark용 Dataproc Serverless를 사용하여 BigQuery 로드하기 45 minutes
실습: Dataflow로 실시간 대시보드를 위한 스트리밍 데이터 파이프라인 만들기 60 minutes

이 모듈에서는 파이프라인을 위한 Google Cloud의 자동화 패턴과 옵션을 중점적으로 다룹니다. Cloud Scheduler, Workflows, Cloud Composer, Cloud Run Functions, Eventarc와 같은 다양한 도구 및 서비스와 각각의 기능 및 자동화 사용 사례에 대한 내용을 다룹니다.