Data pipelines typically fall under one of the Extra-Load, Extract-Load-Transform or Extract-Transform-Load paradigms. This course describes which paradigm should be used and when for batch data. Furthermore, this course covers several technologies on Google Cloud Platform for data transformation including BigQuery, executing Spark on Cloud Dataproc, pipeline graphs in Cloud Data Fusion and serverless data processing with Cloud Dataflow. Learners will get hands-on experience building data pipeline components on Google Cloud Platform using Qwiklabs.
제공자:
Google 클라우드이 강좌에 대하여
최근 조회 59,807회
유동적 마감일
일정에 따라 마감일을 재설정합니다.
공유 가능한 수료증
완료 시 수료증 획득
100% 온라인
지금 바로 시작해 나만의 일정에 따라 학습을 진행하세요.
중급 단계
완료하는 데 약 13시간 필요
영어
자막: 프랑스어, 포르투갈어 (유럽), 러시아어, 영어, 스페인어
유동적 마감일
일정에 따라 마감일을 재설정합니다.
공유 가능한 수료증
완료 시 수료증 획득
100% 온라인
지금 바로 시작해 나만의 일정에 따라 학습을 진행하세요.
중급 단계
완료하는 데 약 13시간 필요
영어
자막: 프랑스어, 포르투갈어 (유럽), 러시아어, 영어, 스페인어
제공자:
Google 클라우드
We help millions of organizations empower their employees, serve their customers, and build what’s next for their businesses with innovative technology created in—and for—the cloud. Our products are engineered for security, reliability, and scalability, running the full stack from infrastructure to applications to devices and hardware. Our teams are dedicated to helping customers apply our technologies to create success.
강의 계획 - 이 강좌에서 배울 내용
완료하는 데 6분 필요
Introduction
In this module, we introduce the course and agenda
완료하는 데 6분 필요
2개 동영상 (총 6분)
완료하는 데 1시간 필요
Introduction to Batch Data Pipelines
This module reviews different methods of data loading: EL, ELT and ETL and when to use what
완료하는 데 1시간 필요
5개 동영상 (총 18분)
완료하는 데 2시간 필요
Executing Spark on Cloud Dataproc
This module shows how to run Hadoop on Cloud Dataproc, how to leverage GCS, and how to optimize your Dataproc jobs.
완료하는 데 2시간 필요
9개 동영상 (총 49분)
완료하는 데 3시간 필요
Manage Data Pipelines with Cloud Data Fusion and Cloud Composer
This module shows how to manage data pipelines with Cloud Data Fusion and Cloud Composer.
완료하는 데 3시간 필요
11개 동영상 (총 45분)
완료하는 데 7시간 필요
Serverless Data Processing with Cloud Dataflow
This module covers using Cloud Dataflow to build your data processing pipelines
완료하는 데 7시간 필요
12개 동영상 (총 40분)
완료하는 데 4분 필요
Summary
This module reviews the topics covered in this course
완료하는 데 4분 필요
1개 동영상 (총 4분)
검토
BUILDING BATCH DATA PIPELINES ON GCP의 최상위 리뷰
UB 제공2020년 5월 27일
A great course to help understand the various wonderful options Google Cloud has to offer to move on-premise Hadoop workload to Google Cloud Platform to leverage scalability of clusters.
AD 제공2020년 7월 16일
Great course learning what it is the big advantages of using GCP for data given they have big implementations and with better performance of what it is today in on premises scenarios
AS 제공2020년 5월 19일
Informative on various features. But cloud fusion and dataflow are not very clearly explained in detail.. expecting more on this. Want to learn more on the pipeline topic please.
HS 제공2020년 9월 12일
The pipeline building portion assumes in part that the learner has previous experience with programming. Further break down of the Python pipeline builds would be helpful.
자주 묻는 질문
등록 전에 강좌를 미리 볼 수 있나요?
등록하면 무엇을 이용할 수 있나요?
강좌 수료증을 언제 받게 되나요?
이 강좌를 청강할 수 없는 이유는 무엇인가요?
궁금한 점이 더 있으신가요? 학습자 도움말 센터를 방문해 보세요.
