Skip to content
CourseAsk.
Dataflow를 사용한 서버리스 데이터 처리: 파이프라인 개발
Coursera MOOC / Non-credit 0

Dataflow를 사용한 서버리스 데이터 처리: 파이프라인 개발

About this course

Dataflow 과정 시리즈의 두 번째 편에서는 Beam SDK를 사용하여 파이프라인을 개발하는 방법을 자세히 살펴보겠습니다. 먼저 Apache Beam 개념에 대한 복습부터 시작하겠습니다. 다음으로 윈도우, 워터마크, 트리거를 사용하여 스트리밍 데이터를 처리하는 방법을 알아봅니다. 그런 다음 파이프라인의 소스 및 싱크 옵션, 정형 데이터를 표현하는 스키마, State 및 Timer API를 사용하여 스테이트풀(Stateful) 변환을 수행하는 방법을 다룹니다. 이제 파이프라인 성능을 극대화하는 데 도움이 되는 권장사항을 살펴보겠습니다. 과정의 마지막 부분에서는 Beam에서 비즈니스 로직을 표현하기 위한 SQL과 DataFrame을 소개하고 Beam 노트북을 사용하여 파이프라인을 반복적으로 개발하는 방법을 알아봅니다.

C

56/100

CourseAsk score

What the provider tells you
24/45
Who stands behind it
20/35
How complete the listing is
12/20

Scores how much the provider publishes and who stands behind it — not how well it is taught.

What you'll learn

  • understand Apache Beam concepts
  • process streaming data using windows, watermarks, and triggers
  • perform stateful transformations with State and Timer API
  • maximize pipeline performance
  • use SQL and DataFrames for business logic in Beam
Cloud Computing #data processing #dataframes #sql #apache beam #performance optimization #streaming data #pipelines #dataflow #stateful transformations #business logic
$49.00

Price shown by Coursera — confirm on their site.

Enroll on Coursera

You'll be redirected to Coursera to complete enrollment.

  • Listed & compared by CourseAsk
  • English · 0