Serverless Data Processing with Dataflow: Foundations - 日本語版

About this course

このコースは、Dataflow を使用したサーバーレスのデータ処理に関する 3 コースシリーズのパート 1 です。この最初のコースでは、始めに Apache Beam とは何か、そして Dataflow とどのように関係しているかを復習します。次に、Apache Beam のビジョンと Beam Portability フレームワークの利点について説明します。Beam Portability フレームワークによって、デベロッパーが好みのプログラミング言語と実行バックエンドを使用できるビジョンが実現します。続いて、Dataflow によってどのように費用を節約しながらコンピューティングとストレージを分離できるか、そして識別ツール、アクセスツール、管理ツールがどのように Dataflow パイプラインと相互に機能するかを紹介します。最後に、Dataflow でそれぞれのユースケースに合った適切なセキュリティ モデルを実装する方法について学習します。

What you will learn

• どのように Apache Beam と Cloud Dataflow が連携して組織のデータ処理ニーズを満たすことができるかを示す
• Beam Portability フレームワークの利点を要約し、Dataflow パイプラインに対してフレームワークを有効にする
• Shuffle Engine と Streaming Engine をそれぞれバッチ パイプラインとストリーミング パイプラインに対して有効にすることで、パフォーマンスを最大化する
• Flexible Resource Scheduling を有効にして、さらに費用効率の高いパフォーマンスを実現する