Serverless Data Processing with Dataflow: Foundations - 日本語版

このコースは、Dataflow を使用したサーバーレスのデータ処理に関する 3 コースシリーズのパート 1 です。この最初のコースでは、始めに Apache Beam とは何か、そして Dataflow とどのように関係しているかを復習します。次に、Apache Beam のビジョンと Beam Portability フレームワークの利点について説明します。Beam Portability フレームワークによって、デベロッパーが好みのプログラミング言語と実行バックエンドを使用できるビジョンが実現します。続いて、Dataflow によってどのように費用を節約しながらコンピューティングとストレージを分離できるか、そして識別ツール、アクセスツール、管理ツールがどのように Dataflow パイプラインと相互に機能するかを紹介します。最後に、Dataflow でそれぞれのユースケースに合った適切なセキュリティ モデルを実装する方法について学習します。

• はじめに
• このモジュールでは、コースの概要を説明するとともに、Apache Beam プログラミング モデルと Google の Dataflow マネージド サービスについて簡単に復習します。
• Beam Portability
• このモジュールでは、Beam Portablity、Runner v2、コンテナ環境、言語間変換の 4 つのセクションについて学習します。
• Dataflow を使用したコンピューティングとストレージの分離
• このモジュールでは、Dataflow を使用してコンピューティングとストレージを分離する方法について説明します。このモジュールには、Dataflow、Dataflow Shuffle Service、Dataflow Streaming Engine、Flexible Resource Scheduling の 4 つのセクションが含まれています。
• IAM、割り当て、権限
• このモジュールでは、Dataflow を実行するのに必要な、さまざまな IAM ロール、割り当て、権限について説明します。
• セキュリティ
• このモジュールでは、Dataflow でそれぞれのユースケースに合った適切なセキュリティ モデルを実装する方法について学習します。
• まとめ
• このコースでは、始めに Apache Beam とは何か、そして Dataflow とどのように関係しているかを復習しました。