Azure Synapse Analytics で SQL プールと Apache Spark プールを統合する
Azure Synapse Analytics で SQL プールと Apache Spark プールを統合する方法について説明します。
学習の目的
このモジュールを完了すると、次のことができるようになります。
- Azure Synapse Analytics の SQL プールと Spark プール間の統合方法について説明する
- SQL プールと Spark プールの統合のユース ケースを理解する
- Azure Synapse Analytics で認証する
- Azure Synapse Analytics で SQL と Spark プールの間でデータを転送する
- Azure Synapse Analytics で Spark と SQL プールの間で認証を行う
- Azure Synapse Analytics での SQL プールと Spark プールの統合
- Azure Synapse ワークスペース内での Spark プールの使用を外部化する
- SQL 認証を使用して Synapse ワークスペースの外部でデータを転送する
- PySpark コネクタを使用して Synapse ワークスペースの外部でデータを転送する
- Apache Spark でデータを変換し、Azure Synapse Analytics の SQL プールに書き戻す
追加
前提条件
このモジュールを学習する前に、次のモジュールを完了することをお勧めします。
- データの基礎
- Azure Data Factory の概要
- Azure Synapse Analytics の概要