Azure Synapse Apache Spark プールで Data Engineering を実行する

中級

データエンジニア

Azure Synapse Analytics

Apache Spark は、ビッグデータの分析と変換のための拡張性の高い分散処理ソリューションです。 Spark プールを使用して、Azure Synapse Analytics でその機能を活用できます。

前提条件

このラーニングパスを開始する前に、Azure Synapse Analytics についてよく理解しておく必要があります。まず、「Azure Synapse Analytics の概要」モジュールを完了することを検討してください。

Apache Spark は、大規模なデータ分析のためのコアテクノロジです。 Azure Synapse Analytics で Spark を使用して、データレイク内のデータを分析および視覚化する方法について説明します。

データエンジニアは、通常、大量のデータを変換する必要があります。 Azure Synapse Analytics の Apache Spark プールは、この目標を達成するために使用できる分散処理プラットフォームを備えています。

Delta Lake は、Azure Synapse Analytics でデータレイクハウスアーキテクチャを実装するために使用できる Spark 用のオープンソースリレーショナルストレージ領域です。