Share via

將 Spark 組態從 Azure Synapse 遷移至 Fabric

  • 發行項

Apache Spark 提供許多可自訂的組態，以增強各種案例的體驗。 在 Azure Synapse Spark 和網狀架構資料工程師中，您可以彈性地納入這些組態或屬性，以量身打造您的體驗。 在 Fabric 中，您可以將 Spark 組態新增至 環境 ，並直接在 Spark 作業內使用內嵌 Spark 屬性。 若要將 Azure Synapse Spark 集區組態移至 Fabric，請使用環境。

如需 Spark 組態考慮，請參閱 Azure Synapse Spark 與 Fabric 之間的差異。

必要條件

  • 如果您還沒有網狀架構工作區，請在租使用者中建立 Fabric 工作區 。
  • 如果您還沒有環境，請在工作區中建立 環境 。

選項 1：將 Spark 組態新增至自訂環境

在環境中，您可以設定 Spark 屬性，並將這些設定套用至選取的環境集區。

  1. 開啟 Synapse Studio ：登入 Azure 。 流覽至您的 Azure Synapse 工作區，然後開啟 Synapse Studio。
  2. 找出 Spark 組態 ：
    • 移至 [ 管理 ] 區域，然後選取 [Apache Spark 集區]。
    • 尋找 Apache Spark 集區，選取 [Apache Spark 組態 ]，然後找出集區的 Spark 組態名稱。
  3. 取得 Spark 組態 ：您可以從 [組態 + 程式庫 > Apache Spark 組態] 中選取 [檢視組 態] 或匯出 組態 （.txt/.conf/.json 格式）來取得這些屬性。
  4. 設定 Spark 之後， 請在 Fabric 中 將自訂 Spark 屬性新增至您的環境 ：
    • 在 [環境] 中，移至 [Spark 計算 > Spark] 屬性。
    • 新增 Spark 組態。 您可以手動新增每個 ，或從 .yml 匯入。
  5. 按一下 [ 儲存 並 發佈 變更]。

Screenshot showing Spark configurations.

深入瞭解如何將 Spark 組態新增至 環境 。

相關內容