移轉至 Microsoft Fabric 中的 Data Factory

  • 發行項

Microsoft Fabric 中的 Data Factory 將 Power Query 和 Azure Data Factory 整合為現代化信任的數據整合體驗，讓數據和商務專業人員能夠為其組織擷取、載入及轉換數據。 此外，強大的數據協調流程功能可讓您建置簡單至複雜的數據工作流程，以協調數據整合需求所需的步驟。

Microsoft Fabric 中 Data Factory 的重要概念

  • 取得數據和轉換 - 數據流 Gen2 是 Power BI 中數據流的演進。 數據流 Gen2 已重新架構，以使用網狀架構計算引擎進行數據處理和轉換。 這可讓他們在任何規模內嵌和轉換數據。

  • 數據協調流程 - 使用已熟悉 Azure Data Factory （ADF） 使用者的數據管線，Microsoft Fabric 會啟用 ADF 中提供的相同協調流程功能。 在正式發行網狀架構中，數據管線支援ADF中大部分可用的活動。

    請參閱此屬於 Fabric 中數據管線一部分的活動清單。 SSIS 活動將在 Q2 CY2024 前新增至數據管線。

  • 企業就緒的數據移動 - 無論是小型數據移動還是 PB 規模，Data Factory 都提供無伺服器且智慧型手機的數據移動平臺，可讓您可靠地在各種數據源和數據目的地之間行動數據。 在支援 170 個以上的連接器之後，Microsoft Fabric 中的 Data Factory 可讓您在多雲端、內部部署數據源和虛擬網路內（VNet）之間行動數據。 智慧型輸送量優化可讓數據移動平台自動偵測數據移動所需的計算大小。

從 Azure Data Factory 移轉 （ADF）

若要讓客戶從 Azure Data Factory 升級至 Microsoft Fabric（ADF），我們支援下列功能：

  • 數據管線活動 - 我們支援您在 ADF 中使用到 Fabric 中 Data Factory 的大部分活動。 此外，我們新增了通知的新活動，例如 Teams 和 Outlook 活動。 請參閱Data Factory in Fabric 中可用的活動清單。

  • Azure Data Factory 中的 OneLake/Lakehouse 連接器 - 對於許多 ADF 客戶，您現在可以與 Microsoft Fabric 整合，並將 數據帶入 Fabric OneLake。

  • Azure Data Factory 將數據流對應至網狀架構 - 我們提供本指南 給 ADF 客戶 ，考慮在 Fabric 中建置新的數據轉換。

    此外，對於考慮將ADF對應數據流遷移至 Fabric 的客戶，您可以從 Fabric 客戶諮詢小組 （Fabric CAT） 套用範例程式代碼，將對應數據流轉換為 Spark 程式代碼。 如需詳細資訊，請 前往將數據流對應至 Microsoft Fabric。

作為 Microsoft Fabric 藍圖中 Data Factory 的一部分，我們正致力於第 2 季 CY2024 的下列預覽：

  • 在網狀架構 中掛接ADF - 這項功能可讓客戶在 Microsoft Fabric 中掛接現有的ADF。 所有 ADF 管線都會依現成運作，並繼續在 Azure 上執行，同時讓您探索 Fabric 並制定更完整的升級計劃。
  • 從ADF管線升級至網狀架構 - 我們正與客戶和社群合作，以瞭解如何最好地支援從ADF升級至網狀架構的數據管線。 為此，我們將提供升級體驗，讓您能夠使用掛接和升級數據管線，在 Fabric 中測試現有的數據管線。

將 Power BI 數據流 Gen1 遷移至 Fabric 中的 Dataflow Gen2

與 Power BI 中的數據流 （Gen1） 相比，Fabric 中的數據流 Gen2 提供了許多優點和新功能：

  • 大規模取得資料 （「快速複製」
  • 大規模資料轉換（使用 Fabric Lakehouse SQL 引擎）
  • 更多輸出目的地：Azure SQL DB、Lakehouse、Warehouse、SharePoint、KQL 資料庫等等
  • 增強的重新整理歷程記錄和監視體驗
  • 增強的撰寫和發佈體驗。

我們鼓勵客戶開始嘗試數據流 Gen2，以重新建立現有的數據流 Gen1 案例，或嘗試新的數據流。 數據流 Gen2 的早期意見反應可協助我們發展並成熟產品功能。

我們有幾個選項可供客戶重新建立 Gen1 資料流作為數據流 Gen2：

  • 匯出數據流 Gen1 查詢並將其匯入 Dataflow Gen2：您現在可以在數據流和數據流 Gen2 撰寫體驗中導出查詢，並將其儲存至 PQT 檔案，然後匯入數據流 Gen2。 如需詳細資訊，請參閱 使用導出範本功能。
  • 複製並貼上 Power Query：如果您在 Power BI 或 Power Apps 中有數據流，您可以複製查詢，並將其貼到數據流 Gen2 成品的編輯體驗中。 這項功能可讓您將數據流移轉至 Gen2，而不需要重寫查詢。 如需詳細資訊，請參閱複製並貼上現有的數據流 （Gen1） 查詢。

另請參閱下列文章以取得進一步的考慮： 數據流 Gen1 與 Gen2 之間的差異

相關內容