Migrálás a Data Factorybe a Microsoft Fabricben

  • Cikk

A Data Factory a Microsoft Fabricben a Power Queryt és az Azure Data Factoryt egy modern, megbízható adatintegrációs felületté emeli, amely lehetővé teszi az adatok és az üzleti szakemberek számára az adatok kinyerésére, betöltésére és átalakítására a szervezet számára. Emellett a hatékony adatvezénylési képességek lehetővé teszik egyszerű és összetett adat-munkafolyamatok készítését, amelyek összehangolják az adatintegrációs igényekhez szükséges lépéseket.

A Data Factory főbb fogalmai a Microsoft Fabricben

  • Adatok lekérése és átalakítás – Az Adatfolyam Gen2 az adatfolyamok fejlődése a Power BI-ban. A Dataflow Gen2 újra van tervezve, hogy Fabric számítási motorokat használjon adatfeldolgozáshoz és átalakításhoz. Ez lehetővé teszi számukra, hogy bármilyen léptékben betöltse és átalakítsa az adatokat.

  • Adatvezénylés – Az Azure Data Factory (ADF) felhasználói számára már ismerős adatfolyamok használatával a Microsoft Fabric ugyanazokat a vezénylési képességeket teszi lehetővé az ADF-ben. A Fabric ga kiadásának részeként az adatfolyamok támogatják az ADF-ben elérhető tevékenységek többségét.

    Tekintse meg azoknak a tevékenységeknek a listáját, amelyek a Fabricben lévő adatfolyamok részét képezik. Az SSIS-tevékenységet a cy2024 második negyedéve hozzáadja az adatfolyamokhoz.

  • Nagyvállalati szintű adatáthelyezés – Legyen szó kis adatáthelyezésről vagy petabájtszintűről, a Data Factory egy kiszolgáló nélküli és intelligens adatáthelyezési platformot biztosít, amely lehetővé teszi az adatok megbízható áthelyezését a különböző adatforrások és adatforrások között. A Több mint 170 összekötő támogatásával a Microsoft Fabric Data Factory lehetővé teszi az adatok áthelyezését többfelhős, helyszíni adatforrások és virtuális hálózatok (VNet) között. Az intelligens átviteli sebesség optimalizálása lehetővé teszi, hogy az adatátviteli platform automatikusan észlelje az adatáthelyezéshez szükséges számítás méretét.

Migrálás az Azure Data Factoryből (ADF)

Annak érdekében, hogy az ügyfelek az Azure Data Factoryből (ADF) frissíthessenek a Microsoft Fabricre, a következő funkciókat támogatjuk:

  • Adatfolyam-tevékenységek – Az ADF-ben már használt tevékenységek többségét támogatjuk a Data Factoryben a Fabricben. Emellett új tevékenységeket is hozzáadtunk az értesítésekhez, például a Teams és az Outlook tevékenységeihez. Tekintse meg a Data Factoryben a Fabricben elérhető tevékenységek listáját.

  • OneLake/Lakehouse-összekötő az Azure Data Factoryben – Sok ADF-ügyfél számára mostantól integrálhatja a Microsoft Fabricet, és adatokat vihet be a Fabric OneLake-be.

  • Azure Data Factory– Adatfolyam hálóba való leképezése – Ezt az útmutatót az ADF-ügyfelek számára biztosítjuk, akik új adatátalakításokat terveznek a Fabricben.

    Emellett az ADF-leképezési adatfolyamok Fabricbe való migrálását fontolgató ügyfelek esetében a Fabric ügyféltanácsadó csapatának (Fabric CAT) mintakódját is alkalmazhatja a leképezési adatfolyamok Spark-kódmá alakításához. További információ: Adatfolyamok hozzárendelése a Microsoft Fabrichez.

A Data Factory a Microsoft Fabric ütemtervének részeként a következő előzetes verzión dolgozik a 2. negyedévi CY2024-ig:

  • Az ADF csatlakoztatása a Hálóban – Ezzel a funkcióval az ügyfelek csatlakoztathatják meglévő ADF-jüket a Microsoft Fabricben. Minden ADF-folyamat működés közben működik, és továbbra is fut az Azure-ban, miközben lehetővé teszi a Fabric megismerését és egy átfogóbb frissítési terv kialakítását.
  • Frissítés ADF-folyamatokról Fabricre – Az ügyfelekkel és a közösséggel együttműködve megtudhatja, hogyan támogathatjuk a legjobban az adatfolyamok ADF-ről Fabricre történő frissítését. Ennek részeként olyan frissítési felületet biztosítunk, amely lehetővé teszi a meglévő adatfolyamok tesztelését a Hálóban az adatfolyamok csatlakoztatásával és frissítésével.

A Power BI-adatfolyam Gen1 migrálása a Fabric 2. generációs adatfolyamára

Az Adatfolyam Gen2 in Fabric számos előnnyel és új lehetőségekkel rendelkezik a Power BI adatfolyamaihoz (Gen1) képest:

  • Nagy léptékű adatbeolvasás ("gyors másolás")
  • Nagy léptékű adatátalakítások (Fabric Lakehouse SQL-motor használatával)
  • További kimeneti célhelyek: Azure SQL DB, Lakehouse, Warehouse, SharePoint, KQL-adatbázisok és egyebek
  • Továbbfejlesztett frissítési előzmények és monitorozási élmény
  • Továbbfejlesztett szerzői és közzétételi funkciók.

Arra ösztönözzük az ügyfeleket, hogy kezdjenek el kipróbálni a Dataflow Gen2-t, vagy hozzon létre meglévő Adatfolyam Gen1-forgatókönyveket, vagy próbálja ki az újakat. A Dataflow Gen2-ről szóló korai visszajelzések segítenek a termék képességeinek fejlesztésében és kifejlődésében.

Néhány lehetőségünk van arra, hogy az ügyfelek újra létrehozhassa a Gen1-adatfolyamokat 2. generációs adatfolyamként:

  • Adatfolyam Gen1-lekérdezéseinek exportálása és importálása az Adatfolyam Gen2-be: Mostantól exportálhatja a lekérdezéseket az Adatfolyamok és az Adatfolyam Gen2 szerzői felületére is, és mentheti őket olyan PQT-fájlokba, amelyeket aztán importálhat az Adatfolyam Gen2-be. További információ: Az exportálási sablon funkció használata.
  • Másolás és beillesztés a Power Queryben: Ha adatfolyam van a Power BI-ban vagy a Power Appsben, másolhatja a lekérdezéseket, és beillesztheti őket az Adatfolyam Gen2 összetevő szerkesztési felületére. Ez a funkció lehetővé teszi az adatfolyam gen2-be való migrálását anélkül, hogy újra kellene írnia a lekérdezéseket. További információ:Meglévő adatfolyamok (Gen1) lekérdezéseinek másolása és beillesztése.

További szempontokért tekintse meg a következő cikket: Az Adatfolyam Gen1 és Gen2 közötti különbségek

Kapcsolódó tartalom