Co je nového v Azure Data Factory
Průběžně Azure Data Factory vylepšená služba. Abyste měli přehled o nejnovějším vývoji, najdete v tomto článku informace o:
- Nejnovější verze
- Známé problémy
- Opravy chyb
- Zastaralé funkce
- Plány změn
Tato stránka se aktualizuje každý měsíc, proto ji pravidelně kontrolujte.
Říjen 2021
| Kategorie služby | Vylepšení služeb | Podrobnosti |
| Data Flow | Azure Data Explorer a Amazon Web Services S3 | Tým Microsoftu pro integraci dat právě vydal dva nové konektory pro mapování toků dat. Pokud používáte Azure Synapse, můžete se teď připojit přímo ke svým kbelíkům AWS S3 pro transformace dat. V Azure Data Factory i Azure Synapse se teď můžete nativně připojit ke svým clusterům Azure Data Explorer v mapování toků dat. Další informace |
| Power Query verze Preview pro všeobecnou dostupnost (GA) | Společnost Microsoft vydala aktivitu Azure Data Factory Power Query kanálu jako obecně dostupnou. Tato nová funkce poskytuje škálovaně škálovaně na více systémů přípravu a zpracování dat pro integrátory občanů v uživatelském rozhraní prohlížeče ADF pro integrované prostředí pro datové inženýry. Funkce Power Query dat v ADF poskytuje výkonnou snadno použitelný kanálovou funkci pro řešení nejsložitější integrace dat a vzorů ETL v jedné službě. Další informace | |
| Nová transformace dat Stringify v mapování toků dat | Mapování toků dat přidává novou transformaci dat s názvem Stringify, která usnadňuje převod složitých datových typů, jako jsou struktury a pole, do řetězcové podoby, kterou je možné odeslat do strukturovaných výstupních cílů. Další informace | |
| Integration Runtime | Azure Data Factory spravované virtuální sítě ve ga | Teď můžete zřídit Azure Integration Runtime jako součást spravovaného Virtual Network a využít privátní koncové body k zabezpečenému připojení k podporovaným úložišťm dat. Datový provoz prochází přes privátní propojení Azure, která poskytují zabezpečené připojení ke zdroji dat. Kromě toho brání exfiltraci dat do veřejného internetu. Další informace |
| Expresní injektáž virtuální sítě pro prostředí SSIS Integration Runtime (Public Preview) | Prostředí SSIS Integration Runtime teď podporuje expresní injektáž virtuální sítě. Další informace: Přehled injektáže virtuální sítě pro prostředí SSIS Integration Runtime Standardní vs. expresní injektáž virtuální sítě pro prostředí SSIS Integration Runtime Expresní injektáž virtuální sítě pro prostředí SSIS Integration Runtime |
|
| Zabezpečení | Azure Key Vault integrace | Vylepšili jsme integraci Azure Key Vault přidáním rozevíracích seznamu pro výběr uživatele pro výběr hodnot tajných kódů v propojené službě, což zvyšuje produktivitu a nevyžaduje, aby uživatelé zadávají tajné kódy, což by mohlo vést k lidské chybě. |
| Podpora spravované identity přiřazené uživatelem v Azure Data Factory | Bezpečnost přihlašovacích údajů je zásadní pro všechny podniky. Proto se tým Azure Data Factory (ADF) zavazuje, aby byl proces vytváření dat pro datové inženýry zabezpečený, ale jednoduchý. S radostí oznamujeme podporu spravované identity přiřazené uživatelem (Preview) ve všech konektorech nebo propojených službách, které podporují ověřování založené Azure Active Directory (Azure AD). Další informace |
Září 2021
| Kategorie služby | Vylepšení služeb | Podrobnosti |
| Kontinuální integrace a průběžné doručování (CI/CD) | Rozšířené možnosti CI/CD | Teď můžete vytvořit novou větev Gitu založenou na jakékoli jiné větvi v Azure Data Factory. Další informace |
| Přesun dat | Amazon Relational Database Service (RDS) pro zdroje Oracle | Konektor zdrojů Amazon RDS for Oracle je teď k dispozici v Azure Data Factory i Azure Synapse. Další informace |
| Amazon RDS pro SQL Server zdroje | Konektor Amazon RDS for SQL Server Sources je teď k dispozici v Azure Data Factory i Azure Synapse. Další informace | |
| Podpora paralelního kopírování z Azure Database for PostgreSQL | Konektor Azure Database for PostgreSQL teď podporuje paralelní operace kopírování. Další informace | |
| Data Flow | Použití Azure Data Lake Storage (ADLS) Gen2 ke spouštění příkazů před zpracováním a po zpracování | Příkazy pro systém souborů DFS (Distributed File System) a po zpracování systému Hadoop (HDFS) je teď možné provádět pomocí ADLS Gen2 jímek v tocích dat. Další informace |
| Úprava vlastností toku dat pro existující instance Azure Integration Runtime (IR) | Aktualizace Azure Integration Runtime (IR) umožňující úpravy vlastností toku dat pro stávající ir. Teď můžete upravit výpočetní vlastnosti toku dat bez nutnosti vytvářet nové Azure IR. Další informace | |
| Nastavení hodnoty TTL pro Azure Synapse ke zlepšení doby spuštění aktivit kanálu | Azure Synapse Analytics se do služby Azure Integration Runtime hodnota TTL, aby se aktivity kanálu toku dat začaly v řádu sekund zahajovat, a tím se modul runtime kanálů toku dat velmi minimalizuje. Další informace | |
| Integration Runtime | Azure Data Factory spravované virtuální sítě ve ga | Teď můžete zřídit Azure Integration Runtime jako součást spravovaného Virtual Network a využít privátní koncové body k zabezpečenému připojení k podporovaným úložišťm dat. Datový provoz prochází přes privátní propojení Azure, která poskytují zabezpečené připojení ke zdroji dat. Kromě toho brání exfiltraci dat do veřejného internetu. Další informace |
| Orchestrace | Zprovoznit a poskytnout sla pro datové Pipelines | Nová metrika Uplynulý čas spuštění kanálu v kombinaci s upozorněními Data Factory umožňuje vývojářům datových kanálů lépe dodávat smlouvy SLA zákazníkům a vy nám řeknete, jak dlouho má kanál běžet, a my vás proaktivně upozorníme, když kanál běží déle, než se čekalo. Další informace |
| Aktivita selhání (Public Preview) | Nová aktivita Fail umožňuje z jakéhokoli důvodu záměrně vyvolat chybu v kanálu. Aktivitu Fail můžete použít například v případě, že aktivita Vyhledávání nevrátí žádná odpovídající data nebo pokud se vlastní aktivita dokončí s vnitřní chybou. Další informace |
Srpen 2021
| Kategorie služby | Vylepšení služeb | Podrobnosti |
| Kontinuální integrace a průběžné doručování (CI/CD) | Vylepšení CI/C/GITHUB v Azure Government a Azure China | Přidali jsme podporu pro GitHub v Azure pro státní správu USA a Azure China. Další informace |
| Pohyb dat | rozhraní API Azure Cosmos DB pro konektor MongoDB podporuje verzi 3,6 & 4,0 v Azure Data Factory | rozhraní API služby Azure Data Factory Cosmos DB pro konektor MongoDB nyní podporuje server verze 3,6 & 4,0. Další informace |
| Vylepšení použití příkazu COPY k načtení dat do služby Azure synapse Analytics | Azure Data Factory konektor Azure synapse Analytics teď podporuje připravené kopírování a kopírování ze zdrojového kódu *.* jako wildcardFilename pro příkaz COPY. Další informace | |
| Data Flow | Koncové body REST jsou k dispozici jako zdroj a jímka v datech Flow | Toky dat v Azure Data Factory a Azure synapse Analytics nyní podporují koncové body REST jako zdroj i jímku s úplnou podporou pro datové části JSON a XML. Další informace |
| Integration Runtime | Diagnostický nástroj je k dispozici pro místní prostředí Integration runtime | Diagnostický nástroj pro místní prostředí Integration runtime je navržený tak, aby poskytoval lepší uživatelské prostředí a pomohla uživatelům najít potenciální problémy. Nástroj spouští řadu testovacích scénářů v místním počítači prostředí Integration runtime a každý scénář má typické případy kontroly stavu pro běžné problémy. Další informace |
| Orchestrace | Vlastní aktivační událost události s možností pokročilého filtrování je GA. | Nyní můžete vytvořit Trigger, který reaguje na vlastní téma publikované na Event Grid. Kromě toho můžete využít rozšířené filtrování a získat jemně kontrolu nad tím, na které události reagovat. Další informace |
Červenec 2021
| Kategorie služby | Vylepšení služby | Podrobnosti |
| Pohyb dat | Získání kanálů pro příjem dat řízených metadaty v nástroji ADF Kopírování dat do 10 minut (Public Preview) | Pomocí tohoto postupu můžete vytvořit rozsáhlé kanály pro kopírování dat s přístupem založenými na metadatech na nástroj pro kopírování dat (Public Preview) do 10 minut. Další informace |
| Data Flow | Nové funkce mapy přidané v transformačních funkcích toku dat | Přidali jsme novou sadu transformačních funkcí toku dat, aby umožnili datovým technikům snadno generovat, číst a aktualizovat datové typy map a komplexní struktury map. Další informace |
| Integration Runtime | 5 nových oblastí dostupných v Azure Data Factory spravované virtuální síti (Public Preview) | Tyto 5 nových oblastí (Čína – východ 2, Čína North2, US Gov – Arizona, US Gov – Texas, US Gov – Virginie) jsou k dispozici v Azure Data Factory spravované virtuální síti (Public Preview). Další informace |
| Produktivita vývojářů | Vylepšení domovské stránky ADF | Data Factory domovskou stránku jsme převedli s lepšími možnostmi kontrastu a přetečení. Kromě toho jsme na domovské stránce zavedli několik oddílů, které vám pomůžou zlepšit produktivitu vaší cesty pro integraci dat. Další informace |
| Nová cílová stránka pro Azure Data Factory Studio | Úvodní stránka Data Factory v Azure Portal. Další informace |
Červeně 2021
| Kategorie služby | Vylepšení služby | Podrobnosti |
| Pohyb dat | Nové uživatelské prostředí pomocí nástroje Azure Data Factory Kopírování dat | Nově navržený Kopírování dat nástroj je teď k dispozici s vylepšeným prostředím pro přijímání dat. Další informace |
| MongoDB a MongoDB Atlas se podporují jako zdroj i jímka. | Toto vylepšení podporuje kopírování dat mezi všemi podporovanými úložišti dat a databází MongoDB nebo MongoDB Atlas. Další informace | |
| Always Encrypted se podporuje pro Azure SQL Database, spravovanou instanci Azure SQL a konektory SQL Server jako zdroj i jímka. | Always Encrypted je k dispozici v Azure Data Factory pro Azure SQL Database, spravované Instance Azure SQL a SQL Server konektory pro aktivitu kopírování. Další informace | |
| Nastavení vlastních metadat se podporuje v aktivitě kopírování při zajímky do ADLS Gen2 nebo Azure blobu. | Při zápisu do ADLS Gen2 nebo objektu blob Azure podporuje aktivita kopírování nastavení vlastní metadata nebo úložiště informací o poslední změně zdrojového souboru jako metadata. Další informace | |
| Data Flow | SQL Server se teď podporují jako zdroj a jímka v datových tocích. | SQL Server se teď podporuje jako zdroj a jímka v datových tocích. postupujte podle pokynů, jak nakonfigurovat síť pomocí funkce Azure Integration Runtime spravované virtuální sítě, abyste se mohli spojit s SQL Server místních a cloudových instancí založených na virtuálních počítačích. Další informace |
| Rychlé opakované použití clusteru toku dat je teď ve výchozím nastavení povolené pro všechny nové prostředí Azure Integration runtime. | ADF má za to, že oznamuje obecnou dostupnost oblíbeného opakovaného opětovného spuštění funkce pro rychlé zprovoznění toku dat. Všechny nové prostředí Azure Integration runtime teď budou mít ve výchozím nastavení povolené rychlé opakované použití. Další informace | |
| Aktivita Power Query (Public Preview) | Nyní můžete vytvářet složitá mapování polí pro Power Query jímka pomocí Azure Data Factory dat tahání. Jímka je teď nakonfigurovaná v kanálu v aktivitě Power Query (Public Preview), aby se mohla přizpůsobit této aktualizaci. Další informace | |
| Aktualizované uživatelské rozhraní pro monitorování toků dat v Azure Data Factory | Azure Data Factory má pro rozhraní monitorování novou aktualizaci, která usnadňuje zobrazení úloh ETL toku dat a rychlé identifikaci oblastí pro vyladění výkonu. Další informace | |
| SQL Server Integration Services (SSIS) | spouštějte jakékoli SQL kdekoli ve třech jednoduchých krocích pomocí SSIS v Azure Data Factory | tento příspěvek poskytuje 3 jednoduché kroky pro spuštění libovolných SQL příkazů nebo skriptů kdekoli s SSIS v Azure Data Factory.
|