Wat is er nieuw in Azure Data Factory

De Azure Data Factory-service wordt voortdurend verbeterd. Om u op de hoogte te houden van de nieuwste ontwikkelingen, biedt dit artikel u informatie over:

  • De nieuwste releases
  • Bekende problemen
  • Opgeloste fouten
  • Afgeschafte functionaliteit
  • Plannen voor wijzigingen

Deze pagina wordt maandelijks bijgewerkt, dus keer deze regelmatig opnieuw.

Oktober 2021


ServicecategorieServiceverbeteringenDetails
GegevensstroomAzure Data Explorer en Amazon Web Services S3-connectorsHet Microsoft Data Integration-team heeft zojuist twee nieuwe connectors uitgebracht voor het toewijzen van gegevensstromen. Als u een Azure Synapse, kunt u nu rechtstreeks verbinding maken met uw AWS S3-buckets voor gegevenstransformaties. In zowel Azure Data Factory als Azure Synapse kunt u nu systeemeigen verbinding maken met uw Azure Data Explorer clusters in toewijzingsgegevensstromen.
Meer informatie
Power Query activiteit laat preview voor algemene beschikbaarheid (GA)Microsoft heeft de Azure Data Factory Power Query pijplijnactiviteit uitgebracht als Algemeen beschikbaar. Deze nieuwe functie biedt geschaalde gegevensvoorbereiding en data-wrangling voor integrators in de ADF-browser voor een geïntegreerde ervaring voor data engineers. De functie Power Query data-wrangling in ADF biedt een krachtige eenvoudig te gebruiken pijplijn om uw meest complexe gegevensintegratie en ETL-patronen in één service op te lossen.
Meer informatie
Nieuwe Stringify-gegevenstransformatie in toewijzingsgegevensstromenToewijzingsgegevensstromen voegt een nieuwe gegevenstransformatie toe met de naam Stringify, zodat complexe gegevenstypen, zoals structs en matrices, eenvoudig kunnen worden omgezet in tekenreeksformulieren die kunnen worden verzonden naar gestructureerde uitvoerbestemmingen.
Meer informatie
Integration Runtime Azure Data Factory managed vNet gaat ga U kunt de Azure Integration Runtime nu inrichten als onderdeel van een beheerde Virtual Network en gebruikmaken van privé-eindpunten om veilig verbinding te maken met ondersteunde gegevensopslag. Gegevensverkeer verloopt via privékoppelingen van Azure die beveiligde connectiviteit met de gegevensbron bieden. Bovendien wordt hiermee gegevens exfiltratie naar het openbare internet voorkomen.
Meer informatie
Express VNet-injectie voor SSIS-integratieruntime (openbare preview) De SSIS-integratieruntime ondersteunt nu express-VNet-injectie.
Meer informatie:
Overzicht van VNet-injectie voor SSIS-integratieruntime
Standaard- versus express-VNet-injectie voor SSIS-integratieruntime
Express-VNet-injectie voor SSIS-integratieruntime
BeveiligingAzure Key Vault integratie verbeterenWe hebben de integratie Azure Key Vault verbeterd door vervolgkeuzen toe te voegen die door de gebruiker kunnen worden geselecteerd om de geheime waarden in de gekoppelde service te selecteren, waardoor de productiviteit toeneemt en gebruikers de geheimen niet moeten typen, wat kan leiden tot menselijke fouten.
Ondersteuning voor door de gebruiker toegewezen beheerde identiteit in Azure Data FactoryDe veiligheid van referenties is van cruciaal belang voor elke onderneming. Daarom zet het ADF-team (Azure Data Factory) zich in om het data engineering voor data engineers veilig en eenvoudig te maken. Met trots kondigen we de ondersteuning aan voor door de gebruiker toegewezen beheerde identiteit (preview) in alle connectors/gekoppelde services die ondersteuning bieden voor verificatie op basis van Azure Active Directory (Azure AD).
Meer informatie

September 2021


ServicecategorieServiceverbeteringenDetails
Continue integratie en levering (CI/CD)Uitgebreide CI/CD-mogelijkhedenU kunt nu een nieuwe Git-vertakking maken op basis van een andere vertakking in Azure Data Factory.
Meer informatie
Gegevens verplaatsenAmazon Relational Database Service (RDS) voor Oracle-bronnenDe Amazon RDS voor Oracle-bronnen-connector is nu beschikbaar in Azure Data Factory en Azure Synapse.
Meer informatie
Amazon RDS voor SQL Server bronnenDe Amazon RDS for SQL Server sources-connector is nu beschikbaar in Azure Data Factory en Azure Synapse.
Meer informatie
Ondersteuning voor parallel kopiëren van Azure Database for PostgreSQLDe Azure Database for PostgreSQL-connector ondersteunt nu parallelle kopieerbewerkingen.
Meer informatie
GegevensstroomAzure Data Lake Storage (ADLS) Gen2 gebruiken om pre- en post-processing-opdrachten uit te voerenHadoop Distributed File System (HDFS) pre- en post-processing-opdrachten kunnen nu worden uitgevoerd met behulp ADLS Gen2 sinks in gegevensstromen
Meer informatie
Eigenschappen van de gegevensstroom bewerken voor bestaande exemplaren van de Azure Integration Runtime (IR)De Azure Integration Runtime (IR) is bijgewerkt om het bewerken van gegevensstroomeigenschappen voor bestaande IR's mogelijk te maken. U kunt nu de rekeneigenschappen van de gegevensstroom wijzigen zonder dat u een nieuwe Azure IR.
Meer informatie
TTL-instelling voor Azure Synapse uitvoering van pijplijnactiviteiten verbeteren opstarttijdAzure Synapse Analytics heeft TTL toegevoegd aan de Azure Integration Runtime zodat uw gegevensstroompijplijnactiviteiten binnen enkele seconden kunnen worden uitgevoerd. Dit minimaliseert de runtime van uw gegevensstroompijplijnen.
Meer informatie
Integration RuntimeAzure Data Factory managed vNet gaat gaU kunt de Azure Integration Runtime nu inrichten als onderdeel van een beheerde Virtual Network en gebruikmaken van privé-eindpunten om veilig verbinding te maken met ondersteunde gegevensopslag. Gegevensverkeer verloopt via privékoppelingen van Azure die beveiligde connectiviteit met de gegevensbron bieden. Bovendien wordt hiermee gegevens exfiltratie naar het openbare internet voorkomen.
Meer informatie
OrchestrationEen SLA voor gegevenspijplijnen operationeel maken en biedenDe nieuwe metrische gegevens voor het uitvoeren van een verstreken tijdpijplijn, gecombineerd met Data Factory-waarschuwingen, stellen ontwikkelaars van gegevenspijplijnen in staat sla's beter te leveren aan hun klanten. U vertelt ons hoe lang een pijplijn moet worden uitgevoerd. We stellen u proactief op de hoogte wanneer de pijplijn langer wordt uitgevoerd dan verwacht.
Meer informatie
Activiteit Mislukt (openbare preview)Met de nieuwe activiteit Fail kunt u om een of andere reden opzettelijk een fout in een pijplijn gooien. U kunt bijvoorbeeld de activiteit Fail gebruiken als een opzoekactiviteit geen overeenkomende gegevens retourneert of als een aangepaste activiteit eindigt met een interne fout.
Meer informatie

Augustus 2021


ServicecategorieServiceverbeteringenDetails
Continue integratie en levering (CI/CD)CICD Verbeteringen met GitHub ondersteuning in Azure Government en Azure ChinaWe hebben ondersteuning toegevoegd voor GitHub in Azure voor de Amerikaanse overheid en Azure China.
Meer informatie
Gegevens verplaatsenAzure Cosmos DB API voor MongoDB-connector ondersteunt versie 3.6 & 4.0 in Azure Data FactoryAzure Data Factory Cosmos DB API voor MongoDB-connector ondersteunt nu serverversie 3.6 & 4.0.
Meer informatie
Verbeteren met behulp van de COPY-instructie voor het laden van gegevens in Azure Synapse AnalyticsDe Azure Data Factory Azure Synapse Analytics-connector ondersteunt nu gefaseerd kopiëren en kopiëren van bron met *.* als jokertekenBestandsnaam voor COPY-instructie.
Meer informatie
GegevensstroomREST-eindpunten zijn beschikbaar als bron en sink in Data FlowGegevensstromen in Azure Data Factory en Azure Synapse Analytics ondersteunen nu REST-eindpunten als bron en sink met volledige ondersteuning voor JSON- en XML-nettoladingen.
Meer informatie
Integration RuntimeDiagnostisch hulpprogramma is beschikbaar voor zelf-hostende Integration RuntimeEen diagnostisch hulpprogramma voor zelf-hostende Integration Runtime is ontworpen voor een betere gebruikerservaring en helpt gebruikers bij het vinden van mogelijke problemen. Het hulpprogramma voert een reeks testscenario's uit op de zelf-hostende Integration Runtime-machine en elk scenario heeft typische statuscontrolecases voor veelvoorkomende problemen.
Meer informatie
OrchestrationAangepaste gebeurtenistrigger met geavanceerde filteroptie is gaU kunt nu een trigger maken die reageert op een aangepast onderwerp dat is gepost Event Grid. Daarnaast kunt u geavanceerde filters gebruiken om een fijner controle te krijgen over welke gebeurtenissen moeten worden gereageerd.
Meer informatie

Juli 2021


ServicecategorieServiceverbeteringenDetails
Gegevens verplaatsenPijplijnen voor opname van metagegevensgestuurde gegevens in ADF Gegevens kopiëren-hulpprogramma binnen 10 minuten (openbare preview)Hiermee kunt u binnen tien minuten grootschalige pijplijnen voor het kopiëren van gegevens bouwen met een op metagegevens gebaseerde benadering voor het hulpprogramma voor het kopiëren van gegevens (openbare preview).
Meer informatie
GegevensstroomNieuwe kaartfuncties toegevoegd aan gegevensstroomtransformatiefunctiesEr is een nieuwe set transformatiefuncties voor gegevensstromen toegevoegd waarmee data engineers eenvoudig kaartgegevenstypen en complexe kaartstructuren kunnen genereren, lezen en bijwerken.
Meer informatie
Integration Runtime5 nieuwe regio's beschikbaar in Azure Data Factory beheerde VNET (openbare preview)Deze vijf nieuwe regio's (China - oost 2, China - noord2, US Gov - Arizona, US Gov - Texas, US Gov - Virginia) zijn beschikbaar in Azure Data Factory beheerd virtueel netwerk (openbare preview).
Meer informatie
Productiviteit van ontwikkelaarsVerbeteringen aan de ADF-startpaginaDe Data Factory startpagina is opnieuw ontworpen met betere contrast- en omloopmogelijkheden. Daarnaast zijn er een aantal secties op de startpagina geïntroduceerd om u te helpen de productiviteit in uw gegevensintegratietraject te verbeteren.
Meer informatie
Nieuwe landingspagina voor Azure Data Factory StudioDe landingspagina voor Data Factory blade in de Azure Portal.
Meer informatie

Juni 2021


ServicecategorieServiceverbeteringenDetails
Gegevens verplaatsenNieuwe gebruikerservaring met Azure Data Factory Gegevens kopiëren ToolHet opnieuw Gegevens kopiëren hulpprogramma is nu beschikbaar met een verbeterde ervaring voor gegevensingestie.
Meer informatie
MongoDB en MongoDB Atlas worden ondersteund als bron en sinkDeze verbetering ondersteunt het kopiëren van gegevens tussen ondersteunde gegevensopslag en MongoDB- of MongoDB Atlas-database.
Meer informatie
Always Encrypted wordt ondersteund voor Azure SQL Database, Azure SQL Managed Instance en SQL Server-connectors als bron en sinkAlways Encrypted is beschikbaar in Azure Data Factory voor Azure SQL Database, Azure SQL Managed Instance en SQL Server-connectors voor kopieeractiviteit.
Meer informatie
Het instellen van aangepaste metagegevens wordt ondersteund in de kopieeractiviteit bij het sinken naar ADLS Gen2 of Azure BlobBij het schrijven naar ADLS Gen2 of Azure Blob ondersteunt de kopieeractiviteit het instellen van aangepaste metagegevens of opslag van de laatst gewijzigde gegevens van het bronbestand als metagegevens.
Meer informatie
GegevensstroomSQL Server wordt nu ondersteund als bron en sink in gegevensstromenSQL Server wordt nu ondersteund als een bron en sink in gegevensstromen. Volg de koppeling voor instructies over het configureren van uw netwerken met behulp van de functie Azure Integration Runtime managed VNET om te praten met uw SQL Server on-premises en cloud-VM-instanties.
Meer informatie
Snel hergebruik van gegevensstroomcluster is nu standaard ingeschakeld voor alle nieuwe Azure Integration RuntimesADF kondigt met trots de algemene beschikbaarheid aan van de populaire functie voor snel opnieuw starten van gegevensstromen. Voor alle nieuwe Azure Integration Runtimes is nu standaard snel opnieuw gebruiken ingeschakeld.
Meer informatie
Power Query activiteit (openbare preview)U kunt nu complexe veldtoewijzingen bouwen voor uw Power Query sink met behulp Azure Data Factory data-wrangling. De sink is nu geconfigureerd in de pijplijn in de activiteit Power Query (openbare preview) om deze update mogelijk te maken.
Meer informatie
Bijgewerkte gebruikersinterface voor bewaking van gegevensstromen in Azure Data FactoryAzure Data Factory een nieuwe update voor de bewakingsinterface om het gemakkelijker te maken om de ETL-taakuitvoeringen van uw gegevensstroom weer te geven en snel gebieden te identificeren voor het afstemmen van de prestaties.
Meer informatie
SQL Server Integration Services (SSIS)Voer elke SQL in drie eenvoudige stappen uit met SSIS in Azure Data FactoryDit bericht bevat drie eenvoudige stappen voor het uitvoeren van SQL instructies/scripts overal met SSIS in Azure Data Factory.
  1. Bereid uw Self-Hosted Integration Runtime/SSIS Integration Runtime.
  2. Bereid een activiteit SSIS-pakket uitvoeren in Azure Data Factory pijplijn voor.
  3. Voer de activiteit SSIS-pakket uitvoeren uit op uw Self-Hosted Integration Runtime/SSIS Integration Runtime.
Meer informatie

Meer informatie