Februari 2020

Deze functies en verbeteringen in het Azure Databricks-platform zijn uitgebracht in februari 2020.

Notitie

Releases worden gefaseerd. Uw Azure Databricks-account kan pas een week na de eerste releasedatum worden bijgewerkt.

Algemene beschikbaarheid van Databricks Runtime 6.4 voor Genomics

26 februari 2020

Databricks Runtime 6.4 voor Genomics is gebouwd op databricks Runtime 6.4. Het bevat veel verbeteringen en upgrades van Databricks Runtime 6.3 voor Genomics.

De belangrijkste functies zijn:

• U kunt nu DNASeq Pipeline-gebruikers aanpassen om een legitieme combinatie van de leesuitlijning, variantaanroepen en fasen van variantaantekening selectief uit te schakelen. Gebruikers kunnen ook uitlijning met één eindbewerking uitvoeren.
• De versie van Glow die is opgenomen in Databricks Runtime 6.4 voor Genomics biedt nu Python- en Scala-API's voor functies die eerder alleen beschikbaar zijn via SQL-expressies. Deze functies zijn beschikbaar voor DataFrame-bewerkingen, waardoor de compilatietijd veilig is.

Algemene beschikbaarheid van Databricks Runtime 6.4 ML

26 februari 2020

Databricks Runtime 6.4 ML GA brengt bibliotheekupgrades, waaronder:

• PyTorch: 1.3.1 tot 1.4.0
• Horovod: 0.18.2 tot 1.19.0

Zie de volledige releaseopmerkingen voor Databricks Runtime 6.4 voor ML (niet-ondersteund).

Algemene beschikbaarheid van Databricks Runtime 6.4

26 februari 2020

Databricks Runtime 6.4 GA biedt nieuwe functies, verbeteringen en veel bugfixes.

• Nieuwe gegevensbestanden incrementeel verwerken met automatisch laden (openbare preview). Auto Loader biedt u een efficiëntere manier om nieuwe gegevensbestanden incrementeel te verwerken wanneer ze binnenkomen in een cloud-blobarchief tijdens ETL. Dit is een verbetering ten opzichte van gestructureerd streamen op basis van bestanden, waarmee nieuwe bestanden worden geïdentificeerd door herhaaldelijk de cloudmap weer te geven en de bestanden bij te houden die zijn gezien en die zeer inefficiënt kunnen zijn naarmate de map groeit.
• Gegevens laden in Delta Lake met idempotente nieuwe pogingen (openbare preview). Met de COPY INTO SQL-opdracht kunt u gegevens laden in Delta Lake met idempotente nieuwe pogingen (openbare preview). Als u gegevens vandaag wilt laden in Delta Lake, moet u Apache Spark DataFrame-API's gebruiken. Als er fouten optreden tijdens het laden, moet u ze effectief afhandelen.
• Metrische gegevens over bewerkingen voor alle schrijfbewerkingen, updates en verwijderingen in een Delta-tabel worden nu weergegeven in de tabelgeschiedenis.
• Inline Matplotlib-afbeeldingen zijn nu standaard ingeschakeld in Azure Databricks-notebooks (openbare preview).

Zie de volledige releaseopmerkingen voor Databricks Runtime 6.4 (niet-ondersteund).

Nieuwe interactieve grafieken bieden uitgebreide interacties aan de clientzijde

25 februari - 3 maart 2019: versie 3.14

In deze release worden twee nieuwe interactieve grafiektypen geïntroduceerd die de implementaties van staaf- en lijndiagrammen vervangen. Naast de bestaande grafiekfunctionaliteit heeft het lijndiagram een aantal nieuwe aangepaste plotopties: het instellen van een bereik van een Y-as, het weergeven of verbergen van markeringen en het toepassen van logboekschaal op de Y-as. Beide grafieken hebben een ingebouwde werkbalk die ondersteuning biedt voor een uitgebreide set interacties aan de clientzijde.

Als u de bestaande grafiek-implementaties wilt gebruiken, kunt u deze selecteren in de vervolgkeuzelijst Verouderde grafieken . Bestaande grafieken blijven de eerder beschikbare implementaties gebruiken.

Nieuw gegevensopnamenetwerk voegt partnerintegraties toe met Delta Lake (openbare preview)

24 februari 2020

U kunt nu eenvoudig uw 'lakehouse' vullen, uw data lake met de soorten gegevensstructuren en functies voor gegevensbeheer die u doorgaans krijgt met een datawarehouse, van honderden gegevensbronnen in Delta Lake. Het hart van dit netwerk is de nieuwe galerie partnerintegraties, toegankelijk vanuit uw werkruimte en biedt toegang tot een groot netwerk van gegevensbronnen via onze partners Fivetran, Qlik, Infoworks, StreamSets en Syncsort.

Zie onze blog voor een overzicht. Zie Technologiepartners voor meer informatie.

Werkruimtemaker automatisch toegevoegd als een Azure Databricks-beheerder

24 februari 2020

Vóór 24 februari 2020 zou de gebruiker die een Azure Databricks-werkruimte heeft gemaakt, alleen worden toegevoegd als beheerder voor de werkruimte als ze ook op de knop Werkruimte starten in de Azure-portal heeft geklikt of als beheerder is toegevoegd door een gebruiker die al een beheerder in de werkruimte was (een Azure-inzender voor het abonnement waarop de knop Werkruimte starten heeft geklikt, zou worden gemaakt als beheerdergebruiker in de werkruimte). De gebruiker die de werkruimte maakt, wordt nu automatisch toegevoegd als werkruimtebeheerder.

Zie Uw abonnement beheren voor meer informatie over het maken en starten van werkruimten

Markeringen om werkruimtebeveiliging en notebookfuncties te beheren nu beschikbaar

4-11 februari 2020: versie 3.12

In deze release worden nieuwe vlaggen geïntroduceerd voor het beheren van de beveiligingsheaders die worden verzonden om aanvallen op uw werkruimte te voorkomen, evenals toegang tot downloads van notebookresultaten en Git-versiebeheer. Al deze beheeropties zijn standaard ingeschakeld.