Juni 2020

Dessa funktioner och Azure Databricks plattformsförbättringar släpptes i juni 2020.

Anteckning

Versioner mellandelade. Ditt Azure Databricks kanske inte uppdateras förrän upp till en vecka efter det första utgivningsdatumet.

Databricks Connect stöder nu Databricks Runtime 6.6

Den 26 juni 2020

Databricks Anslut stöder nu Databricks Runtime 6.6.

Databricks Runtime 7.0 ML GA

22 juni 2020

Databricks Runtime 7.0 ML bygger på Databricks Runtime 7.0 och innehåller följande nya funktioner:

  • Python-bibliotek med notebook-omfång och anpassade miljöer som hanteras av conda- och pip-kommandon.
  • Uppdateringar för större Python-paket, inklusive tensorflow, tensorboard, pytorch, xgboost, sparkdl och hyperopt.
  • Nyligen tillagda Python-paket lightgbm, nltk, petastorm och plotly.
  • RStudio Server Öppen källkod v1.2.

Mer information finns i den fullständiga publiceringsinformationen Databricks Runtime 7.0 ML (stöds inte).

Databricks Runtime 7.0 GA, drivs av Apache Spark 3.0

Den 18 juni 2020

Databricks Runtime 7.0 drivs av Apache Spark 3.0 och stöder nu Scala 2.12.

Spark 3.0 innehåller många ytterligare funktioner och förbättringar, inklusive:

  • Anpassningsbar frågekörning, ett flexibelt ramverk för anpassningsbar körning i Spark SQL stöd för ändring av antalet reducerare vid körning.
  • Omdesignade pandas-UDF:er med typtips.
  • Webbgränssnitt för strukturerad direktuppspelning.
  • Bättre kompatibilitet med ANSI SQL standarder.
  • Kopplingstips.

Databricks Runtime 7.0 lägger till:

  • Förbättrad automatisk inläsare för att bearbeta nya datafiler inkrementellt när de anländer till ett molnbloblager under ETL.
  • Förbättrat COPY INTO-kommando för inläsning av data i Delta Lake med idempotenta återförsök.
  • Många förbättringar, biblioteksuppdateringar och felkorrigeringar.

Mer information finns i den fullständiga publiceringsinformationen Databricks Runtime 7.0 (stöds inte).

Databricks Runtime 7.0 for Genomics GA

Den 18 juni 2020

Databricks Runtime 7.0 for Genomics bygger på Databricks Runtime 7.0 och innehåller följande biblioteksändringar:

  • ADAM-biblioteket har uppdaterats från version 0.30.0 till 0.32.0.
  • Biblioteket För Genomics ingår inte i Databricks Runtime 7.0 eftersom det inte finns någon version baserad på Apache Spark 3.0.

Mer information finns i den fullständiga Databricks Runtime 7.0 for Genomics (stöds inte).

Stadieberoende åtkomstkontroller för MLflow-modeller

16–23 juni 2020: Version 3.22

Du kan nu tilldela stegberoende åtkomstkontroller till användare eller grupper, så att de kan hantera MLflow-modeller som registrerats i MLflow Model Registry i mellanlagrings- eller produktionssteget. Vi introducerade två nya behörighetsnivåer, Can Manage Staging Versions (Kan hantera mellanlagringsversioner) och Can Manage Production Versions (Kan hantera produktionsversioner). Användare med dessa behörigheter kan utföra övergångar mellan faser som tillåts för nivån.

Mer information finns i Behörigheter för MLflow-modell.

Notebook-filer stöder nu inaktivering av automatisk rullning

16–23 juni 2020: Version 3.22

När du kör en notebook-cell med skift+returär standardbeteendet för notebook-datorer att automatiskt bläddra till nästa cell om cellen inte visas. Nu kan du inaktivera automatisk bläddring i User Settings IconUser Settings Icon User Inställningar Notebook Inställningar. Om du inaktiverar automatisk rullning flyttas fokus vid skift+retur till nästa cell, men notebook-anteckningsboken bläddrar inte till cellen.

IP-adresser för metaarkiv ändras 30 juni 2020

Den 11 juni 2020

Standardmetaarkivet för Azure Databricks använder Azure Database for MySQL. Alla Azure Database for MySQL IP-Azure Databricks för metaarkiv ändras den 30 juni 2020. Om du har en Azure Databricks-arbetsyta distribuerad i ditt eget virtuella nätverk kan din vägtabell för den distributionen innehålla en IP-adress för Azure Databricks-metaarkivet eller en väg till en brandvägg eller proxyinstallation med en åtkomstlista som innehåller den adressen. Om så är fallet måste du uppdatera dina Azure Databricks-vägtabeller eller brandväggar med nya MySQL-IP-adresser före den 30 juni 2020 för att undvika avbrott. Mer information och hur du söker efter metaarkiv-IP-adresser finns i Uppdatera dina Azure Databricks och brandväggar med nya MySQL IP-adresser.

Support för Internet Explorer 11 upphör 15 augusti

Den 9 juni 2020

I linje med branschtrenderna och för att säkerställa en stabil och konsekvent användarupplevelse för våra kunder avslutar Azure Databricks supporten för Internet Explorer 11 den 15 augusti 2020.

Support för Databricks Runtime 6.2-serien upphör

Den 3 juni 2020

Stöd för Databricks Runtime 6.2, Databricks Runtime 6.2 för Machine Learning och Databricks Runtime 6.2 för Genomics upphörde den 3 juni. Se Supportlivscykel för Databricks Runtime.

Förenkla och kontrollera skapande av kluster med klusterprinciper (allmänt tillgänglig förhandsversion)

2–9 juni 2020: Version 3.21

Klusterprinciper är administratörsdefinierade, återanvändbara klustermallar som tillämpar regler på klusterattribut och därmed ser till att användarna skapar kluster som följer dessa regler. Som administratör Azure Databricks kan du nu skapa klusterprinciper och ge användarna principbehörigheter. På så sätt får du större kontroll över de resurser som skapas, ger användarna den flexibilitet de behöver för att göra sitt arbete och förenklar avsevärt klusterskapandet.

Mer information finns i Hantera klusterprinciper.

SCIM Me-slutpunkten returnerar nu SCIM-kompatibelt svar

2–9 juni 2020: Version 3.21

SCIM Me-slutpunkten returnerar nu samma information som /users/{id} slutpunkten, inklusive information som grupper och rättigheter.

Se SCIM API 2.0 (Jag).

Begränsa åtkomsten till Azure Databricks med IP-åtkomstlistor (allmänt tillgänglig förhandsversion)

Den 1 juni 2020

Azure Databricks arbetsytor kan nu konfigureras så att användarna bara ansluter till tjänsten via befintliga företagsnätverk med en säker perimeter. Azure Databricks kan använda API:et för IP-åtkomstlista för att definiera en uppsättning godkända IP-adresser, inklusive listor över tillåtna och blockerade ip-adresser. All inkommande åtkomst till webbappen och REST API:er kräver att användaren ansluter från en auktoriserad IP-adress, vilket garanterar att arbetsytor inte kan nås från ett offentligt nätverk som ett kafé eller en flygplats om inte användarna använder VPN.

Den här funktionen kräver Azure Databricks Premium Plan.

Mer information finns i IP-åtkomstlistor.