Januari 2024

  • Artikel

Dessa funktioner och förbättringar av Azure Databricks-plattformen släpptes i januari 2024.

Kommentar

Versioner mellanlagras. Ditt Azure Databricks-konto kanske inte uppdateras förrän en vecka eller mer efter det första lanseringsdatumet.

Stöd för internt XML-filformat (offentlig förhandsversion)

den 31 januari 2024

Stöd för internt XML-filformat finns nu i offentlig förhandsversion. Stöd för XML-filformat möjliggör inmatning, frågor och parsning av XML-data för batchbearbetning eller strömning. Den kan automatiskt härleda och utveckla schema- och datatyper, stöder SQL-uttryck som from_xmloch kan generera XML-dokument. Det kräver inte externa jars och fungerar sömlöst med Auto Loader, read_files, COPY INTOoch Delta Live Tables. Mer information finns i Läsa och skriva XML-filer.

Dela AI-modeller med Databricks Marketplace (offentlig förhandsversion)

den 31 januari 2024

Nu kan du använda Marketplace för att dela modeller som är registrerade i Unity Catalog. Både provider- och konsumentarbetsytor måste vara aktiverade för att Unity Catalog ska kunna delta i modelldelning.

Se Vad är Databricks Marketplace? och Lägg till modeller i en resurs.

Uppdateringar till regler för nätverkssäkerhetsgrupp

den 31 januari 2023

För att förbättra plattformens skalbarhet kräver Azure Databricks-kontrollplanet nu nya slutpunkter för det klassiska dataplanet att ansluta till. För arbetsytor som distribueras i ditt eget virtuella Azure-nätverk läggs nu nätverksportarna 3306 och 8443-8451 till i den befintliga säkerhetsregeln till AzureDatabricks målet, vilket tvingar utgående trafik på port 443.

Mer information finns i Regler för nätverkssäkerhetsgrupp.

Uppdatering av arbetsytesökväg

Tidigare var användarna skyldiga att inkludera /Workspace sökvägsprefixet för vissa Databricks-API:er (%sh) men inte för andra (%runREST API-indata). Nu kan användarna tillhandahålla arbetsytesökvägar med prefixet /Workspace överallt i Databricks. Gamla referenser till sökvägar utan /Workspace prefixet omdirigeras och fortsätter att fungera. Databricks rekommenderar att alla arbetsytesökvägar använder prefixet /Workspace för att skilja dem från volym- och DBFS-sökvägar.

Stöd för Azure Storage-brandväggen från serverlös beräkning är ALLMÄNT

den 30 januari 2024

Stöd för Azure Storage-brandväggen från serverlös Beräkning i Azure Databricks är GA. Du kan framtvinga att serverlösa SQL-lager använder stabila undernäts-ID:t för att ansluta till Azure Storage och tillåtalistning av dessa identifierare i azure-resursbrandväggen. Se Konfigurera en brandvägg för serverlös beräkningsåtkomst.

Effektiviserat skapande av Azure Databricks-jobb

den 29 januari 2024

Ett tomt jobb skapas nu omedelbart när du klickar på knappen för att skapa ett jobb, så att du kan redigera inställningar på jobbnivå, till exempel taggar, schema eller meddelandeinställningar innan du lägger till den första aktiviteten. Tidigare var du tvungen att skapa den första uppgiften innan du fick åtkomst till inställningar på jobbnivå. Se Skapa och köra Azure Databricks-jobb.

Övervaka GPU-modell som betjänar arbetsbelastningar med hjälp av slutsatsdragningstabeller

den 29 januari 2024

Nu kan du övervaka din GPU-modell som hanterar arbetsbelastningar med hjälp av slutsatsdragningstabeller. Se Slutsatsdragningstabeller för övervakning och felsökning av modeller.

URI-sökvägsbaserad åtkomst till externa volymer i Unity Catalog

den 25 januari 2024

Nu kan du använda URI:er för molnlagring för sökvägsbaserad åtkomst till data som styrs av Unity Catalog som lagras i externa volymer. Se Vilken sökväg används för att komma åt filer i en volym?.

Åtkomstkontrollistor kan aktiveras på uppgraderade arbetsytor

den 24 januari 2024

Inställningar för åtkomstkontroll aktiverades på alla Premium-planarbetsytor i november 2023.

För arbetsytor som uppgraderar från Standard-planen till Premium-planen inaktiveras inställningar för åtkomstkontroll som standard. Arbetsyteadministratörer kan nu aktivera följande inställningar för åtkomstkontroll på uppgraderade arbetsytor:

  • Åtkomstkontroll för arbetsyta: Gör det möjligt för användare att konfigurera behörigheter för arbetsyteobjekt.
  • Åtkomstkontroll för kluster, pooler, jobb: Gör det möjligt för användare att konfigurera behörigheter för kluster, pooler och jobb.
  • Synlighetskontroll för kluster: Förhindrar att kluster visas för användare som inte har behörighet för dem.
  • Synlighetskontroll för jobb: Förhindrar att jobb visas för användare som inte har behörighet för dem.
  • Inställning för synlighetskontroll för arbetsyta: Förhindrar att notebook-filer och mappar visas för användare som inte har behörighet för dem.

När en inställning för åtkomstkontroll har aktiverats kan den inte inaktiveras. Mer information finns i Åtkomstkontrollistor.

Systemtabellen för Marketplace-listningshändelser är nu tillgänglig (offentlig förhandsversion)

den 24 januari 2024>

Systemschemat för Marketplace innehåller nu en tabell med tratthändelser (system.marketplace.listing_funnel_events) där du kan övervaka konsumentåtgärder i dina listor. Se Tabellen Visa tratthändelser.

Uppdaterat användargränssnitt för notebook-celler (offentlig förhandsversion)

den 24 januari 2024

Det finns en uppdaterad design för notebook-celler. Om du vill aktivera den nya celldesignen öppnar du sidan redigeringsinställningar på arbetsytan. I sidofältet klickar du på Utvecklare. Växla Nytt cellgränssnitt under Experimentella funktioner. Mer information om hur du arbetar med notebook-celler i både det ursprungliga och det nya användargränssnittet finns i Databricks Notebooks: orientering till det nya cellgränssnittet.

Snabbkorrigeringshjälp med syntaxfel i notebook-filen

den 24 januari 2024

Du kan få hjälp från Databricks Assistant för syntaxfel med hjälp av Snabbkorrigering. Mer information finns i Möjliga åtgärder för syntaxfel och varningar.

Databricks Runtime 14.3 LTS (Beta)

den 22 januari 2024

Databricks Runtime 14.3 LTS och Databricks Runtime 14.3 LTS ML är nu tillgängliga som betaversioner.

Se Databricks Runtime 14.3 LTS och Databricks Runtime 14.3 LTS för Machine Learning.

Dela AI-modeller med deltadelning (offentlig förhandsversion)

den 19 januari 2024

Nu kan du använda Deltadelning för att dela modeller som är registrerade i Unity Catalog. Både providern och mottagararbetsytorna måste vara aktiverade för att Unity Catalog ska kunna dela modeller.

Se Lägga till modeller i en resurs.

Databricks Marketplace stöder volymdelning

den 18 januari 2023

Databricks Marketplace ger dig nu åtkomst till volymer (icke-tabelldata) så länge du har en Unity Catalog-aktiverad Databricks-arbetsyta. Volymer är Unity Catalog-objekt som representerar en logisk lagringsvolym på en lagringsplats för molnobjekt, och de är ett sätt att hantera styrning och delning av datatillgångar som inte är tabellbaserade.

Se Åtkomst till dataprodukter på Databricks Marketplace (Unity Catalog-aktiverade arbetsytor).

Skapa widgetar från Databricks-användargränssnittet

den 18 januari 2024

Nu kan du skapa Databricks-widgetar med hjälp av Databricks-användargränssnittet. Mer information finns i Skapa widget med hjälp av användargränssnittet.

Systemtabellen för lagerhändelser är nu tillgänglig (offentlig förhandsversion)

den 18 januari 2024

Tabellen system.compute.warehouse_events registrerar när SQL-lager startas, stoppas, skalas upp och ned. Du kan använda tabellen för att övervaka och hantera SQL-lager på dina arbetsytor. Se Systemtabellreferens för informationslagerhändelser.

Storleksgränsen för arbetsytans fil är nu 500 MB

den 15 januari 2023

Enskilda arbetsytefiler är nu begränsade till 500 MB. Tidigare var gränsen 200 MB. Mer information finns i Begränsningar.

Meddelande om borttagning av funktioner för äldre Git-integrering i Databricks

den 12 januari 2024

Efter den 31 januari 2024 tar Databricks bort äldre Git-integreringar för notebook-filer. Den här funktionen har varit i äldre status i mer än två år och ett utfasningsmeddelande har visats i produktgränssnittet sedan november 2023.

Mer information om hur du migrerar till Databricks Git-mappar (Repos) finns i Växla till Databricks Repos från äldre Git-integrering. Om borttagningen påverkar dig och du behöver ett tillägg kontaktar du databricks-kontochefen.

Databricks ODBC-drivrutin 2.7.7

den 9 januari 2024

Vi har släppt version 2.7.7 av Databricks ODBC-drivrutinen (ladda ned). Den här versionen lägger till följande nya funktioner och förbättringar:

  • Azure Managed Identity-autentisering.
  • Stöd för asynkrona metadataåtgärder. Servern måste ha stöd SPARK_CLI_SERVICE_PROTOCOL_V9 för och senare.
  • Stöd för parameteriserad fråga i det interna frågeläget. Servern måste ha stöd SPARK_CLI_SERVICE_PROTOCOL_V8 för och senare.
  • OAuth-förbättring: Anslutningsappen kan nu inaktivera tokencachen för det webbläsarbaserade autentiseringsflödet.

Den här versionen löser också följande problem i 2.7.7:

  • Anslutningsappen ignorerar den privata rotcertifikatutfärdare när du använder Windows Trust Store.
  • När en åtgärd misslyckas stänger inte anslutningsappen pulsslagstrådarna.
  • Anslutningsappen stöder inte den valfria uppdateringstoken.
  • När du kör frågor mot tabeller med externa namn kan anslutningsappen inte läsa dem.
  • Om stränglängden för VÄRDEN är mindre än 20 avslutas anslutningsappen oväntat när du använder OAuth-autentisering.

Stöd för Databricks Runtime 13.2-serien upphör

den 6 januari 2024

Stöd för Databricks Runtime 13.2 och Databricks Runtime 13.2 för Machine Learning upphörde den 6 januari. Se Supportlivscykler för Databricks-körning.

AI-hjälpmedelsfunktioner är aktiverade som standard

2-8 januari 2024

AI-hjälpmedelsfunktioner är nu aktiverade som standard för arbetsytor utan att säkerhetsprofilen för efterlevnad har aktiverats. Dessa kan vara:

Administratörer kan välja bort AI-hjälpmedelsfunktioner för alla arbetsytor i sitt konto eller en delmängd av arbetsytor. Se Aktivera eller inaktivera Databricks Assistant.