Viktig information om Databricks Connect

Den här sidan innehåller en lista över versioner och underhållsuppdateringar för Databricks Connect.

Den högre och lägre Databricks Connect-paketversionen måste alltid matcha din Databricks Runtime-version. Vi rekommenderar att du alltid använder den senaste uppdateringen av Databricks Connect för din Databricks Runtime-version. Om du till exempel använder ett Databricks Runtime 7.3-kluster använder du det senaste databricks-connect==7.3.*-paketet.

Databricks Connect för Databricks Runtime 7.3 LTS

Databricks Connect 7.3.6

12 januari 2021

  • [ES-59054] Åtgärda Delta Optimize Table-kommando genom Databricks Connect
  • [ES-53497] Åtgärda Databricks Connect på Databricks Container Services (DCS)

Databricks Connect 7.3.5

9 december 2020

Databricks Connect 7.3 är nu allmänt tillgängligt.

  • [ES-49865] Förhindra 500 interna serverfel på grund av automatisk synkronisering av beroende bibliotek vid användning av Databricks Connect med SBT.

Databricks Connect 7.3.4 (betaversion)

24 november 2020

  • [ES-44382] Ange spark.databricks.service.allowTerminatedClusterStart=false för att förhindra att Databricks Connect startar ett avbrutet Databricks Runtime-kluster.
  • Åtgärda fel där klienten inte kunde synkronisera tillstånd med servern korrekt när INFO-loggningsnivån var inaktiverad.

Databricks Connect 7.3.3 (betaversion)

3 november 2020

Första Databricks Connect-versionen för Databricks Runtime 7.3. I den här versionen ingår:

  • Stöd för genomströmning för autentiseringsuppgifter (Credential Passthrough) med Azure Active Directory. Du kan nu använda genomströmning för autentiseringsuppgifter för Azure Active Directory med standardkluster med hjälp av Databricks Connect. På så sätt kan du autentisera automatiskt till Azure Data Lake Storage Gen1 och Azure Data Lake Storage Gen2 från Databricks Connect med hjälp av samma Azure Active Directory-identitet som du använder för att autentisera till Azure Databricks.

  • Stöd för Delta Lake-tidsresa.

  • Enkel övergång mellan Databricks Connect-klienter och Databricks Runtime-jobb eller notebook-filer när DBUtils används. Se Åtkomst till DBUtils.

Kända problem:

Validering av Databricks Runtime-versionen är inaktiverat i den här betaversionen. Se till att ansluta den här klienten till ett Databricks Runtime 7.3-kluster.

Databricks Connect för Databricks Runtime 7.1

Databricks Connect 7.1.12

12 januari 2021

  • [ES-59054] Åtgärda Delta Optimize Table-kommando genom Databricks Connect
  • [ES-53497] Åtgärda Databricks Connect på Databricks Container Services (DCS)

Databricks Connect 7.1.11

9 december 2020

  • [ES-49865] Förhindra 500 interna serverfel på grund av automatisk synkronisering av beroende bibliotek vid användning av Databricks Connect med SBT.

Databricks Connect 7.1.10

24 november 2020

  • Förhindra att statusavsökningar startar om klustret.
  • [ES-43656] Åtgärda serialiseringsfel relaterade till Azure Data Lake Storage Gen2-stöd.
  • [ES-30594] Tillåt större HTTP-huvuden och förstora buffertar i Databricks Connect.
  • [ES-34186] Undvik loggningsrelaterade minnesundantag.
  • [ES-39493] Förhindra rekursiva inläsningsfel i databricks-connect test.
  • [ES-44382] Ange spark.databricks.service.allowTerminatedClusterStart=false för att förhindra att Databricks Connect ansluter till ett Databricks Runtime-kluster som har avbrutits.
  • Åtgärda ett fel där klienten inte kunde synkronisera tillstånd med servern korrekt när INFO-loggningsnivån var inaktiverad.
  • Mindre korrigeringar.

Databricks Connect 7.1.1

23 september 2020

  • [ES-32536] Åtgärda ett problem med serialisering av kapslade tidszonsmedvetna uttryck.
  • [ES-33705] Stöd för Azure Data Lake Storage Gen2-filsystem i DButils.

Databricks Connect 7.1.0

13 augusti 2020

Första Databricks Connect-versionen för Databricks Runtime 7.1.

  • Stöd för nya DataSource V2-API:er för Spark 3.0.
  • Stöd för att använda flera SparkSessions i ett enda Databricks Connect-program.
  • Optimera Databricks Connect-tillståndssynkronisering mellan klient och server. Undvik överdriven avsökning av statusuppdateringar när servern är inaktiv.

Databricks Connect för Databricks Runtime 6.4

Databricks Connect 6.4.22

12 januari 2021

  • [ES-59054] Åtgärda Delta Optimize Table-kommando genom Databricks Connect
  • [ES-53497] Åtgärda Databricks Connect på Databricks Container Services (DCS)

Databricks Connect 6.4.21

9 december 2020

  • [ES-25890] Åtgärda ett fel där DataFrame cache() i vissa fall inte har någon inverkan och frågan skulle köras igen.
  • [ES-26196] Stöd för användning av NATURAL- och USING-syntax i kopplingar.
  • [ES-33475][ES-34186] Undvik loggningsrelaterade minnesundantag.
  • [ES-39493] Förhindra rekursiva inläsningsfel i databricks-connect-test.
  • [ES-43656] Åtgärda serialiseringsfel relaterade till Azure Data Lake Storage Gen2-stöd.
  • [ES-30594] Tillåt större HTTP-huvuden och förstora buffertar i Databricks Connect.
  • Mindre korrigeringar

Databricks Connect 6.4.2

5 november 2020

  • [ES-47216] Åtgärda kompatibilitetsproblem med versionskontroll för Databricks Runtime 6.4 – underhållsuppdatering från 3 november 2020.

Databricks Connect 6.4.1

8 april 2020

Mindre korrigeringar och uppdateringar.

Databricks Connect 6.4.0

7 mars 2020

Första Databricks Connect-versionen för Databricks Runtime 6.4.