Databricks Runtime 13.2 (nepodporované)

  • Článek

Následující poznámky k verzi obsahují informace o modulu Databricks Runtime 13.2, který využívá Apache Spark 3.4.0.

Databricks tyto image vydal v červenci 2023.

Nové funkce a vylepšení

Vytváření kontrolních bodů protokolu změn pro úložiště stavů RocksDB

U stavových úloh strukturovaného streamování můžete povolit vytváření kontrolních bodů tak, aby se snížila doba trvání kontrolního bodu a celková latence. Databricks doporučuje zapnout kontrolní body protokolu změn pro všechny stavové dotazy strukturovaného streamování. Viz Povolení vytváření kontrolních bodů protokolu změn.

Vylepšená spolehlivost pro vakuum s mělkým klonem v katalogu Unity.

Při použití spravovaných tabulek Katalogu Unity pro zdroj a cíl operace mělké klonování spravuje Služba Unity Catalog podkladové datové soubory ke zlepšení spolehlivosti pro zdroj a cíl operace klonování. Spuštění VACUUM na zdroji mělké klonování neruší klonovanou tabulku. Viz vakuové a unity katalog mělké klony.

Podpora uživatelem definovaných funkcí Pythonu v SQL

Nyní můžete deklarovat uživatelem definované funkce pomocí Pythonu v rámci příkazů SQL CREATE FUNCTION v katalogu Unity. Viz uživatelem definované funkce (UDF) v katalogu Unity.

Delta Lake UniForm for Iceberg je ve verzi Public Preview

Delta Lake Universal Format (UniForm) umožňuje číst tabulky Delta s klienty Iceberg. Viz Použití uniformu ke čtení tabulek Delta s klienty Iceberg.

Clustering Liquid Delta Lake je ve verzi Public Preview.

Clustering Delta Lake Liquid nahrazuje dělení tabulek a ZORDER zjednodušuje rozhodování o rozložení dat a optimalizuje výkon dotazů. Viz Použití liquid clusteringu pro tabulky Delta.

Podpora archivace v Azure Databricks

Podpora archivace v Azure Databricks představuje kolekci funkcí, které umožňují používat cloudové zásady životního cyklu v cloudovém úložišti objektů obsahujícím tabulky Delta k přesunu souborů do archivních úrovní úložiště. Viz podpora archivace v Azure Databricks.

Podpora klauzule IDENTIFIER

Umožňuje IDENTIFIER(:mytable) bezpečně parametrizovat názvy tabulek, sloupců, funkcí a schémat v mnoha příkazech SQL.

Podpora katalogu Unity pro uživatelem definované funkce Pythonu a Pandas

Ve službě Databricks Runtime 13.2 a novějších se uživatelem definované funkce (UDF) napsané v Pythonu podporují v clusterech, které používají režim sdíleného přístupu v pracovním prostoru s podporou katalogu Unity. To zahrnuje uživatelem definované uživatelem Python a Pandas. Podrobnosti o uživatelem definovaných uživatelem definovaných funkcích Pythonu najdete v tématu Uživatelem definované skalární funkce – Python.

Sdílení schémat pomocí rozdílového sdílení

Databricks Runtime 13.2 přidává možnost sdílení ALTER SHARE <share-name> ADD SCHEMA <schema-name> celého schématu pomocí funkce Delta Sharing a poskytuje příjemci přístup ke všem tabulkám a zobrazením ve schématu v okamžiku, kdy ho sdílíte, spolu s tabulkami a zobrazeními přidanými do schématu v budoucnu. Viz Přidání schémat do sdílené složky a ALTER SHARE.

Opravy chyb

  • Opravili jsme chybu se čtečkou JSON, která způsobovala analýzu záznamů v PERMISSIVE režimu, pokud failOnUnknownFieldsmode byla povolená. Záznamy jsou nyní vyřazeny v DROPMALFORMEDparser režimu nebo jsou zapsány do badRecordsPath, pokud jsou některé z těchto možností nastaveny. FAILFAST vyvolá chybu, pokud typ sloupce neodpovídá.

Upgrady knihoven

  • Upgradované knihovny Pythonu:
    • nodeenv od 1.7.0 do 1.8.0
  • Upgradované knihovny jazyka R:
  • Upgradované knihovny Java:
    • io.delta.delta-sharing-spark_2.12 od 0.6.7 do 0.7.0

Apache Spark

Databricks Runtime 13.2 zahrnuje Apache Spark 3.4.0. Tato verze zahrnuje všechny opravy a vylepšení Sparku zahrnuté v Databricks Runtime 13.1 (nepodporované) a také následující další opravy chyb a vylepšení Sparku:

  • [SPARK-42750] [SC-133452] [DBRRM-273] Podpora příkazu Insert By Name
  • [SPARK-43133] [SC-133728] Podpora scala Client DataStreamWriter Foreach
  • [SPARK-43663] [SC-134135] [CONNECT] [PS] Povolit SeriesParityTests.test_compare
  • [SPARK-43684] [SC-134162] [SPARK-43685] [SPARK-43686] [SPARK-43691] [CONNECT] [PS] Oprava (NullOps|NumOps).(eq|ne) Připojení Sparku
  • [SPARK-44021] [SC-134109] [SQL] Přidání spark.sql.files.maxPartitionNum
  • [SPARK-43910] [SC-132936] [SQL] Odstranění __auto_generated_subquery_name id v chybách
  • [SPARK-43976] [SC-133375] [JÁDRO] Zpracování případu, kdy modifiedConfigs v protokolech událostí neexistuje
  • [SPARK-32559] [SC-133992] [SQL] Oprava logiky oříznutí nezpracovala správně řídicí znaky ASCII
  • [SPARK-43421] [SC-132930] [SS] Implementace kontrolních bodů založených na protokolu změn pro zprostředkovatele úložiště stavů RocksDB
  • [SPARK-43594] [SC-133851] [SQL] Přidání LocalDateTime do anyToMicros
  • [SPARK-43884] [SC-133867] Značky parametrů v DDL
  • [SPARK-43398] [SC-133894] [JÁDRO] Časový limit exekutoru by měl být maximální počet nečinných náhodného náhodného prohazování a vypršení časového limitu rdd.
  • [SPARK-43610] [SC-133892] [CONNECT] [PS] Povolte InternalFrame.attach_distributed_column v Připojení Sparku.
  • [SPARK-43971] [SC-133826] [CONNECT] [PYTHON] Podpora datového rámce createDataFrame Pythonu streamovaným způsobem
  • [SPARK-44006] [SC-133652] [CONNECT] [PYTHON] Podpora artefaktů mezipaměti
  • [SPARK-43790] [SC-133468] [PYTHON] [CONNECT] [ML] Přidání copyFromLocalToFs rozhraní API
  • [SPARK-43921] [SC-133461] [PROTOBUF] Generování souborů popisovače Protobuf v době sestavení
  • [SPARK-43906] [SC-133638] [SC-133404] [PYTHON] [CONNECT] Implementace podpory souborů ve SparkSession.addArtifacts
  • [SPARK-44010] [SC-133744] [PYTHON] [SS] [PODVERZE] Oprava typu Python StreamingQueryProgress RowsPerSecond
  • [SPARK-43768] [SC-132398] [PYTHON] [CONNECT] Podpora správy závislostí Pythonu ve Sparku Připojení
  • [SPARK-43979] [13.X] Zpět [SC-133456][SQL] Shromážděná metrika by měla být považována za stejnou pro samoobslužné připojení.
  • [SPARK-42290] [SC-133696] [SQL] Oprava chyby OOM nejde hlásit při zapnutí AQE
  • [SPARK-43943] [SC-133648] [SQL] [PYTHON] [CONNECT] Přidání matematických funkcí SQL do Scala a Pythonu
  • [SPARK-43747] [SC-132047] [PYTHON] [CONNECT] Implementace podpory pyfile ve SparkSession.addArtifacts
  • [SPARK-43700] [SC-133726] [SPARK-43701] [CONNECT] [PS] Povolení TimedeltaOps.(sub|rsub) s Připojení Sparku
  • [SPARK-43712] [SC-133641] [SPARK-43713] [CONNECT] [PS] Povolit paritní test: test_line_plot, test_pie_plot.
  • [SPARK-43867] [SC-132895] [SQL] Vylepšení navrhovaných kandidátů pro nevyřešený atribut
  • [SPARK-43901] [SC-133454] [SQL] Avro to Support custom decimal type backed by Long
  • [SPARK-43267] [SC-133024] [JDBC] Zpracování neznámého uživatelem definovaného sloupce postgres jako řetězce v poli
  • [SPARK-43935] [SC-133637] [SQL] [PYTHON] [CONNECT] Přidání funkcí xpath_* do Scala a Pythonu
  • [SPARK-43916] [SC-133647] [SQL] [PYTHON] [CONNECT] Přidání percentilu do rozhraní Scala a python API
  • [SPARK-43717] [SC-133455] [CONNECT] Klient Scala reduce agg nemůže zpracovat oddíly null pro primitivní vstupy scala
  • [SPARK-43984] [SC-133469] [SQL] [PROTOBUF] Změna použití foreach v případech, kdy map negeneruje výsledky
  • [SPARK-43612] [SC-132011] [CONNECT] [PYTHON] Implementace SparkSession.addArtifact(s) v klientovi Pythonu
  • [SPARK-44002] [SC-133606] [CONNECT] Oprava obslužné rutiny stavu artefaktů
  • [SPARK-43933] [SC-133470] [SQL] [PYTHON] [CONNECT] Přidání agregačních funkcí lineární regrese do Scala a Pythonu
  • [SPARK-43920] [SC-133614] [SQL] [CONNECT] Vytvoření modulu SQL/API
  • [SPARK-43979] [SC-133456] [SQL] Shromážděná metrika by se měla považovat za stejnou pro připojení k vlastnímu připojení.
  • [SPARK-43977] [SC-133373] [CONNECT] Oprava neočekávaného výsledku kontroly dev/connect-jvm-client-mima-check
  • [SPARK-43985] [SC-133412] [PROTOBUF] spark protobuf: oprava výčtů jako chyby ints
  • [SPARK-43930] [SC-133406] [SQL] [PYTHON] [CONNECT] Přidání funkcí unix_* do Scala a Pythonu
  • [SPARK-43807] [SC-132545] [SQL] Migrace _LEGACY_ERROR_TEMP_1269 na PARTITION_SCHEMA_IS_EMPTY
  • [SPARK-43956] [SC-133123] [SQL] Oprava chyby nezobrazuje sql sloupce pro Percentil[Cont|Disk]
  • [SPARK-42626] [SC-133248] [CONNECT] Přidání destruktivního iterátoru pro SparkResult
  • [SPARK-43333] [SC-132898] [SQL] Povolit Avru převést sjednocovacího typu na SQL se stabilním názvem pole s typem
  • [SPARK-43953] [SC-133134] [CONNECT] Odebrat pass
  • [SPARK-43970] [SC-133403] [PYTHON] [CONNECT] Skrytí nepodporovaných metod datového rámce před automatickým dokončováním
  • [SPARK-43973] [SC-133272] [SS] [UŽIVATELSKÉ ROZHRANÍ] Uživatelské rozhraní strukturovaného streamování by mělo správně zobrazovat neúspěšné dotazy.
  • [SPARK-42577] [SC-125445] [JÁDRO] Přidání maximálního omezení počtu pokusů o fáze, aby se zabránilo potenciálnímu nekonečnému opakování
  • [SPARK-43841] [SC-132699] [SQL] Zpracování atributů kandidáta bez předpony v StringUtils#orderSuggestedIdentifiersBySimilarity
  • [SPARK-41497] [SC-124795] [JÁDRO] [Zpracovat] Úprava verze podpory konfigurace spark.rdd.cache.visibilityTracking.enabled na verzi 3.5.0
  • [SPARK-37942] [SC-130983] [JÁDRO] [SQL] Migrace tříd chyb
  • [SPARK-43898] [SC-132926] [JÁDRO] Automatická registrace immutable.ArraySeq$ofRef pro KryoSerializer Scala 2.13
  • [SPARK-43775] [SC-132891] [SQL] DataSource V2: Povolit reprezentaci aktualizací při odstraňování a vkládání
  • [SPARK-43817] [SC-132662] [SPARK-43702] [PYTHON] Podpora userDefinedType v createDataFrame z datového rámce pandas a toPandas
  • [SPARK-43418] [SC-132753] [SC-130685] [CONNECT] Přidání SparkSession.Builder.getOrCreate
  • [SPARK-43549] [SC-132383] [SQL] Převeďte _LEGACY_ERROR_TEMP_0036 na INVALID_SQL_SYNTAX. ANALYZE_TABLE_UNEXPECTED_NOSCAN
  • [SPARK-41497] [SC-124644] [JÁDRO] Oprava snížení počtu akumulátorů v případě úlohy opakování s mezipamětí rdd
  • [SPARK-43892] [SC-133006] [PYTHON] Přidání podpory automatického dokončování pro df[|] in pyspark.sql.dataframe.DataFrame
  • [SPARK-43881] [SC-133140] [SQL] [PYTHON] [CONNECT] Přidání volitelného vzoru pro Catalog.listDatabases
  • [SPARK-43205] [SC-132623] Klauzule IDENTIFIER
  • [SPARK-43545] [SC-132378] [SQL] [PYTHON] Podpora vnořeného typu časového razítka
  • [SPARK-43949] [SC-133048] [PYTHON] Upgrade cloudpickle na verzi 2.2.1
  • [SPARK-43760] [SC-132809] [SQL] Nulová dostupnost výsledků skalárních poddotazů
  • [SPARK-43696] [SC-132737] [SPARK-43697] [SPARK-43698] [SPARK-43699] [PS] Oprava TimedeltaOps Připojení Sparku
  • [SPARK-43895] [SC-132897] [CONNECT] [GO] Příprava cesty k balíčku go
  • [SPARK-43894] [SC-132892] [PYTHON] Oprava chyby v df.cache()
  • [SPARK-43509] [SC-131625] [CONNECT] Podpora vytváření více relací Připojení Sparku
  • [SPARK-43882] [SC-132888] [SQL] Přiřadit název _LEGACY_ERROR_TEMP_2122
  • [SPARK-43687] [SC-132747] [SPARK-43688] [SPARK-43689] [SPARK-43690] [PS] Oprava NumOps Připojení Sparku
  • [SPARK-43604] [SC-132165] [SQL] Refaktoring INVALID_SQL_SYNTAX pro zabránění vložení textu chyby do zdrojového kódu
  • [SPARK-43859] [SC-132883] [SQL] Přepsat naString v LateralColumnAliasReference
  • [SPARK-43792] [SC-132939] [SQL] [PYTHON] [CONNECT] Přidání volitelného vzoru pro Catalog.listCatalogs
  • [SPARK-43353] Vrátit zpět "[SC-132734][PYTHON] Migrovat zbývající chyby relace do chybové třídy
  • [SPARK-43375] [SC-130309] [CONNECT] Vylepšení chybových zpráv pro INVALID_CONNECT_URL
  • [SPARK-43863] [SC-132721] [CONNECT] Odebrání redundantního toSeq z SparkConnectPlanner platformy Scala 2.13
  • [SPARK-43676] [SC-132708] [SPARK-43677] [SPARK-43678] [SPARK-43679] [PS] Oprava DatetimeOps Připojení Sparku
  • [SPARK-43666] [SC-132689] [SPARK-43667] [SPARK-43668] [SPARK-43669] [PS] Oprava BinaryOps Připojení Sparku
  • [SPARK-43680] [SC-132709] [SPARK-43681] [SPARK-43682] [SPARK-43683] [PS] Oprava NullOps Připojení Sparku
  • [SPARK-43782] [SC-132885] [JÁDRO] Podpora konfigurace na úrovni protokolu pomocí statické konfigurace Sparku
  • [SPARK-43132] [SC-131623] [SS] [CONNECT] Python Client DataStreamWriter foreach() API
  • [SPARK-43290] [SC-131961] [SQL] Přidá podporu AES IV a AAD do ExpressionImplUtils.
  • [SPARK-43795] [SC-132532] [CONNECT] Odebrání parametrů, které se nepoužívají pro Spark Připojení Planner
  • [SPARK-42317] [SC-129194] [SQL] Přiřadit název _LEGACY_ERROR_TEMP_2247: CANNOT_MERGE_SCHEMAS
  • [SPARK-43597] [SC-131960] [SQL] Přiřazení názvu ke třídě chyb _LEGACY_ERROR_TEMP_0017
  • [SPARK-43834] [SC-132679] [SQL] Použití tříd chyb v chybách kompilace ResolveDefaultColumns
  • [SPARK-43749] [SC-132423] [SPARK-43750] [SQL] Přiřazení názvů ke třídě chyb _LEGACY_ERROR_TEMP_240[4-5]
  • [SPARK-43576] [SC-132533] [JÁDRO] Odebrání nepoužívaných deklarací z modulu Core
  • [SPARK-43314] [SC-129970] [CONNECT] [PYTHON] Migrace chyb klienta Sparku Připojení do třídy chyb
  • [SPARK-43799] [SC-132715] [PYTHON] Přidání binární možnosti popisovače do rozhraní API Pyspark Protobuf
  • [SPARK-43837] [SC-132678] [SQL] Přiřazení názvu ke třídě chyb _LEGACY_ERROR_TEMP_103[1-2]
  • [SPARK-43862] [SC-132750] [SQL] Přiřazení názvu ke třídě chyb LEGACY_ERROR_TEMP(1254 & 1315)
  • [SPARK-43886] [SC-132808] [PYTHON] Přijměte obecnou řazenou kolekci členů jako nápovědu pro zadávání uživatelem definované uživatelem Pandas.
  • [SPARK-43530] [SC-132653] [PROTOBUF] Čtení souboru popisovače pouze jednou
  • [SPARK-43820] [SC-132676] [SPARK-43822] [SPARK-43823] [SPARK-43826] [SPARK-43827] Přiřazení názvů ke třídě chyb _LEGACY_ERROR_TEMP_241[1-7]
  • [SPARK-43671] [SC-132519] [SPARK-43672] [SPARK-43673] [SPARK-43674] [PS] Oprava CategoricalOps Připojení Sparku
  • [SPARK-39979] [SC-132685] [SQL] Přidání možnosti pro použití vektorů s velkou proměnlivou šířkou pro operace UDF se šipkami
  • [SPARK-43692] [SC-132660] [SPARK-43693] [SPARK-43694] [SPARK-43695] [PS] Oprava StringOps Připojení Sparku
  • [SPARK-43353] [SC-132734] [PYTHON] Migrace zbývajících chyb relace do třídy chyb
  • [SPARK-43815] [SC-132781] [SQL] Přidání to_varchar aliasu pro to_char
  • [SPARK-43543] [13.x] [SC-131839] [PYTHON] Oprava chování vnořeného typu MapType v knihovně Pandas UDF
  • [SPARK-43361] [SC-131789] [PROTOBUF] Dokumentace k aktualizaci chyb souvisejících se serializací výčtu
  • [SPARK-43740] [SC-132035] [PYTHON] [CONNECT] Skrytí nepodporovaných session metod před automatickým dokončováním
  • [SPARK-43022] [SC-131681] [CONNECT] Podpora funkcí protobuf pro klienta Scala
  • [SPARK-43304] [13.x] [SC-129969] [CONNECT] [PYTHON] Migrace NotImplementedError do PySparkNotImplementedError
  • [SPARK-43860] [SC-132713] [SQL] Povolení koncové rekurze, kdykoli je to možné
  • [SPARK-42421] [SC-132695] [JÁDRO] Pomocí nástrojů získáte přepínač pro dynamické přidělování použité v místním kontrolním bodu.
  • [SPARK-43590] [SC-132012] [CONNECT] Podpora connect-jvm-client-mima-check kontroly mima s modulem protobuf
  • [SPARK-43315] [13.x] [CONNECT] [PYTHON] [SS] Migrace zbývajících chyb z datového rámce (Čtenář|Zapisovač) do třídy chyb
  • [SPARK-43361] [SC-130980] [PROTOBUF] spark-protobuf: allow serde with enum as ints
  • [SPARK-43789] [SC-132397] [R] Ve výchozím nastavení používá metodu spark.sql.execution.arrow.maxRecordsPerBatch v prvku R createDataFrame se šipkou.
  • [SPARK-43596] [SC-126994] [SQL] Popisovač predikátu IsNull v přepisuDomainJoins
  • [SPARK-42249] [SC-122565] [SQL] Upřesnění odkazu html pro dokumentaci v chybových zprávách
  • [SPARK-43128] [SC-131628] [CONNECT] [SS] Zajištění recentProgress a lastProgress vrácení StreamingQueryProgress konzistentní s nativním rozhraním Scala API
  • [SPARK-43387] [SC-130448] [SQL] Zadejte čitelný kód chyby člověka pro _LEGACY_ERROR_TEMP_1168.
  • [SPARK-43334] [SC-132358] [UŽIVATELSKÉ ROZHRANÍ] Oprava chyby při serializaci ExecutorPeakMetricsDistributions do odpovědi rozhraní API
  • [SPARK-42958] [SC-131475] [CONNECT] Refaktoring connect-jvm-client-mima-check pro podporu kontroly mima s modulem avro
  • [SPARK-43591] [SC-131977] [SQL] Přiřazení názvu ke třídě chyb _LEGACY_ERROR_TEMP_0013
  • [SPARK-38464] [SC-132211] [JÁDRO] Použití tříd chyb v org.apache.spark.io
  • [SPARK-43759] [SC-132189] [SQL] [PYTHON] Zveřejnění timestampNTZType v pyspark.sql.types
  • [SPARK-43649] [SC-132036] [SPARK-43650] [SPARK-43651] [SQL] Přiřazení názvů ke třídě chyb _LEGACY_ERROR_TEMP_240[1-3]
  • [SPARK-43719] [SC-132016] [WEBI] Pole Popisovač missing row.excludedInStages
  • [SPARK-42956] [SC-127257] [CONNECT] Podpora funkcí avro pro klienta Scala
  • [SPARK-43487] [SC-131975] [SQL] Oprava chybové zprávy Vnořeného CTE
  • [SPARK-43265] [SC-129653] Přesun architektury chyb do běžného modulu nástrojů
  • [SPARK-40912] [SC-131547] [JÁDRO] Režie výjimek v KryoDeserializationStream
  • [SPARK-43583] [SC-131976] [CORE] získání MergedBlockedMetaReqHandler z delegáta místo instance SaslRpcHandler
  • [SPARK-42996] [SC-131997] [CONNECT] [PS] [ML] Vytvořte a přiřaďte správné lístky JIRA pro všechny neúspěšné testy.
  • [SPARK-38469] [SC-131425] [JÁDRO] Použití třídy chyb v org.apache.spark.network
  • [SPARK-43718] [SC-132014] [SQL] Správně nastavit hodnotu null pro klíče ve spojeníCH USING
  • [SPARK-43502] [SC-131419] [PYTHON] [CONNECT] DataFrame.drop by měl přijmout prázdný sloupec.
  • [SPARK-43743] [SC-132038] [SQL] Port HIVE-12188(DoAs nefunguje správně v hs2 zabezpečených protokolem Kerberos)
  • [SPARK-43598] [SC-131929] [SQL] Přiřazení názvu ke třídě chyb _LEGACY_ERROR_TEMP_2400
  • [SPARK-43138] [SC-131031] [JÁDRO] Oprava třídy ClassNotFoundException během migrace
  • [SPARK-43360] [SC-131526] [SS] [CONNECT] Správce StreamQueryManager klienta Scala
  • [SPARK-38467] [SC-131025] [JÁDRO] Použití tříd chyb v org.apache.spark.memory
  • [SPARK-43345] [SC-131790] [SPARK-43346] [SQL] Přejmenování tříd chyb LEGACY_ERROR_TEMP[0041|1206]
  • [SPARK-42815] [SC-126450] [SQL] Výraz pro odstranění dílčího výrazu podporuje zkratku
  • [SPARK-38462] [SC-130449] [JÁDRO] Přidání třídy chyb INTERNAL_ERROR_EXECUTOR
  • [SPARK-43589] [SC-131798] [SQL] Oprava cannotBroadcastTableOverMaxTableBytesError použití bytesToString
  • [SPARK-43539] [SC-131830] [SQL] Přiřazení názvu ke třídě chyb _LEGACY_ERROR_TEMP_0003
  • [SPARK-43157] [SC-131688] [SQL] Klonování plánu v mezipaměti InMemoryRelation, aby se zabránilo klonování plánu odkazování na stejné objekty
  • [SPARK-43309] [SC-129746] [SPARK-38461] [JÁDRO] Rozšíření INTERNAL_ERROR kategoriemi a přidání třídy chyb INTERNAL_ERROR_BROADCAST
  • [SPARK-43281] [SC-131370] [SQL] Oprava souběžného zapisovače neaktualizuje metriky souborů
  • [SPARK-43383] [SC-130660] [SQL] Přidání rowCount statistik do LocalRelation
  • [SPARK-43574] [SC-131739] [PYTHON] [SQL] Podpora nastavení spustitelného souboru Pythonu pro rozhraní API funkcí UDF a pandas v pracovních procesů během běhu
  • [SPARK-43569] [SC-131694] [SQL] Odebrání alternativního řešení pro HADOOP-14067
  • [SPARK-43183] [SC-128938] [SS] [13.x] Zavedení nového zpětného volání onQueryIdle pro StreamingQueryListener
  • [SPARK-43528] [SC-131531] [SQL] [PYTHON] Podpora duplicitních názvů polí v createDataFrame s datovým rámcem pandas
  • [SPARK-43548] [SC-131686] [SS] Odebrání alternativního řešení pro HADOOP-16255
  • [SPARK-43494] [SC-131272] [JÁDRO] Přímé volání replicate()HdfsDataOutputStreamBuilder místo reflexe v SparkHadoopUtil#createFile
  • [SPARK-43471] [SC-131063] [JÁDRO] Zpracování chybějících metrik hadoopProperties a metrik
  • [SPARK-42899] [SC-126456] [SQL] Oprava DataFrame.to(schématu) pro zpracování případu, kdy je v poli s možnou hodnotou null vnořené pole bez hodnoty null
  • [SPARK-43302] [SC-129747] [SQL] Nastavení Pythonu UDAF jako AggregateFunction
  • [SPARK-43223] [SC-131270] [Připojení] Zadejte agregační funkce, redukční funkce, RelationalGroupedDataset#as
  • [SPARK-43482] [SC-131375] [SS] Rozbalte queryTerminatedEvent tak, aby obsahovala třídu chyb, pokud existuje v výjimce.
  • [SPARK-43359] [SC-131463] [SQL] Odstranění z tabulky Hive by mělo vyvolat UNSUPPORTED_FEATURE. TABLE_OPERATION"
  • [SPARK-43284] [SC-130313] Přepnutí zpět na řetězce kódované adresou URL
  • [SPARK-43492] [SC-131227] [SQL] Přidání aliasů DATE_ADD funkce 3-args a DATE_DIFF
  • [SPARK-43473] [SC-131372] [PYTHON] Podpora typu struktury v createDataFrame z datového rámce pandas
  • [SPARK-43386] [SC-131110] [SQL] Vylepšení seznamu navrhovaných sloupců nebo atributů ve UNRESOLVED_COLUMN.WITH_SUGGESTION třídě chyb
  • [SPARK-43443] [SC-131332] [SQL] Přidání srovnávacího testu pro odvození typu časového razítka při použití neplatné hodnoty
  • [SPARK-43518] [SC-131420] [SQL] Převést _LEGACY_ERROR_TEMP_2029 na INTERNAL_ERROR
  • [SPARK-42604] [SC-130648] [CONNECT] Implementace functions.typedlit
  • [SPARK-42323] [ES-669513] Vrátit "[SC-123479][SQL] Přiřadit název _LEGACY_ERROR_TEMP_2332"
  • [SPARK-43357] [SC-130649] [SQL] Filtrovat datum nabídky typu kalendářního data
  • [SPARK-43410] [SC-130526] [SQL] Vylepšení vektorizované smyčky pro Packed skipValues
  • [SPARK-43441] [SC-130995] [JÁDRO] makeDotNode by nemělo selhat, pokud chybí DeterministicLevel
  • [SPARK-43324] [SC-130455] [SQL] Zpracování příkazů UPDATE pro rozdílové zdroje
  • [SPARK-43272] [SC-131168] [JÁDRO] Přímé volání createFile místo reflexe
  • [SPARK-43296] [13.x] [SC-130627] [CONNECT] [PYTHON] Migrace chyb relace Sparku Připojení do třídy chyb
  • [SPARK-43405] [SC-130987] [SQL] Odebrat zbytečné getRowFormatSQL, inputRowFormatSQL, outputRowFormatSQL metoda
  • [SPARK-43447] [SC-131017] [R] Podpora R 4.3.0
  • [SPARK-43425] [SC-130981] [SQL] Přidat TimestampNTZType do ColumnarBatchRow
  • [SPARK-41532] [SC-130523] [CONNECT] [KLIENT] Přidání kontroly operací, které zahrnují více datových rámců
  • [SPARK-43262] [SC-129270] [CONNECT] [SS] [PYTHON] Migrace chyb Sparku Připojení strukturovaného streamování do třídy chyb
  • [SPARK-42992] [13.x] [SC-129465] [PYTHON] Představení chyby PySparkRuntimeError
  • [SPARK-43422] [SC-130982] [SQL] Zachování značek pro LogRelation s výstupem metadat
  • [SPARK-43390] [SC-130646] [SQL] DSv2 umožňuje CTAS/RTAS rezervovat použitelnost schématu
  • [SPARK-43430] [SC-130989] [CONNECT] [PROTO] ExecutePlanRequest podporuje možnosti libovolného požadavku.
  • [SPARK-43313] [SC-130254] [SQL] Přidání chybějících hodnot DEFAULT sloupců pro akce MERGE INSERT
  • [SPARK-42842] [SC-130438] [SQL] Sloučení _LEGACY_ERROR_TEMP_2006 třídy chyb do REGEX_GROUP_INDEX
  • [SPARK-43377] [SC-130405] [SQL] Povolit spark.sql.thriftServer.interruptOnCancel ve výchozím nastavení
  • [SPARK-43292] [SC-130525] [JÁDRO] [CONNECT] Přechod ExecutorClassLoader na core modul a zjednodušení Executor#addReplClassLoaderIfNeeded
  • [SPARK-43040] [SC-130310] [SQL] Vylepšení podpory typů TimestampNTZ ve zdroji dat JDBC
  • [SPARK-43343] [SC-130629] [SS] FileStreamSource by měl při vytváření Zdroje dat zakázat další kontrolu globu souborů.
  • [SPARK-43312] [SC-130294] [PROTOBUF] Možnost převést všechna pole na JSON
  • [SPARK-43404] [SC-130586] [SS] Přeskočení opakovaného použití souboru sst pro stejnou verzi úložiště stavů RocksDB, aby se zabránilo chybě neshody ID
  • [SPARK-43397] [SC-130614] [JÁDRO] Doba vyřazení exekutoru protokolu z provozu v executorLost metodě
  • [SPARK-42388] [SC-128568] [SQL] Vyhněte se čtení parketových zápatí dvakrát ve vektorizované čtečce.
  • [SPARK-43306] [13.x] [SC-130320] [PYTHON] Migrace ValueError z typů Spark SQL do třídy chyb
  • [SPARK-43337] [SC-130353] [UŽIVATELSKÉ ROZHRANÍ] [3.4] Ikony šipek Asc/desc pro sloupec řazení se nezobrazují ve sloupci tabulky.
  • [SPARK-43279] [SC-130351] [JÁDRO] Vyčištění nepoužívaných členů z SparkHadoopUtil
  • [SPARK-43250] [SC-130147] [SQL] Nahrazení třídy _LEGACY_ERROR_TEMP_2014 chyby vnitřní chybou
  • [SPARK-43363] [SC-130299] [SQL] [PYTHON] astype Volání typu kategorie pouze v případech, kdy není zadán typ šipky
  • [SPARK-43261] [SC-130154] [PYTHON] Migrace TypeError z typů Spark SQL do třídy chyb
  • [SPARK-41971] [SC-130230] [SQL] [PYTHON] Přidání konfigurace pro převod pandas, jak zpracovat typy struktur
  • [SPARK-43381] [SC-130464] [CONNECT] Make 'transformStatCov' lazy
  • [SPARK-43362] [SC-130481] [SQL] Speciální zpracování typu JSON pro konektor MySQL
  • [SPARK-42843] [SC-130196] [SQL] Aktualizace _LEGACY_ERROR_TEMP_2007 třídy chyb na REGEX_GROUP_INDEX
  • [SPARK-42585] [SC-129968] [CONNECT] Streamování místních vztahů
  • [SPARK-43181] [SC-130476] [SQL] Zobrazení adresy WebURL uživatelského rozhraní v spark-sql prostředí
  • [SPARK-43051] [SC-130194] [CONNECT] Přidání možnosti pro generování výchozích hodnot
  • [SPARK-43204] [SC-129296] [SQL] Zarovnání přiřazení MERGE s atributy tabulky
  • [SPARK-43348] [SC-130082] [PYTHON] Podpora Python 3.8 v PyPy3
  • [SPARK-42845] [SC-130078] [SQL] Aktualizace třídy chyb _LEGACY_ERROR_TEMP_2010 na InternalError
  • [SPARK-43211] [SC-128978] [HIVE] Odebrání podpory Hadoop2 v IsolatedClientLoaderu

Prostředí systému

  • Operační systém: Ubuntu 22.04.2 LTS
  • Java: Zulu 8.70.0.23-CA-linux64
  • Scala: 2.12.15
  • Python: 3.10.12
  • R: 4.2.2
  • Delta Lake: 2.4.0

Nainstalované knihovny Pythonu

Knihovna Verze Knihovna Verze Knihovna Verze
appdirs 1.4.4 argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0
asttokens 2.2.1 attrs 21.4.0 backcall 0.2.0
krásnásoup4 4.11.1 Černé 22.6.0 Bělidla 4.1.0
blikač 1.4 boto3 1.24.28 botocore 1.27.28
Certifi 2022.9.14 cffi 1.15.1 chardet 4.0.0
charset-normalizer 2.0.4 kliknutí 8.0.4 Kryptografie 37.0.1
Cyklovač 0.11.0 Cython 0.29.32 Databricks-sdk 0.1.6
dbus-python 1.2.18 ladění 1.5.1 Dekoratér 5.1.1
defusedxml 0.7.1 distlib 0.3.6 docstring-to-markdown 0.12
vstupní body 0,4 Provádění 1.2.0 přehled omezujících vlastností 1.0.3
fastjsonschema 2.16.3 filelock 3.12.0 fonttools 4.25.0
googleapis-common-protos 1.56.4 grpcio 1.48.1 grpcio-status 1.48.1
httplib2 0.20.2 idna 3.3 importlib-metadata 4.6.4
ipykernel 6.17.1 ipython 8.10.0 ipython-genutils 0.2.0
ipywidgets 7.7.2 Jedi 0.18.1 Jeepney 0.7.1
Jinja2 2.11.3 jmespath 0.10.0 joblib 1.2.0
jsonschema 4.16.0 jupyter-client 7.3.4 jupyter_core 4.11.2
jupyterlab-pygments 0.1.2 jupyterlab-widgety 1.0.0 Klíčenku 23.5.0
verizonsolver 1.4.2 launchpadlib 1.10.16 lazr.restfulclient 0.14.4
lazr.uri 1.0.6 Revize Sejf 2.0.1 matplotlib 3.5.2
matplotlib-inline 0.1.6 Mccabe 0.7.0 špatně zamyšlení 0.8.4
more-itertools 8.10.0 mypy-extensions 0.4.3 nbclient 0.5.13
nbconvert 6.4.4 nbformat 5.5.0 nest-asyncio 1.5.5
nodeenv 1.8.0 poznámkový blok 6.4.12 numpy 1.21.5
oauthlib 3.2.0 Obalu 21.3 pandas 1.4.4
pandocfilters 1.5.0 parso 0.8.3 pathspec 0.9.0
Patsy 0.5.2 pexpect 4.8.0 pickleshare 0.7.5
Polštář 9.2.0 Pip 22.2.2 platformdirs 2.5.2
plotly 5.9.0 pluggy 1.0.0 prometheus-client 0.14.1
prompt-toolkit 3.0.36 protobuf 3.19.4 psutil 5.9.0
psycopg2 2.9.3 ptyprocess 0.7.0 čistý-eval 0.2.2
pyarrow 8.0.0 pycparser 2.21 pydantic 1.10.6
pyflakes 3.0.1 Pygments 2.11.2 PyGObject 3.42.1
PyJWT 2.3.0 pyodbc 4.0.32 pyparsing 3.0.9
pyright 1.1.294 pyrsistent 0.18.0 python-dateutil 2.8.2
python-lsp-jsonrpc 1.0.0 python-lsp-server 1.7.1 pytoolconfig 1.2.2
pytz 2022.1 pyzmq 23.2.0 žádosti 2.28.1
Lano 1.7.0 s3transfer 0.6.0 scikit-learn 1.1.1
scipy 1.9.1 seaborn 0.11.2 SecretStorage 3.3.1
Send2Trash 1.8.0 setuptools 63.4.1 Šest 1.16.0
polévky 2.3.1 ssh-import-id 5,11 stack-data 0.6.2
statsmodels 0.13.2 Houževnatost 8.1.0 terminado 0.13.1
testpath 0.6.0 threadpoolctl 2.2.0 tokenize-rt 4.2.1
tomli 2.0.1 Tornádo 6.1 vlastnosti 5.1.1
typing_extensions 4.3.0 ujson 5.4.0 bezobslužné upgrady 0,1
urllib3 1.26.11 virtualenv 20.16.3 wadllib 1.3.6
wcwidth 0.2.5 webencodings 0.5.1 whatthepatch 1.0.2
Kolo 0.37.1 widgetsnbextension 3.6.1 yapf 0.31.0
zipp 1.0.0

Nainstalované knihovny jazyka R

Knihovny R se instalují ze snímku Microsoft CRAN na 2023-02-10.

Knihovna Verze Knihovna Verze Knihovna Verze
šipka 10.0.1 askpass 1,1 assertthat 0.2.1
Backports 1.4.1 base 4.2.2 base64enc 0.1-3
bitové 4.0.5 bit64 4.0.5 blob 1.2.3
startování 1.3-28 Vařit 1.0-8 Brio 1.1.3
Koště 1.0.3 bslib 0.4.2 cachem 1.0.6
volající 3.7.3 caret 6.0-93 cellranger 1.1.0
chron 2.3-59 class 7.3-21 Rozhraní příkazového řádku 3.6.0
clipr 0.8.0 clock 0.6.1 cluster 2.1.4
codetools 0.2-19 barevný prostor 2.1-0 commonmark 1.8.1
– kompilátor 4.2.2 config 0.3.1 cpp11 0.4.3
Pastelka 1.5.2 přihlašovací údaje 1.3.2 Curl 5.0.0
data.table 1.14.6 Power BI 4.2.2 DBI 1.1.3
dbplyr 2.3.0 Desc 1.4.2 devtools 2.4.5
diffobj 0.3.5 Digest 0.6.31 downlit 0.4.2
dplyr 1.1.0 dtplyr 1.2.2 e1071 1.7-13
tři tečky 0.3.2 evaluate 0,20 fanynky 1.0.4
farver 2.1.1 fastmap 1.1.0 fontawesome 0.5.0
forcats 1.0.0 foreach 1.5.2 Zahraniční 0.8-82
Forge 0.2.0 Fs 1.6.1 Budoucnosti 1.31.0
future.apply 1.10.0 Kloktadlo 1.3.0 Generik 0.1.3
Gert 1.9.2 ggplot2 3.4.0 Gh 1.3.1
gitcreds 0.1.2 glmnet 4.1-6 Globals 0.16.2
Lepidlo 1.6.2 googledrive 2.0.0 googlesheets4 1.0.1
Gower 1.0.1 Grafika 4.2.2 grDevices 4.2.2
Mřížky 4.2.2 gridExtra 2.3 gsubfn 0,7
gtable 0.3.1 hardhat 1.2.0 Útočiště 2.5.1
highr 0.10 Hms 1.1.2 htmltools 0.5.4
htmlwidgets 1.6.1 httpuv 1.6.8 httr 1.4.4
Id 1.0.1 Ini 0.3.1 ipred 0.9-13
isoband 0.2.7 Iterátory 1.0.14 jquerylib 0.1.4
jsonlite 1.8.4 KernSmooth 2.23-20 pletení 1.42
Označování 0.4.2 Později 1.3.0 Mříže 0.20-45
Láva 1.7.1 lifecycle 1.0.3 listenv 0.9.0
lubridate 1.9.1 magrittr 2.0.3 Markdown 1.5
MASS 7.3-58.2 Matice 1.5-1 memoise 2.0.1
metody 4.2.2 mgcv 1.8-41 Mime 0.12
miniUI 0.1.1.1 ModelMetrics 1.2.2.2 modelr 0.1.10
munsell 0.5.0 nlme 3.1-162 nnet 7.3-18
numDeriv 2016.8-1.1 openssl 2.0.5 parallel 4.2.2
paralelně 1.34.0 Pilíř 1.8.1 pkgbuild 1.4.0
pkgconfig 2.0.3 pkgdown 2.0.7 pkgload 1.3.2
plogr 0.2.0 plyr 1.8.8 Chvála 1.0.0
prettyunits 1.1.1 Proc 1.18.0 processx 3.8.0
prodlim 2019.11.13 profvis 0.3.7 Průběh 1.2.2
progressr 0.13.0 Sliby 1.2.0.1 proto 1.0.0
Proxy 0.4-27 Ps 1.7.2 purrr 1.0.1
r2d3 0.2.6 R6 2.5.1 ragg 1.2.5
randomForest 4.7-1.1 rappdirs 0.3.3 Analýza rcmdcheck 1.4.0
RColorBrewer 1.1-3 Rcpp 1.0.10 RcppEigen 0.3.3.9.3
readr 2.1.3 readxl 1.4.2 recepty 1.0.4
Zápas 1.0.1 rematch2 2.1.2 vzdálená zařízení 2.4.2
reprex 2.0.2 reshape2 1.4.4 rlang 1.0.6
rmarkdown 2,20 RODBC 1.3-20 roxygen2 7.2.3
rpart 4.1.19 rprojroot 2.0.3 Rserve 1.8-12
RSQLite 2.2.20 rstudioapi 0,14 rversions 2.1.2
rvest 1.0.3 Sass 0.4.5 Váhy 1.2.1
selektor 0.4-2 sessioninfo 1.2.2 Obrazec 1.4.6
Lesklé 1.7.4 sourcetools 0.1.7-1 sparklyr 1.7.9
SparkR 3.4.0 Prostorové 7.3-15 Křivky 4.2.2
sqldf 0.4-11 ČTVEREC 2021.1 Statistiky 4.2.2
Statistiky 4 4.2.2 stringi 1.7.12 stringr 1.5.0
Přežití 3.5-3 sys 3.4.1 systemfonts 1.0.4
tcltk 4.2.2 testthat 3.1.6 textshaping 0.3.6
tibble 3.1.8 tidyr 1.3.0 tidyselect 1.2.0
tidyverse 1.3.2 časový interval 0.2.0 timeDate 4022.108
tinytex 0.44 tools 4.2.2 tzdb 0.3.0
urlchecker 1.0.1 usethis 2.1.6 utf8 1.2.3
utils 4.2.2 Uuid 1.1-0 vctrs 0.5.2
viridisLite 0.4.1 vroom 1.6.1 Waldo 0.4.0
vousa 0.4.1 withr 2.5.0 xfun 0.37
xml2 1.3.3 xopen 1.0.0 xtable 1.8-4
yaml 2.3.7 Zip 2.2.2

Nainstalované knihovny Java a Scala (verze clusteru Scala 2.12)

ID skupiny ID artefaktu Verze
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws automatické škálování aws-java-sdk 1.12.390
com.amazonaws aws-java-sdk-cloudformation 1.12.390
com.amazonaws aws-java-sdk-cloudfront 1.12.390
com.amazonaws aws-java-sdk-cloudhsm 1.12.390
com.amazonaws aws-java-sdk-cloudsearch 1.12.390
com.amazonaws aws-java-sdk-cloudtrail 1.12.390
com.amazonaws aws-java-sdk-cloudwatch 1.12.390
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.390
com.amazonaws aws-java-sdk-codedeploy 1.12.390
com.amazonaws aws-java-sdk-cognitoidentity 1.12.390
com.amazonaws aws-java-sdk-cognitosync 1.12.390
com.amazonaws aws-java-sdk-config 1.12.390
com.amazonaws aws-java-sdk-core 1.12.390
com.amazonaws aws-java-sdk-datapipeline 1.12.390
com.amazonaws aws-java-sdk-directconnect 1.12.390
com.amazonaws aws-java-sdk-directory 1.12.390
com.amazonaws aws-java-sdk-dynamodb 1.12.390
com.amazonaws aws-java-sdk-ec2 1.12.390
com.amazonaws aws-java-sdk-ecs 1.12.390
com.amazonaws aws-java-sdk-efs 1.12.390
com.amazonaws aws-java-sdk-elasticache 1.12.390
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.390
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.390
com.amazonaws aws-java-sdk-elastictranscoder 1.12.390
com.amazonaws aws-java-sdk-emr 1.12.390
com.amazonaws aws-java-sdk-glacier 1.12.390
com.amazonaws aws-java-sdk-glue 1.12.390
com.amazonaws aws-java-sdk-iam 1.12.390
com.amazonaws aws-java-sdk-importexport 1.12.390
com.amazonaws aws-java-sdk-kinesis 1.12.390
com.amazonaws aws-java-sdk-kms 1.12.390
com.amazonaws aws-java-sdk-lambda 1.12.390
com.amazonaws aws-java-sdk-logs 1.12.390
com.amazonaws aws-java-sdk-machinelearning 1.12.390
com.amazonaws aws-java-sdk-opsworks 1.12.390
com.amazonaws aws-java-sdk-rds 1.12.390
com.amazonaws aws-java-sdk-redshift 1.12.390
com.amazonaws aws-java-sdk-route53 1.12.390
com.amazonaws aws-java-sdk-s3 1.12.390
com.amazonaws aws-java-sdk-ses 1.12.390
com.amazonaws aws-java-sdk-simpledb 1.12.390
com.amazonaws aws-java-sdk-simpleworkflow 1.12.390
com.amazonaws aws-java-sdk-sns 1.12.390
com.amazonaws aws-java-sdk-sqs 1.12.390
com.amazonaws aws-java-sdk-ssm 1.12.390
com.amazonaws aws-java-sdk-storagegateway 1.12.390
com.amazonaws aws-java-sdk-sts 1.12.390
com.amazonaws podpora aws-java-sdk-support 1.12.390
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.390
com.amazonaws jmespath-java 1.12.390
com.clearspring.analytics datový proud 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware Kryo-shaded 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml Spolužák 1.3.4
com.fasterxml.jackson.core jackson-annotations 2.14.2
com.fasterxml.jackson.core jackson-core 2.14.2
com.fasterxml.jackson.core jackson-databind 2.14.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.14.2
com.fasterxml.jackson.datatype jackson-datatype-joda 2.14.2
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.13.4
com.fasterxml.jackson.module jackson-module-paranamer 2.14.2
com.fasterxml.jackson.module jackson-module-scala_2.12 2.14.2
com.github.ben-manes.kofein Kofein 2.9.3
com.github.fommil jniloader 1,1
com.github.fommil.netlib native_ref-java 1,1
com.github.fommil.netlib native_ref-java Nativní verze 1.1
com.github.fommil.netlib native_system-java 1,1
com.github.fommil.netlib native_system-java Nativní verze 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64 Nativní verze 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64 Nativní verze 1.1
com.github.luben zstd-jni 1.5.2-5
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.8.9
com.google.crypto.tink Tink 1.7.0
com.google.errorprone error_prone_annotations 2.10.0
com.google.flatbuffers flatbuffers-java 1.12.0
com.google.guava Guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 2.1.214
com.helger Profiler 1.1.1
com.jcraft jsch 0.1.55
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.microsoft.sqlserver mssql-jdbc 11.2.2.jre8
com.ning compress-lzf 1.1.2
com.sun.mail javax.mail 1.5.2
com.sun.xml.bind jaxb-core 2.2.11
com.sun.xml.bind jaxb-impl 2.2.11
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.uber h3 3.7.0
com.univocity univocity-parsers 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.5.0
commons-codec commons-codec 1.15
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.5
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.11.0
commons-lang commons-lang 2.6
commons-logging commons-logging 1.1.3
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 3.0.3
dev.ludovic.netlib Blas 3.0.3
dev.ludovic.netlib lapack 3.0.3
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0.21
io.delta delta-sharing-spark_2.12 0.7.0
io.dropwizard.metrics metriky – jádro 4.2.10
io.dropwizard.metrics metrics-graphite 4.2.10
io.dropwizard.metrics metriky – kontroly stavu 4.2.10
io.dropwizard.metrics metrics-jetty9 4.2.10
io.dropwizard.metrics metrics-jmx 4.2.10
io.dropwizard.metrics metrics-json 4.2.10
io.dropwizard.metrics metrics-jvm 4.2.10
io.dropwizard.metrics metriky – servlety 4.2.10
io.netty netty-all 4.1.87.Final
io.netty netty-buffer 4.1.87.Final
io.netty netty-codec 4.1.87.Final
io.netty netty-codec-http 4.1.87.Final
io.netty netty-codec-http2 4.1.87.Final
io.netty netty-codec-socks 4.1.87.Final
io.netty netty- common 4.1.87.Final
io.netty obslužná rutina netty 4.1.87.Final
io.netty netty-handler-proxy 4.1.87.Final
io.netty netty-resolver 4.1.87.Final
io.netty netty transport 4.1.87.Final
io.netty netty-transport-classes-epoll 4.1.87.Final
io.netty netty-transport-classes-kqueue 4.1.87.Final
io.netty netty-transport-native-epoll 4.1.87.Final
io.netty netty-transport-native-epoll 4.1.87.Final-linux-aarch_64
io.netty netty-transport-native-epoll 4.1.87.Final-linux-x86_64
io.netty netty-transport-native-kqueue 4.1.87.Final-osx-aarch_64
io.netty netty-transport-native-kqueue 4.1.87.Final-osx-x86_64
io.netty netty-transport-native-unix-common 4.1.87.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx Kolekcí 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation aktivace 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1,1
javax.transaction transaction-api 1,1
javax.xml.bind jaxb-api 2.2.11
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.12.1
ml.combust.mleap mleap-databricks-runtime_2.12 v0.20.0-db2
net.java.dev.jna jna 5.8.0
net.razorvine Lák 1.3
net.sf.jpam jpam 1,1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.13.29
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.9.3
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.9.16
org.apache.ant ant-jsch 1.9.16
org.apache.ant ant-launcher 1.9.16
org.apache.arrow arrow-format 11.0.0
org.apache.arrow arrow-memory-core 11.0.0
org.apache.arrow arrow-memory-netty 11.0.0
org.apache.arrow arrow-vector 11.0.0
org.apache.avro Avro 1.11.1
org.apache.avro avro-ipc 1.11.1
org.apache.avro avro-mapred 1.11.1
org.apache.commons commons-collections4 4.4
org.apache.commons commons-compress 1.21
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.6.1
org.apache.commons commons-text 1.10.0
org.apache.kurátor kurátor-client 2.13.0
org.apache.kurátor kurátor-framework 2.13.0
org.apache.kurátor kurátor-recepty 2.13.0
org.apache.datasketches datasketches-java 3.1.0
org.apache.datasketches datasketches-memory 2.0.0
org.apache.derby Derby 10.14.2.0
org.apache.hadoop hadoop-client-runtime 3.3.4
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive hive-shims 2.3.9
org.apache.hive hive-storage-api 2.8.1
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.httpcomponents httpclient 4.5.14
org.apache.httpcomponents httpcore 4.4.16
org.apache.ivy Ivy 2.5.1
org.apache.logging.log4j log4j-1.2-api 2.19.0
org.apache.logging.log4j log4j-api 2.19.0
org.apache.logging.log4j log4j-core 2.19.0
org.apache.logging.log4j log4j-slf4j2-impl 2.19.0
org.apache.mesos mesos 1.11.0-shaded-protobuf
org.apache.orc orc-core 1.8.3-shaded-protobuf
org.apache.orc orc-mapreduce 1.8.3-shaded-protobuf
org.apache.orc orc-shims 1.8.3
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm9-shaded 4.22
org.apache.yetus cílové skupiny a poznámky 0.13.0
org.apache.zookeeper zookeeper 3.6.3
org.apache.zookeeper zookeeper-jute 3.6.3
org.checkerframework checker-qual 3.19.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-compiler 3.0.16
org.codehaus.janino Janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.50.v20221201
org.eclipse.jetty pokračování jetty 9.4.50.v20221201
org.eclipse.jetty jetty-http 9.4.50.v20221201
org.eclipse.jetty jetty-io 9.4.50.v20221201
org.eclipse.jetty jetty-jndi 9.4.50.v20221201
org.eclipse.jetty jetty-plus 9.4.50.v20221201
org.eclipse.jetty jetty-proxy 9.4.50.v20221201
org.eclipse.jetty jetty-security 9.4.50.v20221201
org.eclipse.jetty jetty-server 9.4.50.v20221201
org.eclipse.jetty jetty-servlet 9.4.50.v20221201
org.eclipse.jetty jetty-servlets 9.4.50.v20221201
org.eclipse.jetty jetty-util 9.4.50.v20221201
org.eclipse.jetty jetty-util-ajax 9.4.50.v20221201
org.eclipse.jetty jetty-webapp 9.4.50.v20221201
org.eclipse.jetty jetty-xml 9.4.50.v20221201
org.eclipse.jetty.websocket websocket-api 9.4.50.v20221201
org.eclipse.jetty.websocket websocket-client 9.4.50.v20221201
org.eclipse.jetty.websocket websocket – společné 9.4.50.v20221201
org.eclipse.jetty.websocket websocket-server 9.4.50.v20221201
org.eclipse.jetty.websocket websocket-servlet 9.4.50.v20221201
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-locator 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.36
org.glassfish.jersey.containers jersey-container-servlet-core 2.36
org.glassfish.jersey.core jersey-client 2.36
org.glassfish.jersey.core žerzejové společné 2.36
org.glassfish.jersey.core jersey-server 2.36
org.glassfish.jersey.inject jersey-hk2 2.36
org.hibernate.validator Hibernate-validator 6.1.7.Final
org.javassist Javassist 3.25.0-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains Poznámky 17.0.0
org.joda joda-convert 1,7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.8.0
org.mariadb.jdbc mariadb-java-client 2.7.4
org.mlflow mlflow-spark 2.2.0
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.3.8
org.roaringbitmap RoaringBitmap 0.9.39
org.roaringbitmap Podložky 0.9.39
org.rocksdb rocksdbjni 7.8.3
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.15
org.scala-lang scala-library_2.12 2.12.15
org.scala-lang scala-reflect_2.12 2.12.15
org.scala-lang.modules scala-collection-compat_2.12 2.4.3
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt test-interface 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.2.15
org.scalanlp breeze-macros_2.12 2.1.0
org.scalanlp breeze_2.12 2.1.0
org.scalatest kompatibilní s scalatestem 3.2.15
org.scalatest scalatest-core_2.12 3.2.15
org.scalatest scalatest-diagrams_2.12 3.2.15
org.scalatest scalatest-featurespec_2.12 3.2.15
org.scalatest scalatest-flatspec_2.12 3.2.15
org.scalatest scalatest-freespec_2.12 3.2.15
org.scalatest scalatest-funspec_2.12 3.2.15
org.scalatest scalatest-funsuite_2.12 3.2.15
org.scalatest scalatest-matchers-core_2.12 3.2.15
org.scalatest scalatest-mustmatchers_2.12 3.2.15
org.scalatest scalatest-propspec_2.12 3.2.15
org.scalatest scalatest-refspec_2.12 3.2.15
org.scalatest scalatest-shouldmatchers_2.12 3.2.15
org.scalatest scalatest-wordspec_2.12 3.2.15
org.scalatest scalatest_2.12 3.2.15
org.slf4j jcl-over-slf4j 2.0.6
org.slf4j jul-to-slf4j 2.0.6
org.slf4j slf4j-api 2.0.6
org.threeten threeten-extra 1.7.1
org.tukaani Xz 1,9
org.typelevel algebra_2.12 2.0.1
org.typelevel kočky-kernel_2.12 2.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.1.3.Final
org.xerial sqlite-jdbc 3.42.0.0
org.xerial.snappy snappy-java 1.1.8.4
org.yaml snakeyaml 1.33
Oro Oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.cryptools AmazonCorrettoCryptoProvider 1.6.1-linux-x86_64
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1