Databricks Runtime 7.5 (nepodporované)
Databricks vydala tuto image v prosinci 2020.
Následující poznámky k verzi obsahují informace o modulu Databricks Runtime 7.5, který využívá Apache Spark 3.0.
Nové funkce
Funkce a vylepšení Delta Lake
Tato verze poskytuje následující funkce a vylepšení Delta Lake:
- Asynchronní vytváření kontrolních bodů eliminuje špičky doby trvání mikrodávkového streamování.
- Nejnovější informace o tabulce se teď šíří do katalogů.
MERGE INTOOperace teď podporuje vývoj schématu vnořených sloupců.MERGE INTOoperace teď automaticky používá optimalizované zápisy.MERGE INTOaUPDATEoperace nyní přeloží vnořené sloupce struktury podle názvu.CLONEje ga a teď můžete přepsat vlastnosti tabulky.RESTOREis GA- Implicitní scala zjednodušují rozhraní API sparku pro čtení a zápis.
- Zlepšení propustnosti streamování pomocí
fetchParallelismmožnosti konektoru - Sledování průběhu streamu pomocí nových metrik automatického zavaděče
Asynchronní vytváření kontrolních bodů eliminuje špičky doby trvání mikrodávkového streamování.
Delta Lake ve výchozím nastavení provádí kontrolní body každých 10 potvrzení. Při úlohách streamování může vytváření kontrolních bodů způsobit menší špičky v době trvání mikrodávkové dávky každých 10 potvrzení. Asynchronní vytváření kontrolních bodů eliminuje tyto špičky.
Asynchronní vytvářeníkontrolních Díky asynchronnímu vytváření kontrolních bodů zapisovači streamování také zapisují vylepšené kontrolní body , abyste se nemuseli explicitně vyjádřit k rozšířeným kontrolním bodům.
Pokud chcete zakázat asynchronní vytváření kontrolních bodů, nastavte konfiguraci spark.databricks.delta.checkpoint.async.enabled falseSQL.
Dávkové úlohy nadále synchronně zapisují kontrolní body a doporučujeme povolit asynchronní vytváření kontrolních bodů pro dávkové úlohy.
Nejnovější informace o tabulce se teď šíří do katalogů.
Delta Lake nyní šíří nejnovější informace o tabulce, jako jsou schéma a vlastnosti tabulky, do katalogů, jako je metastore Hive, na základě nejlepšího úsilí. Tyto informace vám můžou pomoct využít nástroje katalogu k pochopení schématu tabulek Delta.
Delta Lake na těchto informacích interně nezávisí, ale snaží se je udržovat v aktualizovaném stavu. Delta Lake navíc ukládá vlastnosti delta.lastUpdateVersion tabulky a delta.lastCommitTimestamp označuje verzi a časové razítko potvrzení, které naposledy odeslalo změnu do metastoru. Metastor se aktualizuje pouze v případech, kdy se schéma tabulky nebo vlastnosti v tabulce neshodují.
Proto výše uvedené vlastnosti tabulky nemusí nutně odrážet nejnovější verzi tabulky.
Pokud informace o tabulce a informace o metastoru nejsou synchronizované, můžete spustit příkaz, jako DESCRIBE <table> je aktualizace metastoru.
Poznámka:
Protože Hive neumožňuje měnit sloupce oddílů, ale tabulky Delta můžou měnit jejich dělení, tabulky Delta se nezobrazují jako dělené v Hivu.
MERGE INTO Operace teď podporuje vývoj schématu vnořených sloupců.
Vývoj schématu vnořených sloupců teď má stejnou sémantiku jako u sloupců nejvyšší úrovně. Do sloupce lze například automaticky přidat StructType nové vnořené sloupce. Podrobnosti najdete v tématu Automatické vývoj schématu ve sloučení .
MERGE INTO operace teď automaticky používá optimalizované zápisy.
Optimalizované zápisy můžou poskytovat mnohem lepší výkon pro MERGE INTO předefinované tabulky, zejména pro MERGE INTO dělené tabulky. Pokud chcete zakázat optimalizované zápisy, nastavte konfiguraci spark.databricks.delta.optimizeWrite.enabled Sparku na false.
MERGE INTO a UPDATE operace nyní přeloží vnořené sloupce struktury podle názvu.
UPDATE Operace a MERGE INTO příkazy aktualizace teď přeloží vnořené sloupce struktury podle názvu. To znamená, že při porovnávání nebo přiřazování sloupců typu StructType nezáleží na pořadí vnořených sloupců (přesně stejně jako pořadí sloupců nejvyšší úrovně). Pokud se chcete vrátit k překladu podle pozice, nastavte konfiguraci spark.databricks.delta.resolveMergeUpdateStructsByName.enabled Sparku na falsehodnotu .
CLONE je ga a teď můžete přepsat vlastnosti tabulky.
Příkaz CLONE je teď obecně dostupný. Viz VYTVOŘENÍ KLONOVÁNÍ TABULKY. Kromě toho teď můžete při použití CLONEzadat přepsání vlastností tabulky . Příklady najdete v tématu Klonování tabulky v Azure Databricks.
RESTORE is GA
Příkaz RESTORE je teď obecně dostupný. Viz OBNOVIT.
Implicitní scala zjednodušují rozhraní API sparku pro čtení a zápis.
K importu io.delta.implicits._ můžete použít metodu delta s rozhraními API pro čtení a zápis sparku.
import io.delta.implicits._
spark.read.delta("/my/table/path")
df.write.delta("/my/table/path")
spark.readStream.delta("/my/table/path")
df.writeStream.delta("/my/table/path")
Zlepšení propustnosti streamování pomocí fetchParallelism možnosti konektoru
Konektor AQS teď podporuje novou možnost fetchParallelism určení paralelismu pro načtení zpráv ze služby fronty.
Sledování průběhu streamu pomocí nových metrik automatického zavaděče
Auto Loader teď hlásí, kolik souborů v backlogu existuje a jak velký je backlog po každé dávce. Tyto metriky můžete použít ke sledování průběhu streamu. Podrobnosti o tom, jak zobrazit metriky, najdete v tématu Co je automatický zavaděč?.
Vylepšení
Širší podpora knihoven vymezených poznámkovými bloky s využitím %pip a %conda příkazů magic
Knihovny s oborem poznámkových bloků teď můžete nainstalovat pomocí %pip magických příkazů v %conda clusterech s vysokou souběžností pomocí seznamů ACL tabulky nebo povolených předávání přihlašovacích údajů.
Přesné zobrazení Spark SQL DECIMAL
Datový typ Spark SQL DECIMAL se teď zobrazuje v tabulkách bez ztráty přesnosti a škálování.
Konektor úložiště ADLS Gen2 založený na Hadoopu 3.3 pro ABFS
Upgradovaná verze konektoru úložiště ADLS Gen2 je založená na Hadoopu 3.3 pro ABFS. Upgradovaný konektor obsahuje řadu vylepšení stability (viz stabilita Hadoopu) a zahrnuje podporu ověřování tokenů SAS.
Další opravy
Odebrali jsme konektor Databricks Kafka pro Streamování Sparku. Použijte konektor Apache Spark.
Upgrady knihoven
- Upgradované knihovny Pythonu:
- koalas upgradoval z verze 1.3.0 na 1.4.0.
- Upgradovali jsme několik nainstalovaných knihoven R. Viz nainstalované knihovny jazyka R.
- Build OpenJDK 8 upgradovaný na Zulu 8.50.0.51-CA-linux64 (build 1.8.0_275-b01).
Apache Spark
Databricks Runtime 7.5 zahrnuje Apache Spark 3.0.1. Tato verze zahrnuje všechny opravy a vylepšení Sparku zahrnuté v Databricks Runtime 7.4 (nepodporované) a také následující další opravy chyb a vylepšení Sparku:
- [SPARK-33611] [UŽIVATELSKÉ ROZHRANÍ] Vyhněte se kódování dvakrát u parametru dotazu přepsané adresy URL proxy serveru.
- [SPARK-33587] [JÁDRO] Ukončení exekutoru u vnořených závažných chyb (7.x)
- [SPARK-33140] [SQL] Vraťte kód, který nepoužívá předaný SparkSession k získání SQLConf.
- [SPARK-33472] [SQL] Úprava pořadí pravidel RemoveRedundantSorts
- [SPARK-33422] [DOC] Oprava správného zobrazení položky levé nabídky
- [SPARK-27421] [SQL] Oprava filtru pro sloupec int a třídu hodnot java.lang.String při vyřezávání sloupce oddílu
- [SPARK-33483] [INFRA] [TESTY] Oprava vzorů vyloučení potkanů a přidání LICENCE
- [SPARK-33464] [INFRA] Přidání nebo odebrání (bez)nezbytné mezipaměti a změna struktury yaml GitHub Actions
- [SPARK-33407] [PYTHON] [7.X] Zjednodušení zprávy o výjimce z uživatelem definovaných funkcí Pythonu (ve výchozím nastavení zakázáno)
- [SPARK-33435] [SQL] DSv2: FUNKCE REFRESH TABLE by měla zneplatnit mezipaměti odkazující na tabulku.
- [SPARK-33358] [SQL] Vrácení kódu při selhání procesu příkazu
- [SPARK-33183] [DBCONNECT] Přidání souboru RemoveRedundantSorts.scala do souboru ALLOW_LIST.txt
- [SPARK-33290] [SQL] FUNKCE REFRESH TABLE by měla zneplatnit mezipaměť, i když samotná tabulka nemusí být uložena do mezipaměti.
- [SPARK-33140] [SQL] Oprava rozdílového kompilace
- [SPARK-33316] [SQL] Přidání testů jednotek pro from_avro a to_avro s registrem schématu a uživatelem poskytlo schéma Avro s možnou hodnotou null
- [SPARK-33404] [SQL] Oprava nesprávných výsledků ve výrazu
date_trunc - [SPARK-33339] [PYTHON] Aplikace Pyspark přestane reagovat kvůli chybě bez výjimky
- [SPARK-33412] [SQL] PřepsatByExpression by měl přeložit svoji podmínku odstranění na základě relace tabulky, nikoli vstupního dotazu.
- [SPARK-33391] [SQL] element_at s CreateArray nerespektuje jeden založený index.
- [SPARK-33316] [SQL] Podpora uživatelského schématu Avro s možnou hodnotou null pro schéma nenulovatelného katalyzátoru v Avro zápisu
- [SPARK-33372] [SQL] Oprava vyřazení kontejneru InSet
- [SPARK-33371] [PYTHON] Aktualizace setup.py a testů pro Python 3.9
- [SPARK-33140] [SQL] Odeberte SQLConf a SparkSession ve všech podtřídách Rule[QueryPlan]
- [SPARK-33338] [SQL] GROUP BY using literal map should not fail
- [SPARK-33306] [SQL] Při přetypování data na řetězec je potřeba časové pásmo.
- [SPARK-33284] [WEB-UI] Na stránce Uživatelské rozhraní úložiště kliknutím na libovolné pole seřadíte tabulku, protože dojde ke ztrátě obsahu záhlaví.
- [SPARK-33362] [SQL] skipSchemaResolution by měl stále vyžadovat překlad dotazu.
- [SPARK-32257] [SQL] Hlášení explicitních chyb pro neplatné použití příkazu SET/RESET
- [SPARK-32406] [SQL] Podpora jednoduchého resetování syntaxe resetování
- [SPARK-32376] [SQL] Práce s chováním při vyplňování hodnoty null unionByName se sloupci struktury
- [SPARK-32308] [SQL] Přesun logiky překladu názvů unionByName z kódu rozhraní API do fáze analýzy
- [SPARK-20044] [UŽIVATELSKÉ ROZHRANÍ] Podpora uživatelského rozhraní Sparku za front-endovým reverzním proxy serverem s použitím adresy URL proxy adresy URL pro vrácení předpony cesty
- [SPARK-33268] [SQL] [PYTHON] Oprava chyb přetypování dat z/do PythonUserDefinedType
- [SPARK-33292] [SQL] Nastavení nejednoznačné reprezentace řetězců ArrayBasedMapData literálu
- [SPARK-33183] [SQL] Oprava pravidla Optimizer EliminateSorts a přidání fyzického pravidla pro odebrání redundantních řazení
- [SPARK-33272] [SQL] Vyřaďte mapování atributů v QueryPlan.transformUpWithNewOutput.
- [SPARK-32090] [SQL] Zlepšení hodnoty UserDefinedType.equal() tak, aby byla symetrická
- [SPARK-33267] [SQL] Oprava problému NPE s filtrem In, pokud jedna z hodnot obsahuje hodnotu null
- [SPARK-33208] [SQL] Aktualizace dokumentu SparkSession#sql
- [SPARK-33260] [SQL] Oprava nesprávných výsledků z SortExec při řazeníOrder je Stream
- [SPARK-33230] [SQL] Potvrzení Hadoopu pro získání jedinečného ID úlohy ve spark.sql.sources.writeJobUID
- [SPARK-33197] [SQL] Změny spark.sql.analyzer.maxIterations se projeví za běhu.
- [SPARK-33228] [SQL] Nezaměňovat data při nahrazení zobrazení se stejným logickým plánem
- [SPARK-32557] [JÁDRO] Protokolování a polykání výjimky pro každou položku na serveru historie
- [SPARK-32436] [JÁDRO] Inicializace numNonEmptyBlocks v HighlyCompressedMapStatus.readExternal
- [SPARK-33131] [SQL] Oprava sad seskupení s klauzulí Having nemůže přeložit kvalifikovaný název sloupce.
- [SPARK-32761] [SQL] Povolit agregaci více složených jedinečných výrazů
- [SPARK-33094] [SQL] Rozšíření konfigurace Hadoopu z možností DS do základního systému souborů HDFS ve formátu ORC
Aktualizace údržby
Viz aktualizace údržby Databricks Runtime 7.5.
Prostředí systému
- Operační systém: Ubuntu 18.04.5 LTS
- Java: Zulu 8.50.0.51-CA-linux64 (build 1.8.0_275-b01)
- Scala: 2.12.10
- Python: 3.7.5
- R: R verze 3.6.3 (2020-02-29)
- Delta Lake 0.7.0
Nainstalované knihovny Pythonu
| Knihovna | Verze | Knihovna | Verze | Knihovna | Verze |
|---|---|---|---|---|---|
| asn1crypto | 1.3.0 | backcall | 0.1.0 | boto3 | 1.12.0 |
| botocore | 1.15.0 | Certifi | 2020.6.20 | cffi | 1.14.0 |
| chardet | 3.0.4 | Kryptografie | 2.8 | Cyklovač | 0.10.0 |
| Cython | 0.29.15 | Dekoratér | 4.4.1 | docutils | 0.15.2 |
| vstupní body | 0.3 | idna | 2.8 | ipykernel | 5.1.4 |
| ipython | 7.12.0 | ipython-genutils | 0.2.0 | Jedi | 0.17.2 |
| jmespath | 0.10.0 | joblib | 0.14.1 | jupyter-client | 5.3.4 |
| jupyter-core | 4.6.1 | verizonsolver | 1.1.0 | Koaly | 1.4.0 |
| matplotlib | 3.1.3 | numpy | 1.18.1 | pandas | 1.0.1 |
| parso | 0.7.0 | Patsy | 0.5.1 | pexpect | 4.8.0 |
| pickleshare | 0.7.5 | Pip | 20.0.2 | prompt-toolkit | 3.0.3 |
| psycopg2 | 2.8.4 | ptyprocess | 0.6.0 | pyarrow | 1.0.1 |
| pycparser | 2.19 | Pygments | 2.5.2 | PyGObject | 3.26.1 |
| pyOpenSSL | 19.1.0 | pyparsing | 2.4.6 | PySocks | 1.7.1 |
| python-apt | 1.6.5+ubuntu0.3 | python-dateutil | 2.8.1 | pytz | 2019.3 |
| pyzmq | 18.1.1 | žádosti | 2.22.0 | s3transfer | 0.3.3 |
| scikit-learn | 0.22.1 | scipy | 1.4.1 | seaborn | 0.10.0 |
| setuptools | 45.2.0 | Šest | 1.14.0 | ssh-import-id | 5.7 |
| statsmodels | 0.11.0 | Tornádo | 6.0.3 | vlastnosti | 4.3.3 |
| bezobslužné upgrady | 0,1 | urllib3 | 1.25.8 | virtualenv | 16.7.10 |
| wcwidth | 0.1.8 | Kolo | 0.34.2 |
Nainstalované knihovny jazyka R
Knihovny R se instalují ze snímku Microsoft CRAN 2020-11-02.
| Knihovna | Verze | Knihovna | Verze | Knihovna | Verze |
|---|---|---|---|---|---|
| askpass | 1,1 | assertthat | 0.2.1 | Backports | 1.1.10 |
| base | 3.6.3 | base64enc | 0.1-3 | BH | 1.72.0-3 |
| bitové | 4.0.4 | bit64 | 4.0.5 | blob | 1.2.1 |
| startování | 1.3-25 | Vařit | 1.0-6 | Brio | 1.1.0 |
| Koště | 0.7.2 | volající | 3.5.1 | caret | 6.0-86 |
| cellranger | 1.1.0 | chron | 2.3-56 | class | 7.3-17 |
| Rozhraní příkazového řádku | 2.1.0 | clipr | 0.7.1 | cluster | 2.1.0 |
| codetools | 0.2-18 | barevný prostor | 1.4-1 | commonmark | 1,7 |
| – kompilátor | 3.6.3 | config | 0.3 | covr | 3.5.1 |
| cpp11 | 0.2.3 | Pastelka | 1.3.4 | Crosstalk | 1.1.0.1 |
| Curl | 4.3 | data.table | 1.13.2 | Power BI | 3.6.3 |
| DBI | 1.1.0 | dbplyr | 1.4.4 | Desc | 1.2.0 |
| devtools | 2.3.2 | diffobj | 0.3.2 | Digest | 0.6.27 |
| dplyr | 0.8.5 | DT | 0,16 | tři tečky | 0.3.1 |
| evaluate | 0,14 | fanynky | 0.4.1 | farver | 2.0.3 |
| fastmap | 1.0.1 | forcats | 0.5.0 | foreach | 1.5.1 |
| Zahraniční | 0.8-76 | Forge | 0.2.0 | Fs | 1.5.0 |
| Generik | 0.1.0 | ggplot2 | 3.3.2 | Gh | 1.1.0 |
| git2r | 0.27.1 | glmnet | 3.0-2 | Globals | 0.13.1 |
| Lepidlo | 1.4.2 | Gower | 0.2.2 | Grafika | 3.6.3 |
| grDevices | 3.6.3 | Mřížky | 3.6.3 | gridExtra | 2.3 |
| gsubfn | 0,7 | gtable | 0.3.0 | Útočiště | 2.3.1 |
| highr | 0,8 | Hms | 0.5.3 | htmltools | 0.5.0 |
| htmlwidgets | 1.5.2 | httpuv | 1.5.4 | httr | 1.4.2 |
| hwriter | 1.3.2 | hwriterPlus | 1.0-3 | Ini | 0.3.1 |
| ipred | 0.9-9 | isoband | 0.2.2 | Iterátory | 1.0.13 |
| jsonlite | 1.7.1 | KernSmooth | 2.23-18 | pletení | 1,30 |
| Označování | 0.4.2 | Později | 1.1.0.1 | Mříže | 0.20-41 |
| Láva | 1.6.8 | lazyeval | 0.2.2 | lifecycle | 0.2.0 |
| lubridate | 1.7.9 | magrittr | 1.5 | Markdown | 1,1 |
| MASS | 7.3-53 | Matrice | 1.2-18 | memoise | 1.1.0 |
| metody | 3.6.3 | mgcv | 1.8-33 | Mime | 0,9 |
| ModelMetrics | 1.2.2.2 | modelr | 0.1.8 | munsell | 0.5.0 |
| nlme | 3.1-150 | nnet | 7.3-14 | numDeriv | 2016.8-1.1 |
| openssl | 1.4.3 | parallel | 3.6.3 | Pilíř | 1.4.6 |
| pkgbuild | 1.1.0 | pkgconfig | 2.0.3 | pkgload | 1.1.0 |
| plogr | 0.2.0 | plyr | 1.8.6 | Chvála | 1.0.0 |
| prettyunits | 1.1.1 | Proc | 1.16.2 | processx | 3.4.4 |
| prodlim | 2019.11.13 | Průběh | 1.2.2 | Sliby | 1.1.1 |
| proto | 1.0.0 | Ps | 1.4.0 | purrr | 0.3.4 |
| r2d3 | 0.2.3 | R6 | 2.5.0 | randomForest | 4.6-14 |
| rappdirs | 0.3.1 | Analýza rcmdcheck | 1.3.3 | RColorBrewer | 1.1-2 |
| Rcpp | 1.0.5 | readr | 1.4.0 | readxl | 1.3.1 |
| recepty | 0.1.14 | Zápas | 1.0.1 | rematch2 | 2.1.2 |
| vzdálená zařízení | 2.2.0 | reprex | 0.3.0 | reshape2 | 1.4.4 |
| rex | 1.2.0 | rjson | 0.2.20 | rlang | 0.4.8 |
| rmarkdown | 2.5 | RODBC | 1.3-16 | roxygen2 | 7.1.1 |
| rpart | 4.1-15 | rprojroot | 1.3-2 | Rserve | 1.8-7 |
| RSQLite | 2.2.1 | rstudioapi | 0,11 | rversions | 2.0.2 |
| rvest | 0.3.6 | Váhy | 1.1.1 | selektor | 0.4-2 |
| sessioninfo | 1.1.1 | Obrazec | 1.4.4 | Lesklé | 1.5.0 |
| sourcetools | 0.1.7 | sparklyr | 1.4.0 | SparkR | 3.0.0 |
| Prostorové | 7.3-11 | Křivky | 3.6.3 | sqldf | 0.4-11 |
| ČTVEREC | 2020.5 | Statistiky | 3.6.3 | Statistiky 4 | 3.6.3 |
| stringi | 1.5.3 | stringr | 1.4.0 | Přežití | 3.2-7 |
| sys | 3.4 | tcltk | 3.6.3 | TeachingDemos | 2.10 |
| testthat | 3.0.0 | tibble | 3.0.4 | tidyr | 1.1.2 |
| tidyselect | 1.1.0 | tidyverse | 1.3.0 | timeDate | 3043.102 |
| tinytex | 0.27 | tools | 3.6.3 | usethis | 1.6.3 |
| utf8 | 1.1.4 | utils | 3.6.3 | Uuid | 0.1-4 |
| vctrs | 0.3.4 | viridisLite | 0.3.0 | Waldo | 0.2.2 |
| vousa | 0,4 | withr | 2.3.0 | xfun | 0.19 |
| xml2 | 1.3.2 | xopen | 1.0.0 | xtable | 1.8-4 |
| yaml | 2.2.1 |
Nainstalované knihovny Java a Scala (verze clusteru Scala 2.12)
| ID skupiny | ID artefaktu | Verze |
|---|---|---|
| antlr | antlr | 2.7.7 |
| com.amazonaws | amazon-kinesis-client | 1.12.0 |
| com.amazonaws | automatické škálování aws-java-sdk | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudfront | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudhsm | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudsearch | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.11.655 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.11.655 |
| com.amazonaws | aws-java-sdk-codedeploy | 1.11.655 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.11.655 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.11.655 |
| com.amazonaws | aws-java-sdk-config | 1.11.655 |
| com.amazonaws | aws-java-sdk-core | 1.11.655 |
| com.amazonaws | aws-java-sdk-datapipeline | 1.11.655 |
| com.amazonaws | aws-java-sdk-directconnect | 1.11.655 |
| com.amazonaws | aws-java-sdk-directory | 1.11.655 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.11.655 |
| com.amazonaws | aws-java-sdk-ec2 | 1.11.655 |
| com.amazonaws | aws-java-sdk-ecs | 1.11.655 |
| com.amazonaws | aws-java-sdk-efs | 1.11.655 |
| com.amazonaws | aws-java-sdk-elasticache | 1.11.655 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.11.655 |
| com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.11.655 |
| com.amazonaws | aws-java-sdk-elastictranscoder | 1.11.655 |
| com.amazonaws | aws-java-sdk-emr | 1.11.655 |
| com.amazonaws | aws-java-sdk-glacier | 1.11.655 |
| com.amazonaws | aws-java-sdk-iam | 1.11.655 |
| com.amazonaws | aws-java-sdk-importexport | 1.11.655 |
| com.amazonaws | aws-java-sdk-kinesis | 1.11.655 |
| com.amazonaws | aws-java-sdk-kms | 1.11.655 |
| com.amazonaws | aws-java-sdk-lambda | 1.11.655 |
| com.amazonaws | aws-java-sdk-logs | 1.11.655 |
| com.amazonaws | aws-java-sdk-machinelearning | 1.11.655 |
| com.amazonaws | aws-java-sdk-opsworks | 1.11.655 |
| com.amazonaws | aws-java-sdk-rds | 1.11.655 |
| com.amazonaws | aws-java-sdk-redshift | 1.11.655 |
| com.amazonaws | aws-java-sdk-route53 | 1.11.655 |
| com.amazonaws | aws-java-sdk-s3 | 1.11.655 |
| com.amazonaws | aws-java-sdk-ses | 1.11.655 |
| com.amazonaws | aws-java-sdk-simpledb | 1.11.655 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.11.655 |
| com.amazonaws | aws-java-sdk-sns | 1.11.655 |
| com.amazonaws | aws-java-sdk-sqs | 1.11.655 |
| com.amazonaws | aws-java-sdk-ssm | 1.11.655 |
| com.amazonaws | aws-java-sdk-storagegateway | 1.11.655 |
| com.amazonaws | aws-java-sdk-sts | 1.11.655 |
| com.amazonaws | podpora aws-java-sdk-support | 1.11.655 |
| com.amazonaws | aws-java-sdk-swf-libraries | 1.11.22 |
| com.amazonaws | aws-java-sdk-workspaces | 1.11.655 |
| com.amazonaws | jmespath-java | 1.11.655 |
| com.chuusai | shapeless_2.12 | 2.3.3 |
| com.clearspring.analytics | datový proud | 2.9.6 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | compilerplugin_2.12 | 0.4.15-10 |
| com.databricks.scalapb | scalapb-runtime_2.12 | 0.4.15-10 |
| com.esotericsoftware | Kryo-shaded | 4.0.2 |
| com.esotericsoftware | minlog | 1.3.0 |
| com.fasterxml | Spolužák | 1.3.4 |
| com.fasterxml.jackson.core | jackson-annotations | 2.10.0 |
| com.fasterxml.jackson.core | jackson-core | 2.10.0 |
| com.fasterxml.jackson.core | jackson-databind | 2.10.0 |
| com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.10.0 |
| com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.10.0 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.10.0 |
| com.fasterxml.jackson.module | jackson-module-scala_2.12 | 2.10.0 |
| com.github.ben-manes.kofein | Kofein | 2.3.4 |
| com.github.fommil | jniloader | 1,1 |
| com.github.fommil.netlib | core | 1.1.2 |
| com.github.fommil.netlib | native_ref-java | 1,1 |
| com.github.fommil.netlib | nativní native_ref javy | 1,1 |
| com.github.fommil.netlib | native_system-java | 1,1 |
| com.github.fommil.netlib | nativní native_system javy | 1,1 |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1,1 |
| com.github.fommil.netlib | netlib-native_system-linux-x86_64-natives | 1,1 |
| com.github.joshelser | dropwizard-metrics-hadoop-metrics2-reporter | 0.1.2 |
| com.github.luben | zstd-jni | 1.4.4-3 |
| com.github.wendykierp | JTransforms | 3.1 |
| com.google.code.findbugs | jsr305 | 3.0.0 |
| com.google.code.gson | gson | 2.2.4 |
| com.google.flatbuffers | flatbuffers-java | 1.9.0 |
| com.google.guava | Guava | 15.0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.h2database | h2 | 1.4.195 |
| com.helger | Profiler | 1.1.1 |
| com.jcraft | jsch | 0.1.50 |
| com.jolbox | bonecp | 0.8.0.RELEASE |
| com.lihaoyi | sourcecode_2.12 | 0.1.9 |
| com.microsoft.sqlserver | mssql-jdbc | 8.2.1.jre8 |
| com.microsoft.azure | azure-data-lake-store-sdk | 2.3.8 |
| com.ning | compress-lzf | 1.0.3 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.tdunning | json | 1.8 |
| com.thoughtworks.paranamer | paranamer | 2.8 |
| com.trueaccord.lenses | lenses_2.12 | 0.4.12 |
| com.twitter | chill-java | 0.9.5 |
| com.twitter | chill_2.12 | 0.9.5 |
| com.twitter | util-app_2.12 | 7.1.0 |
| com.twitter | util-core_2.12 | 7.1.0 |
| com.twitter | util-function_2.12 | 7.1.0 |
| com.twitter | util-jvm_2.12 | 7.1.0 |
| com.twitter | util-lint_2.12 | 7.1.0 |
| com.twitter | util-registry_2.12 | 7.1.0 |
| com.twitter | util-stats_2.12 | 7.1.0 |
| com.typesafe | config | 1.2.1 |
| com.typesafe.scala-logging | scala-logging_2.12 | 3.7.2 |
| com.univocity | univocity-parsers | 2.9.0 |
| com.zaxxer | HikariCP | 3.1.0 |
| commons-beanutils | commons-beanutils | 1.9.4 |
| commons-cli | commons-cli | 1.2 |
| commons-codec | commons-codec | 1,10 |
| commons-collections | commons-collections | 3.2.2 |
| commons-configuration | commons-configuration | 1.6 |
| commons-dbcp | commons-dbcp | 1.4 |
| commons-digester | commons-digester | 1.8 |
| commons-fileupload | commons-fileupload | 1.3.3 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2,4 |
| commons-lang | commons-lang | 2.6 |
| commons-logging | commons-logging | 1.1.3 |
| commons-net | commons-net | 3.1 |
| commons-pool | commons-pool | 1.5.4 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.10 |
| io.airlift | aircompressor | 0.10 |
| io.dropwizard.metrics | metriky – jádro | 4.1.1 |
| io.dropwizard.metrics | metrics-graphite | 4.1.1 |
| io.dropwizard.metrics | metriky – kontroly stavu | 4.1.1 |
| io.dropwizard.metrics | metrics-jetty9 | 4.1.1 |
| io.dropwizard.metrics | metrics-jmx | 4.1.1 |
| io.dropwizard.metrics | metrics-json | 4.1.1 |
| io.dropwizard.metrics | metrics-jvm | 4.1.1 |
| io.dropwizard.metrics | metriky – servlety | 4.1.1 |
| io.netty | netty-all | 4.1.47.Final |
| io.prometheus | simpleclient | 0.7.0 |
| io.prometheus | simpleclient_common | 0.7.0 |
| io.prometheus | simpleclient_dropwizard | 0.7.0 |
| io.prometheus | simpleclient_pushgateway | 0.7.0 |
| io.prometheus | simpleclient_servlet | 0.7.0 |
| io.prometheus.jmx | Kolekcí | 0.12.0 |
| jakarta.annotation | jakarta.annotation-api | 1.3.5 |
| jakarta.validation | jakarta.validation-api | 2.0.2 |
| jakarta.ws.rs | jakarta.ws.rs-api | 2.1.6 |
| javax.activation | aktivace | 1.1.1 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.servlet | javax.servlet-api | 3.1.0 |
| javax.servlet.jsp | jsp-api | 2.1 |
| javax.transaction | jta | 1,1 |
| javax.transaction | transaction-api | 1,1 |
| javax.xml.bind | jaxb-api | 2.2.2 |
| javax.xml.stream | stax-api | 1.0-2 |
| javolution | javolution | 5.5.1 |
| jline | jline | 2.14.6 |
| joda-time | joda-time | 2.10.5 |
| log4j | apache-log4j-extra | 1.2.17 |
| log4j | log4j | 1.2.17 |
| net.razorvine | pyrolit | 4.30 |
| net.sf.jpam | jpam | 1,1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | super-csv | 2.2.0 |
| net.snowflake | snowflake-ingest-sdk | 0.9.6 |
| net.snowflake | snowflake-jdbc | 3.12.8 |
| net.snowflake | spark-snowflake_2.12 | 2.8.1-spark_3.0 |
| net.sourceforge.f2j | arpack_combined_all | 0,1 |
| org.acplt.remotetea | remotetea-oncrpc | 1.1.2 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | antlr-runtime | 3.5.2 |
| org.antlr | antlr4-runtime | 4.7.1 |
| org.antlr | stringtemplate | 3.2.1 |
| org.apache.ant | ant | 1.9.2 |
| org.apache.ant | ant-jsch | 1.9.2 |
| org.apache.ant | ant-launcher | 1.9.2 |
| org.apache.arrow | arrow-format | 0.15.1 |
| org.apache.arrow | šipka – paměť | 0.15.1 |
| org.apache.arrow | arrow-vector | 0.15.1 |
| org.apache.avro | Avro | 1.8.2 |
| org.apache.avro | avro-ipc | 1.8.2 |
| org.apache.avro | avro-mapred-hadoop2 | 1.8.2 |
| org.apache.commons | commons-compress | 1.8.1 |
| org.apache.commons | commons-crypto | 1.0.0 |
| org.apache.commons | commons-lang3 | 3.9 |
| org.apache.commons | commons-math3 | 3.4.1 |
| org.apache.commons | commons-text | 1.6 |
| org.apache.kurátor | kurátor-client | 2.7.1 |
| org.apache.kurátor | kurátor-framework | 2.7.1 |
| org.apache.kurátor | kurátor-recepty | 2.7.1 |
| org.apache.derby | Derby | 10.12.1.1 |
| org.apache.directory.api | api-asn1-api | 1.0.0-M20 |
| org.apache.directory.api | api-util | 1.0.0-M20 |
| org.apache.directory.server | apacheds-i18n | 2.0.0-M15 |
| org.apache.directory.server | apacheds-kerberos-codec | 2.0.0-M15 |
| org.apache.hadoop | hadoop-annotations | 2.7.4 |
| org.apache.hadoop | hadoop-auth | 2.7.4 |
| org.apache.hadoop | hadoop-client | 2.7.4 |
| org.apache.hadoop | hadoop-common | 2.7.4 |
| org.apache.hadoop | hadoop-hdfs | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-app | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-common | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-core | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-jobclient | 2.7.4 |
| org.apache.hadoop | hadoop-mapreduce-client-shuffle | 2.7.4 |
| org.apache.hadoop | hadoop-yarn-api | 2.7.4 |
| org.apache.hadoop | hadoop-yarn-client | 2.7.4 |
| org.apache.hadoop | hadoop-yarn-common | 2.7.4 |
| org.apache.hadoop | hadoop-yarn-server-common | 2.7.4 |
| org.apache.hive | hive-beeline | 2.3.7 |
| org.apache.hive | hive-cli | 2.3.7 |
| org.apache.hive | Hive – společné | 2.3.7 |
| org.apache.hive | Hive-exec-core | 2.3.7 |
| org.apache.hive | hive-jdbc | 2.3.7 |
| org.apache.hive | hive-llap-client | 2.3.7 |
| org.apache.hive | hive-llap-common | 2.3.7 |
| org.apache.hive | hive-metastore | 2.3.7 |
| org.apache.hive | hive-serde | 2.3.7 |
| org.apache.hive | hive-shims | 2.3.7 |
| org.apache.hive | hive-storage-api | 2.7.1 |
| org.apache.hive | hive-vector-code-gen | 2.3.7 |
| org.apache.hive.shims | hive-shims-0.23 | 2.3.7 |
| org.apache.hive.shims | hive-shims-common | 2.3.7 |
| org.apache.hive.shims | hive-shims-scheduler | 2.3.7 |
| org.apache.htrace | htrace-core | 3.1.0-inkubační |
| org.apache.httpcomponents | httpclient | 4.5.6 |
| org.apache.httpcomponents | httpcore | 4.4.12 |
| org.apache.ivy | Ivy | 2.4.0 |
| org.apache.mesos | mesos-shaded-protobuf | 1.4.0 |
| org.apache.orc | orc-core | 1.5.10 |
| org.apache.orc | orc-mapreduce | 1.5.10 |
| org.apache.orc | orc-shims | 1.5.10 |
| org.apache.parquet | parquet-column | 1.10.1-databricks6 |
| org.apache.parquet | parquet-common | 1.10.1-databricks6 |
| org.apache.parquet | kódování parquet | 1.10.1-databricks6 |
| org.apache.parquet | parquet-format | 2.4.0 |
| org.apache.parquet | parquet-hadoop | 1.10.1-databricks6 |
| org.apache.parquet | parquet-jackson | 1.10.1-databricks6 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.12.0 |
| org.apache.velocity | rychlost | 1.5 |
| org.apache.xbean | xbean-asm7-shaded | 4.15 |
| org.apache.yetus | cílové skupiny a poznámky | 0.5.0 |
| org.apache.zookeeper | zookeeper | 3.4.14 |
| org.codehaus.jackson | jackson-core-asl | 1.9.13 |
| org.codehaus.jackson | jackson-jaxrs | 1.9.13 |
| org.codehaus.jackson | jackson-mapper-asl | 1.9.13 |
| org.codehaus.jackson | jackson-xc | 1.9.13 |
| org.codehaus.janino | commons-compiler | 3.0.16 |
| org.codehaus.janino | Janino | 3.0.16 |
| org.datanucleus | datanucleus-api-jdo | 4.2.4 |
| org.datanucleus | datanucleus-core | 4.1.17 |
| org.datanucleus | datanucleus-rdbms | 4.1.19 |
| org.datanucleus | javax.jdo | 3.2.0-m3 |
| org.eclipse.jetty | jetty-client | 9.4.18.v20190429 |
| org.eclipse.jetty | pokračování jetty | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-http | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-io | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-jndi | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-plus | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-proxy | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-security | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-server | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-servlet | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-servlets | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-util | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-webapp | 9.4.18.v20190429 |
| org.eclipse.jetty | jetty-xml | 9.4.18.v20190429 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.6.1 |
| org.glassfish.hk2 | hk2-locator | 2.6.1 |
| org.glassfish.hk2 | hk2-utils | 2.6.1 |
| org.glassfish.hk2 | osgi-resource-locator | 1.0.3 |
| org.glassfish.hk2.external | aopalliance-repackaged | 2.6.1 |
| org.glassfish.hk2.external | jakarta.inject | 2.6.1 |
| org.glassfish.jersey.containers | jersey-container-servlet | 2.30 |
| org.glassfish.jersey.containers | jersey-container-servlet-core | 2.30 |
| org.glassfish.jersey.core | jersey-client | 2.30 |
| org.glassfish.jersey.core | žerzejové společné | 2.30 |
| org.glassfish.jersey.core | jersey-server | 2.30 |
| org.glassfish.jersey.inject | jersey-hk2 | 2.30 |
| org.glassfish.jersey.media | jersey-media-jaxb | 2.30 |
| org.hibernate.validator | Hibernate-validator | 6.1.0.Final |
| org.javassist | Javassist | 3.25.0-GA |
| org.jboss.logging | jboss-logging | 3.3.2.Final |
| org.jdbi | jdbi | 2.63.1 |
| org.joda | joda-convert | 1,7 |
| org.jodd | jodd-core | 3.5.2 |
| org.json4s | json4s-ast_2.12 | 3.6.6 |
| org.json4s | json4s-core_2.12 | 3.6.6 |
| org.json4s | json4s-jackson_2.12 | 3.6.6 |
| org.json4s | json4s-scalap_2.12 | 3.6.6 |
| org.lz4 | lz4-java | 1.7.1 |
| org.mariadb.jdbc | mariadb-java-client | 2.1.2 |
| org.objenesis | objenesis | 2.5.1 |
| org.postgresql | postgresql | 42.1.4 |
| org.roaringbitmap | RoaringBitmap | 0.7.45 |
| org.roaringbitmap | Podložky | 0.7.45 |
| org.rocksdb | rocksdbjni | 6.2.2 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | scala-compiler_2.12 | 2.12.10 |
| org.scala-lang | scala-library_2.12 | 2.12.10 |
| org.scala-lang | scala-reflect_2.12 | 2.12.10 |
| org.scala-lang.modules | scala-collection-compat_2.12 | 2.1.1 |
| org.scala-lang.modules | scala-parser-combinators_2.12 | 1.1.2 |
| org.scala-lang.modules | scala-xml_2.12 | 1.2.0 |
| org.scala-sbt | test-interface | 1.0 |
| org.scalacheck | scalacheck_2.12 | 1.14.2 |
| org.scalactic | scalactic_2.12 | 3.0.8 |
| org.scalanlp | breeze-macros_2.12 | 1.0 |
| org.scalanlp | breeze_2.12 | 1.0 |
| org.scalatest | scalatest_2.12 | 3.0.8 |
| org.slf4j | jcl-over-slf4j | 1.7.30 |
| org.slf4j | jul-to-slf4j | 1.7.30 |
| org.slf4j | slf4j-api | 1.7.30 |
| org.slf4j | slf4j-log4j12 | 1.7.30 |
| org.spark-project.spark | Nepoužité | 1.0.0 |
| org.springframework | spring-core | 4.1.4.RELEASE |
| org.springframework | spring-test | 4.1.4.RELEASE |
| org.threeten | threeten-extra | 1.5.0 |
| org.tukaani | Xz | 1.5 |
| org.typelevel | algebra_2.12 | 2.0.0-M2 |
| org.typelevel | kočky-kernel_2.12 | 2.0.0-M4 |
| org.typelevel | machinist_2.12 | 0.6.8 |
| org.typelevel | makro-compat_2.12 | 1.1.1 |
| org.typelevel | spire-macros_2.12 | 0.17.0-M1 |
| org.typelevel | spire-platform_2.12 | 0.17.0-M1 |
| org.typelevel | spire-util_2.12 | 0.17.0-M1 |
| org.typelevel | spire_2.12 | 0.17.0-M1 |
| org.wildfly.openssl | wildfly-openssl | 1.0.7.Final |
| org.xerial | sqlite-jdbc | 3.8.11.2 |
| org.xerial.snappy | snappy-java | 1.1.7.5 |
| org.yaml | snakeyaml | 1,24 |
| Oro | Oro | 2.0.8 |
| pl.edu.icm | JLargeArrays | 1.5 |
| software.amazon.ion | ion-java | 1.0.2 |
| stax | stax-api | 1.0.1 |
| xmlenc | xmlenc | 0,52 |