Databricks Runtime 5.4 (nepodporované)
Databricks vydala tuto image v červnu 2019.
Následující poznámky k verzi obsahují informace o modulu Databricks Runtime 5.4, který využívá Apache Spark.
Nové funkce
Delta Lake v Azure Databricks přidává automatické optimalizace (Public Preview)
Když dnes zapisujete data do cloudového úložiště, potřebujete komprimovat soubory pro optimální výkon vstupně-výstupních operací. Musíte se starat o správnou velikost souboru, jak často komprimovat soubory, jak velký cluster používat atd. Abychom tuto třídu problémů vyřešili, s radostí zavádíme automatické optimalizace s Delta Lake v Azure Databricks. Během každého zápisu do tabulek Delta automaticky zjistíme správné velikosti souborů a kompaktní soubory, abyste se nemuseli starat o optimalizaci rozložení úložiště. Pokud se truejedná o auto-optimize možnost zápisu, Azure Databricks automaticky určí, jestli je potřeba provést optimalizaci, a optimalizuje malé soubory. Podrobnosti najdete v tématu Konfigurace Delta Lake pro řízení velikosti datového souboru.
Obecně dostupné nástroje knihovny
Nástroje knihovny jsou teď obecně dostupné. Tato funkce umožňuje manipulovat s knihovnami Pythonu v rámci oboru relace poznámkového bloku. Viz Nástroj knihovny (dbutils.library) (starší verze).
Obecně dostupná Připojení Databricks
Služba Databricks Připojení je teď obecně dostupná. Tato funkce je klientská knihovna Sparku, která umožňuje připojit oblíbené integrované vývojové prostředí (IntelliJ, Eclipse, PyCharm, RStudio), server poznámkového bloku (Zeppelin, Jupyter) a další vlastní aplikace k clusterům Azure Databricks a spustit kód Sparku. Viz Připojení Databricks.
Binární zdroj dat souboru
Zdroj dat binárního souboru čte binární soubory a převede každý soubor na jeden záznam, který obsahuje nezpracovaný obsah a metadata souboru. Teď můžete efektivně číst libovolné soubory do datového rámce Sparku, aniž byste museli navštívit obsah souborů. To je užitečné hlavně v případě, že chcete pomocí Sparku načíst velké soubory, jako jsou obrázky, pro vyhodnocování. Viz Binární soubor.
Vylepšení
Ukládání do mezipaměti na disku
Ukládání do mezipaměti na disku je teď předem nakonfigurované pro instance Lsv2. Mezipaměť však není ve výchozím nastavení povolená. Informace o tom, jak ji povolit, najdete v tématu Povolení nebo zakázání mezipaměti disku.
Předávání přihlašovacích údajů Azure AD v Azure Data Lake Storage Gen2
Teď se podporuje připojení systému souborů Azure Data Lake Storage (ADLS) Gen2 s předáváním přihlašovacích údajů Microsoft Entra ID (dříve Azure Active Directory). Viz Azure Data Lake Storage Gen2.
Upgrade jazyka R na verzi 3.6.0
Základní verze R se upgraduje z verze 3.5.2 na verzi 3.6.0.
Apache Spark
Databricks Runtime 5.4 zahrnuje Apache Spark 2.4.3. Tato verze zahrnuje všechny opravy a vylepšení Sparku zahrnuté v Databricks Runtime 5.3 (nepodporované) a také následující další opravy chyb a vylepšení Sparku:
- [SPARK-27596][SQL] Možnost dotazování JDBC nefunguje pro databázi Oracle.
- [SPARK-27240][PYTHON] Pro argument typu struktury v UDF skalární knihovny pandas použijte datový rámec pandas.
- [SPARK-26745][SQL] [TESTY] Testovací případ JsonSuite: prázdný řádek –> počet záznamů 0
- [SPARK-25535][JÁDRO] Řešení chyb při zpracování chyb v commons-crypto
- [SPARK-26891][YARN] Oprava flaky test v YarnSchedulerBackendSuite
- [SPARK-27563][SQL] [TEST] automaticky získat nejnovější verze Sparku v HiveExternalCatalogVersionsSuite
- [SPARK-27494][SS] Hodnoty null nefungují ve zdroji Kafka v2
- [SPARK-27550][TEST] Oprava test-dependencies.sh nepoužívat profil kafka-0-8 pro Scala-2.12
- [SPARK-26992][STS] Oprava správného doručení fondu plánovačů služby STS
- [SPARK-27544][PYTHON] [TEST] Oprava testovacího skriptu Pythonu pro práci na sestavení Scala-2.12
- [SPARK-27539][SQL] Oprava nepřesného agregovaného odhadu outputRows se sloupcem obsahujícím hodnoty null
- [SPARK-27469][BUILD] Sjednocení dep commons-beanutils na nejnovější verzi 1.9.3
- [SPARK-27419][ZPRACOVAT] [DOCS] Přidání poznámky o změně spark.executor.heartbeatInterval do průvodce migrací
- [SPARK-27496][JÁDRO] Závažné chyby by se také měly odeslat zpět odesílateli.
- [SPARK-25079][PYTHON] Aktualizujte spustitelný soubor Python3 na verzi 3.6.x.
- [SPARK-27163][PYTHON] Vyčištění a konsolidace funkcí UDF knihovny pandas
- [SPARK-27403][SQL] Oprava updateTableStats pro aktualizaci statistik tabulek vždy s novými statistikami nebo none
- [SPARK-27479][BUILD] Skrytí dokumentace k rozhraní API pro org.apache.spark.util.kvstore
- [SPARK-27446][R] Pokud je k dispozici, použijte existující soubor Spark Conf.
- [SPARK-27453] Předání partitionBy jako možností v prvku DataFrameWriter
- [SPARK-27454][SPARK-27454][HOT-FIX] [ML] [SQL] Cherrypick (oprava ve zdroji dat image Sparku selže, když narazíte na některé neplatné image)
- [SPARK-27351][SQL] Nesprávný odhad outputRows po AggregateEstimation s pouze sloupcem s hodnotou null
- [SPARK-27314][SQL] Odstranění duplicitních dat výrazů pro Sjednocení
- [SPARK-27394][WEBI] V případě potřeby vyprázdnění LiveEntity při příjmu SparkListenerExecutorMetricsUpdate (backport 2.4)
- [SPARK-27406][SQL] Nezabezpečená serializaceArrayData se přeruší, když mají dva počítače jinou velikost OOps
- [SPARK-27419][JÁDRO] Vyhněte se intervalu přetypování prezenčních signálů na sekundy (2,4)
- [SPARK-27391][SS] Neicializovat opožděnou val v úloze ContinuousExecution.
- [SPARK-27390][JÁDRO] [SQL] [TEST] Oprava neshody názvů balíčků
- [SPARK-27358][UŽIVATELSKÉ ROZHRANÍ] Aktualizace jquery na verzi 1.12.x za účelem vyzvednutí oprav zabezpečení
- [SPARK-27216][JÁDRO] Upgrade RoaringBitmap na 0.7.45 za účelem opravy problému s nebezpečným Ser/dser Kryo
- [SPARK-27382][SQL] [TEST] Aktualizace testování Sparku 2.4.x v HiveExternalCatalogVersionsSuite
- [SPARK-27338][JÁDRO] Oprava vzájemného zablokování mezi unsafeExternalSorter a TaskMemoryManager
- [SPARK-27338][JÁDRO] [FOLLOWUP] Odebrání koncového místa
- [SPARK-27338][JÁDRO] Oprava zablokování v NezabezpečenéExternalSorter.SpillableIterator při zamykání nebezpečnýchExternalSorter.SpillableIterator a TaskMemoryManager
- [SPARK-27346][SQL] Uvolnění podmínky výrazu výrazu newline v poli examples
- [SPARK-26998][JÁDRO] Odebrání konfigurace SSL z exekutorů
- [SPARK-27244][JÁDRO] [TEST] [FOLLOWUP] toDebugString redacts sensitive information
- [SPARK-27267][ZPRACOVAT] Aktualizace manifestu závislostí hadoop-2.6
- [SPARK-27267][JÁDRO] Aktualizace přichycení, aby nedocházelo k chybě při dekomprimování prázdných serializovaných dat
- [SPARK-27301][DSTREAM] Zkraťte životní cyklus souboru FileSystem uložený v mezipaměti na vnitřní obor metody vyčištění.
- [SPARK-27244][JÁDRO] Redact Passwords while using Option logConf=true
- [SPARK-26208][SQL] Přidání hlaviček do prázdných souborů CSV při header=true
- [SPARK-27275][JÁDRO] Oprava potenciálního poškození v EncryptedMessage.transferTo (2.4)
- [SPARK-23836][PYTHON] Přidání podpory pro vrácení StructType v UDF scalar pandas
- [SPARK-26961][JÁDRO] Povolení funkce paralelního načítání tříd
- [SPARK-27274][DOCS] Oprava odkazů na scala 2.11 v dokumentaci 2.4.1+ Poznámka: Podpora 2.11 je ve verzi 2.4.1 nebo novější zastaralá.
- [SPARK-27198][JÁDRO] Neshoda intervalu prezenčních signálů v ovladači a exekutoru
- [SPARK-27094][YARN] Pracujte s přerušením nití rackResolver.
- [SPARK-24935][SQL] Oprava Hive UDAF se dvěma vyrovnávacími paměťmi agregace
- [SPARK-27160][SQL] Oprava typu DecimalType při vytváření filtrů orc
- [SPARK-26606][JÁDRO] Správné zpracování možností ovladače při odesílání do samostatného režimu clusteru prostřednictvím starší verze klienta
- [SPARK-27221][SQL] Vylepšení chybové zprávy assert ve TreeNode.parseToJson (5.x)
- [SPARK-27102][R] [PYTHON] [JÁDRO] Odebrání odkazů na kódy Scala Pythonu v kódech jazyka Scala jazyka R
- [SPARK-27159][SQL] Aktualizujte dialekt serveru mssql tak, aby podporoval binární typ.
- [SPARK-27112][CORE] : Vytvoření řazení prostředků mezi vlákny pro vyřešení zablokování, ke kterým došlo při pokusu o ukončení exekutorů z důvodu dynamického přidělení nebo seznamu blokovaných položek
- [SPARK-27178][K8S] Přidání balíčku nss pro opravu testů
- [SPARK-27045][SQL] Karta SQL v uživatelském rozhraní zobrazuje skutečné SQL místo volání v případě SparkSQLDriveru
- [SPARK-27119][SQL] Nepřikazujte schéma při čtení tabulky Hive serde s nativním zdrojem dat
- [SPARK-27165][SPARK-27107][BUILD] [SQL] Upgrade Apache ORC na verzi 1.5.5
- [SPARK-26742][K8S] Aktualizace verze klienta k8s na verzi 4.1.2
- [SPARK-26927][JÁDRO] Při zpracování událostí ve Správci dynamického přidělování se ujistěte, že je exekutor aktivní.
- [SPARK-27097][CHERRY-PICK 2.4] Vyhněte se vkládání posunů závislých na platformě doslova ve vygenerovaném kódu v celé fázi.
- [SPARK-27111][SS] Oprava závodu, kdy průběžný dotaz může selhat s přerušenímexception (5.x)
- [SPARK-27111][SS] Oprava závodu, kdy průběžný dotaz může selhat s přerušenímexception
- [SPARK-27080][SQL] oprava chyby: mergeWithMetastoreSchema s jednotným porovnáním malých písmen
- [SPARK-26604][JÁDRO] Vyčištění registrace kanálu pro StreamManager
- [SPARK-27016][SQL] [BUILD] Zacházet se všemi upozorněními antlru jako s chybami při generování analyzátoru ze souboru gramatiky SQL
- [SPARK-25863][SPARK-21871][SQL] Zkontrolujte, jestli je statistika velikosti kódu prázdná nebo není v updateAndGetCompilationStats.
- [SPARK-27078][SQL] Oprava Chyby NoSuchFieldError při čtení materializovaných zobrazení Hive
- [SPARK-27019][SQL] [WEBI] onJobStart se stane po onExecutionEnd by neměl přepsat kvstore
- [SPARK-27065][CORE] Vyhněte se více než jednomu aktivnímu správci sady úkolů pro určitou fázi.
- [SPARK-24669][SQL] Zneplatnění tabulek v případě DROP DATABASE CASCADE
- [SPARK-26932][DOC] Přidání upozornění pro problém se čtečkou orc Hive 2.1.1
- [SPARK-25139][SPARK-18406][JÁDRO] Vyhýbejte se nefatalům k ukončení exekutoru v PythonRunneru
Aktualizace údržby
Viz aktualizace údržby Databricks Runtime 5.4.
Prostředí systému
- Operační systém: Ubuntu 16.04.6 LTS
- Java: 1.8.0_191
- Scala: 2.11.12
- Python: 2.7.12 pro clustery Python 2 a 3.5.2 pro clustery Python 3.
- R: R verze 3.6.0 (2019-04-26)
- Clustery GPU: Nainstalují se následující knihovny NVIDIA GPU:
- Ovladač Tesla 375.66
- CUDA 9.0
- cuDNN 7.0
Poznámka:
I když se Scala 2.12 podporuje v Apache Sparku 2.4, nepodporuje se v Databricks Runtime 5.4.
Nainstalované knihovny Pythonu
| Knihovna | Verze | Knihovna | Verze | Knihovna | Verze |
|---|---|---|---|---|---|
| ansi2html | 1.1.1 | argparse | 1.2.1 | backports-abc | 0.5 |
| boto | 2.42.0 | boto3 | 1.4.1 | botocore | 1.4.70 |
| pivovar2mpl | 1.4.1 | Certifi | 2016.2.28 | cffi | 1.7.0 |
| chardet | 2.3.0 | colorama | 0.3.7 | configobj | 5.0.6 |
| Kryptografie | 1.5 | Cyklovač | 0.10.0 | Cython | 0.24.1 |
| Dekoratér | 4.0.10 | docutils | 0,14 | enum34 | 1.1.6 |
| et-xmlfile | 1.0.1 | freetype-py | 1.0.2 | funcsigs | 1.0.2 |
| fusepy | 2.0.4 | Futures | 3.2.0 | ggplot | 0.6.8 |
| html5lib | 0,999 | idna | 2.1 | ipaddress | 1.0.16 |
| ipython | 2.2.0 | ipython-genutils | 0.1.0 | jdcal | 1.2 |
| Jinja2 | 2.8 | jmespath | 0.9.0 | llvmlite | 0.13.0 |
| lxml | 3.6.4 | Revize Sejf | 0.23 | matplotlib | 1.5.3 |
| mpld3 | 0,2 | msgpack-python | 0.4.7 | ndg-httpsclient | 0.3.3 |
| numba | 0.28.1 | numpy | 1.11.1 | openpyxl | 2.3.2 |
| pandas | 0.19.2 | pathlib2 | 2.1.0 | Patsy | 0.4.1 |
| pexpect | 4.0.1 | pickleshare | 0.7.4 | Polštář | 3.3.1 |
| Pip | 19.1.1 | Ply | 3.9 | prompt-toolkit | 1.0.7 |
| psycopg2 | 2.6.2 | ptyprocess | 0.5.1 | py4j | 0.10.3 |
| pyarrow | 0.8.0 | pyasn1 | 0.1.9 | pycparser | 2.14 |
| Pygments | 2.1.3 | PyGObject | 3.20.0 | pyOpenSSL | 16.0.0 |
| pyparsing | 2.2.0 | pypng | 0.0.18 | Python | 2.7.12 |
| python-dateutil | 2.5.3 | python-geohash | 0.8.5 | pytz | 2016.6.1 |
| žádosti | 2.11.1 | s3transfer | 0.1.9 | scikit-learn | 0.18.1 |
| scipy | 0.18.1 | Pročesat | 0.32 | seaborn | 0.7.1 |
| setuptools | 41.0.1 | simplejson | 3.8.2 | simples3 | 1.0 |
| singledispatch | 3.4.0.3 | Šest | 1.10.0 | statsmodels | 0.6.1 |
| Tornádo | 5.1.1 | vlastnosti | 4.3.0 | urllib3 | 1.19.1 |
| virtualenv | 16.1.0 | wcwidth | 0.1.7 | Kolo | 0.33.3 |
| wsgiref | 0.1.2 |
Nainstalované knihovny jazyka R
| Knihovna | Verze | Knihovna | Verze | Knihovna | Verze |
|---|---|---|---|---|---|
| abind | 1.4-5 | askpass | 1,1 | assertthat | 0.2.1 |
| Backports | 1.1.3 | base | 3.6.0 | base64enc | 0.1-3 |
| BH | 1.69.0-1 | bitové | 1.1-14 | bit64 | 0.9-7 |
| bitops | 1.0-6 | blob | 1.1.1 | startování | 1.3-20 |
| Vařit | 1.0-6 | volající | 3.2.0 | car | 3.0-2 |
| carData | 3.0-2 | caret | 6.0-82 | cellranger | 1.1.0 |
| chron | 2.3-53 | class | 7.3-15 | Rozhraní příkazového řádku | 1.1.0 |
| clipr | 0.5.0 | clisymbols | 1.2.0 | cluster | 2.0.8 |
| codetools | 0.2-16 | barevný prostor | 1.4-1 | commonmark | 1,7 |
| – kompilátor | 3.6.0 | config | 0.3 | Pastelka | 1.3.4 |
| Curl | 3.3 | data.table | 1.12.0 | Power BI | 3.6.0 |
| DBI | 1.0.0 | dbplyr | 1.3.0 | Desc | 1.2.0 |
| devtools | 2.0.1 | Digest | 0.6.18 | doMC | 1.3.5 |
| dplyr | 0.8.0.1 | tři tečky | 0.1.0 | fanynky | 0.4.0 |
| forcats | 0.4.0 | foreach | 1.4.4 | Zahraniční | 0.8-71 |
| Forge | 0.2.0 | Fs | 1.2.7 | Gbm | 2.1.5 |
| Generik | 0.0.2 | ggplot2 | 3.1.0 | Gh | 1.0.1 |
| git2r | 0.25.2 | glmnet | 2.0-16 | Lepidlo | 1.3.1 |
| Gower | 0.2.0 | Grafika | 3.6.0 | grDevices | 3.6.0 |
| Mřížky | 3.6.0 | gridExtra | 2.3 | gsubfn | 0,7 |
| gtable | 0.3.0 | h2o | 3.22.1.1 | Útočiště | 2.1.0 |
| Hms | 0.4.2 | htmltools | 0.3.6 | htmlwidgets | 1.3 |
| httr | 1.4.0 | hwriter | 1.3.2 | hwriterPlus | 1.0-3 |
| Ini | 0.3.1 | ipred | 0.9-8 | Iterátory | 1.0.10 |
| jsonlite | 1.6 | KernSmooth | 2.23-15 | Označování | 0.3 |
| Mříže | 0.20-38 | Láva | 1.6.5 | lazyeval | 0.2.2 |
| malý | 0.3.7 | lme4 | 1.1-21 | lubridate | 1.7.4 |
| magrittr | 1.5 | mapproj | 1.2.6 | Mapy | 3.3.0 |
| maptools | 0.9-5 | MASS | 7.3-51.1 | Matice | 1.2-17 |
| Maticové modely | 0.4-1 | memoise | 1.1.0 | metody | 3.6.0 |
| mgcv | 1.8-28 | Mime | 0,6 | minqa | 1.2.4 |
| ModelMetrics | 1.2.2 | munsell | 0.5.0 | mvtnorm | 1.0-10 |
| nlme | 3.1-139 | nloptr | 1.2.1 | nnet | 7.3-12 |
| numDeriv | 2016.8-1 | openssl | 1.3 | openxlsx | 4.1.0 |
| parallel | 3.6.0 | pbkrtest | 0.4-7 | Pilíř | 1.3.1 |
| pkgbuild | 1.0.3 | pkgconfig | 2.0.2 | pkgKitten | 0.1.4 |
| pkgload | 1.0.2 | plogr | 0.2.0 | plyr | 1.8.4 |
| Chvála | 1.0.0 | prettyunits | 1.0.2 | Proc | 1.14.0 |
| processx | 3.3.0 | prodlim | 2018.04.18 | Průběh | 1.2.0 |
| proto | 1.0.0 | Ps | 1.3.0 | purrr | 0.3.2 |
| quantreg | 5.38 | R.methodsS3 | 1.7.1 | R.oo | 1.22.0 |
| R.utils | 2.8.0 | r2d3 | 0.2.3 | R6 | 2.4.0 |
| randomForest | 4.6-14 | rappdirs | 0.3.1 | Analýza rcmdcheck | 1.3.2 |
| RColorBrewer | 1.1-2 | Rcpp | 1.0.1 | RcppEigen | 0.3.3.5.0 |
| RcppRoll | 0.3.0 | RCurl | 1.95-4.12 | readr | 1.3.1 |
| readxl | 1.3.1 | recepty | 0.1.5 | Zápas | 1.0.1 |
| vzdálená zařízení | 2.0.2 | reshape2 | 1.4.3 | Rio | 0.5.16 |
| rlang | 0.3.3 | RODBC | 1.3-15 | roxygen2 | 6.1.1 |
| rpart | 4.1-15 | rprojroot | 1.3-2 | Rserve | 1.8-6 |
| RSQLite | 2.1.1 | rstudioapi | 0.10 | Váhy | 1.0.0 |
| sessioninfo | 1.1.1 | Sp | 1.3-1 | sparklyr | 1.0.0 |
| SparkR | 2.4.3 | Řídký čas | 1.77 | Prostorové | 7.3-11 |
| Křivky | 3.6.0 | sqldf | 0.4-11 | ČTVEREC | 2017.10-1 |
| statmod | 1.4.30 | Statistiky | 3.6.0 | Statistiky 4 | 3.6.0 |
| stringi | 1.4.3 | stringr | 1.4.0 | Přežití | 2.43-3 |
| sys | 3.1 | tcltk | 3.6.0 | TeachingDemos | 2.10 |
| testthat | 2.0.1 | tibble | 2.1.1 | tidyr | 0.8.3 |
| tidyselect | 0.2.5 | timeDate | 3043.102 | tools | 3.6.0 |
| usethis | 1.4.0 | utf8 | 1.1.4 | utils | 3.6.0 |
| viridisLite | 0.3.0 | vousa | 0.3-2 | withr | 2.1.2 |
| xml2 | 1.2.0 | xopen | 1.0.0 | yaml | 2.2.0 |
| Zip | 2.0.1 |
Nainstalované knihovny Java a Scala (verze clusteru Scala 2.11)
| ID skupiny | ID artefaktu | Verze |
|---|---|---|
| antlr | antlr | 2.7.7 |
| com.amazonaws | amazon-kinesis-client | 1.8.10 |
| com.amazonaws | automatické škálování aws-java-sdk | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudfront | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudhsm | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudsearch | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.11.313 |
| com.amazonaws | aws-java-sdk-codedeploy | 1.11.313 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.11.313 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.11.313 |
| com.amazonaws | aws-java-sdk-config | 1.11.313 |
| com.amazonaws | aws-java-sdk-core | 1.11.313 |
| com.amazonaws | aws-java-sdk-datapipeline | 1.11.313 |
| com.amazonaws | aws-java-sdk-directconnect | 1.11.313 |
| com.amazonaws | aws-java-sdk-directory | 1.11.313 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.11.313 |
| com.amazonaws | aws-java-sdk-ec2 | 1.11.313 |
| com.amazonaws | aws-java-sdk-ecs | 1.11.313 |
| com.amazonaws | aws-java-sdk-efs | 1.11.313 |
| com.amazonaws | aws-java-sdk-elasticache | 1.11.313 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.11.313 |
| com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.11.313 |
| com.amazonaws | aws-java-sdk-elastictranscoder | 1.11.313 |
| com.amazonaws | aws-java-sdk-emr | 1.11.313 |
| com.amazonaws | aws-java-sdk-glacier | 1.11.313 |
| com.amazonaws | aws-java-sdk-glue | 1.11.313 |
| com.amazonaws | aws-java-sdk-iam | 1.11.313 |
| com.amazonaws | aws-java-sdk-importexport | 1.11.313 |
| com.amazonaws | aws-java-sdk-kinesis | 1.11.313 |
| com.amazonaws | aws-java-sdk-kms | 1.11.313 |
| com.amazonaws | aws-java-sdk-lambda | 1.11.313 |
| com.amazonaws | aws-java-sdk-logs | 1.11.313 |
| com.amazonaws | aws-java-sdk-machinelearning | 1.11.313 |
| com.amazonaws | aws-java-sdk-opsworks | 1.11.313 |
| com.amazonaws | aws-java-sdk-rds | 1.11.313 |
| com.amazonaws | aws-java-sdk-redshift | 1.11.313 |
| com.amazonaws | aws-java-sdk-route53 | 1.11.313 |
| com.amazonaws | aws-java-sdk-s3 | 1.11.313 |
| com.amazonaws | aws-java-sdk-ses | 1.11.313 |
| com.amazonaws | aws-java-sdk-simpledb | 1.11.313 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.11.313 |
| com.amazonaws | aws-java-sdk-sns | 1.11.313 |
| com.amazonaws | aws-java-sdk-sqs | 1.11.313 |
| com.amazonaws | aws-java-sdk-ssm | 1.11.313 |
| com.amazonaws | aws-java-sdk-storagegateway | 1.11.313 |
| com.amazonaws | aws-java-sdk-sts | 1.11.313 |
| com.amazonaws | podpora aws-java-sdk-support | 1.11.313 |
| com.amazonaws | aws-java-sdk-swf-libraries | 1.11.22 |
| com.amazonaws | aws-java-sdk-workspaces | 1.11.313 |
| com.amazonaws | jmespath-java | 1.11.313 |
| com.carrotsearch | hppc | 0.7.2 |
| com.chuusai | shapeless_2.11 | 2.3.2 |
| com.clearspring.analytics | datový proud | 2.7.0 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | dbml-local_2.11 | 0.5.0-db8-spark2.4 |
| com.databricks | dbml-local_2.11-tests | 0.5.0-db8-spark2.4 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | compilerplugin_2.11 | 0.4.15-9 |
| com.databricks.scalapb | scalapb-runtime_2.11 | 0.4.15-9 |
| com.esotericsoftware | Kryo-shaded | 4.0.2 |
| com.esotericsoftware | minlog | 1.3.0 |
| com.fasterxml | Spolužák | 1.0.0 |
| com.fasterxml.jackson.core | jackson-annotations | 2.6.7 |
| com.fasterxml.jackson.core | jackson-core | 2.6.7 |
| com.fasterxml.jackson.core | jackson-databind | 2.6.7.1 |
| com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.6.7 |
| com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-scala_2.11 | 2.6.7.1 |
| com.github.fommil | jniloader | 1,1 |
| com.github.fommil.netlib | core | 1.1.2 |
| com.github.fommil.netlib | native_ref-java | 1,1 |
| com.github.fommil.netlib | nativní native_ref javy | 1,1 |
| com.github.fommil.netlib | native_system-java | 1,1 |
| com.github.fommil.netlib | nativní native_system javy | 1,1 |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1,1 |
| com.github.fommil.netlib | netlib-native_system-linux-x86_64-natives | 1,1 |
| com.github.luben | zstd-jni | 1.3.2-2 |
| com.github.rwl | jtransforms | 2.4.0 |
| com.google.code.findbugs | jsr305 | 2.0.1 |
| com.google.code.gson | gson | 2.2.4 |
| com.google.guava | Guava | 15.0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.googlecode.javaewah | JavaEWAH | 0.3.2 |
| com.h2database | h2 | 1.3.174 |
| com.jcraft | jsch | 0.1.50 |
| com.jolbox | bonecp | 0.8.0.RELEASE |
| com.microsoft.azure | azure-data-lake-store-sdk | 2.2.8 |
| com.microsoft.azure | azure-storage | 5.2.0 |
| com.microsoft.sqlserver | mssql-jdbc | 6.2.2.jre8 |
| com.ning | compress-lzf | 1.0.3 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.thoughtworks.paranamer | paranamer | 2.8 |
| com.trueaccord.lenses | lenses_2.11 | 0.3 |
| com.twitter | chill-java | 0.9.3 |
| com.twitter | chill_2.11 | 0.9.3 |
| com.twitter | parquet-hadoop-bundle | 1.6.0 |
| com.twitter | util-app_2.11 | 6.23.0 |
| com.twitter | util-core_2.11 | 6.23.0 |
| com.twitter | util-jvm_2.11 | 6.23.0 |
| com.typesafe | config | 1.2.1 |
| com.typesafe.scala-logging | scala-logging-api_2.11 | 2.1.2 |
| com.typesafe.scala-logging | scala-logging-slf4j_2.11 | 2.1.2 |
| com.univocity | univocity-parsers | 2.7.3 |
| com.vlkan | flatbuffers | 1.2.0-3f79e055 |
| com.zaxxer | HikariCP | 3.1.0 |
| commons-beanutils | commons-beanutils | 1.7.0 |
| commons-beanutils | commons-beanutils-core | 1.8.0 |
| commons-cli | commons-cli | 1.2 |
| commons-codec | commons-codec | 1,10 |
| commons-collections | commons-collections | 3.2.2 |
| commons-configuration | commons-configuration | 1.6 |
| commons-dbcp | commons-dbcp | 1.4 |
| commons-digester | commons-digester | 1.8 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2,4 |
| commons-lang | commons-lang | 2.6 |
| commons-logging | commons-logging | 1.1.3 |
| commons-net | commons-net | 3.1 |
| commons-pool | commons-pool | 1.5.4 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.7 |
| io.airlift | aircompressor | 0.10 |
| io.dropwizard.metrics | metriky – jádro | 3.1.5 |
| io.dropwizard.metrics | metrics-ganglia | 3.1.5 |
| io.dropwizard.metrics | metrics-graphite | 3.1.5 |
| io.dropwizard.metrics | metriky – kontroly stavu | 3.1.5 |
| io.dropwizard.metrics | metrics-jetty9 | 3.1.5 |
| io.dropwizard.metrics | metrics-json | 3.1.5 |
| io.dropwizard.metrics | metrics-jvm | 3.1.5 |
| io.dropwizard.metrics | metrics-log4j | 3.1.5 |
| io.dropwizard.metrics | metriky – servlety | 3.1.5 |
| io.netty | netty | 3.9.9.Final |
| io.netty | netty-all | 4.1.17.Final |
| io.prometheus | simpleclient | 0.0.16 |
| io.prometheus | simpleclient_common | 0.0.16 |
| io.prometheus | simpleclient_dropwizard | 0.0.16 |
| io.prometheus | simpleclient_servlet | 0.0.16 |
| io.prometheus.jmx | Kolekcí | 0,7 |
| javax.activation | aktivace | 1.1.1 |
| javax.annotation | javax.annotation-api | 1.2 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.servlet | javax.servlet-api | 3.1.0 |
| javax.servlet.jsp | jsp-api | 2.1 |
| javax.transaction | jta | 1,1 |
| javax.validation | validation-api | 1.1.0.Final |
| javax.ws.rs | javax.ws.rs-api | 2.0.1 |
| javax.xml.bind | jaxb-api | 2.2.2 |
| javax.xml.stream | stax-api | 1.0-2 |
| javolution | javolution | 5.5.1 |
| jline | jline | 2.14.6 |
| joda-time | joda-time | 2.9.3 |
| log4j | apache-log4j-extra | 1.2.17 |
| log4j | log4j | 1.2.17 |
| maven-trees | hive-exec-with-glue | hive-12679-patch_deploy |
| maven-trees | hive-exec-with-glue | hive-exec_shaded |
| net.hydromatic | eigenbase-properties | 1.1.5 |
| net.razorvine | pyrolit | 4.13 |
| net.sf.jpam | jpam | 1,1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | super-csv | 2.2.0 |
| net.snowflake | snowflake-ingest-sdk | 0.9.5 |
| net.snowflake | snowflake-jdbc | 3.6.15 |
| net.snowflake | spark-snowflake_2.11 | 2.4.10-spark_2.4 |
| net.sourceforge.f2j | arpack_combined_all | 0,1 |
| org.acplt | oncrpc | 1.0.7 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | antlr-runtime | 3.4 |
| org.antlr | antlr4-runtime | 4.7 |
| org.antlr | stringtemplate | 3.2.1 |
| org.apache.ant | ant | 1.9.2 |
| org.apache.ant | ant-jsch | 1.9.2 |
| org.apache.ant | ant-launcher | 1.9.2 |
| org.apache.arrow | arrow-format | 0.10.0 |
| org.apache.arrow | šipka – paměť | 0.10.0 |
| org.apache.arrow | arrow-vector | 0.10.0 |
| org.apache.avro | Avro | 1.8.2 |
| org.apache.avro | avro-ipc | 1.8.2 |
| org.apache.avro | avro-mapred-hadoop2 | 1.8.2 |
| org.apache.calcite | calcite-avatica | 1.2.0-inkubační |
| org.apache.calcite | kalcite-core | 1.2.0-inkubační |
| org.apache.calcite | calcite-linq4j | 1.2.0-inkubační |
| org.apache.commons | commons-compress | 1.8.1 |
| org.apache.commons | commons-crypto | 1.0.0 |
| org.apache.commons | commons-lang3 | 3.5 |
| org.apache.commons | commons-math3 | 3.4.1 |
| org.apache.kurátor | kurátor-client | 2.7.1 |
| org.apache.kurátor | kurátor-framework | 2.7.1 |
| org.apache.kurátor | kurátor-recepty | 2.7.1 |
| org.apache.derby | Derby | 10.12.1.1 |
| org.apache.directory.api | api-asn1-api | 1.0.0-M20 |
| org.apache.directory.api | api-util | 1.0.0-M20 |
| org.apache.directory.server | apacheds-i18n | 2.0.0-M15 |
| org.apache.directory.server | apacheds-kerberos-codec | 2.0.0-M15 |
| org.apache.hadoop | hadoop-annotations | 2.7.3 |
| org.apache.hadoop | hadoop-auth | 2.7.3 |
| org.apache.hadoop | hadoop-client | 2.7.3 |
| org.apache.hadoop | hadoop-common | 2.7.3 |
| org.apache.hadoop | hadoop-hdfs | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-app | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-common | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-core | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-jobclient | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-shuffle | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-api | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-client | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-common | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-server-common | 2.7.3 |
| org.apache.htrace | htrace-core | 3.1.0-inkubační |
| org.apache.httpcomponents | httpclient | 4.5.4 |
| org.apache.httpcomponents | httpcore | 4.4.8 |
| org.apache.ivy | Ivy | 2.4.0 |
| org.apache.orc | orc-core-nohive | 1.5.2 |
| org.apache.orc | orc-mapreduce-nohive | 1.5.2 |
| org.apache.orc | orc-shims | 1.5.2 |
| org.apache.parquet | parquet-column | 1.10.1.1-databricks3 |
| org.apache.parquet | parquet-common | 1.10.1.1-databricks3 |
| org.apache.parquet | kódování parquet | 1.10.1.1-databricks3 |
| org.apache.parquet | parquet-format | 2.4.0 |
| org.apache.parquet | parquet-hadoop | 1.10.1.1-databricks3 |
| org.apache.parquet | parquet-jackson | 1.10.1.1-databricks3 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.9.3 |
| org.apache.xbean | xbean-asm6-shaded | 4.8 |
| org.apache.zookeeper | zookeeper | 3.4.6 |
| org.codehaus.jackson | jackson-core-asl | 1.9.13 |
| org.codehaus.jackson | jackson-jaxrs | 1.9.13 |
| org.codehaus.jackson | jackson-mapper-asl | 1.9.13 |
| org.codehaus.jackson | jackson-xc | 1.9.13 |
| org.codehaus.janino | commons-compiler | 3.0.10 |
| org.codehaus.janino | Janino | 3.0.10 |
| org.datanucleus | datanucleus-api-jdo | 3.2.6 |
| org.datanucleus | datanucleus-core | 3.2.10 |
| org.datanucleus | datanucleus-rdbms | 3.2.9 |
| org.eclipse.jetty | jetty-client | 9.3.20.v20170531 |
| org.eclipse.jetty | pokračování jetty | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-http | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-io | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-jndi | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-plus | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-proxy | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-security | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-server | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-servlet | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-servlets | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-util | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-webapp | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-xml | 9.3.20.v20170531 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-locator | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-utils | 2.4.0-b34 |
| org.glassfish.hk2 | osgi-resource-locator | 1.0.1 |
| org.glassfish.hk2.external | aopalliance-repackaged | 2.4.0-b34 |
| org.glassfish.hk2.external | javax.inject | 2.4.0-b34 |
| org.glassfish.jersey.bundles.repackaged | jersey-guava | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet-core | 2.22.2 |
| org.glassfish.jersey.core | jersey-client | 2.22.2 |
| org.glassfish.jersey.core | žerzejové společné | 2.22.2 |
| org.glassfish.jersey.core | jersey-server | 2.22.2 |
| org.glassfish.jersey.media | jersey-media-jaxb | 2.22.2 |
| org.hibernate | Hibernate-validator | 5.1.1.Final |
| org.iq80.snappy | Elegantní | 0,2 |
| org.javassist | Javassist | 3.18.1-GA |
| org.jboss.logging | jboss-logging | 3.1.3.GA |
| org.jdbi | jdbi | 2.63.1 |
| org.joda | joda-convert | 1,7 |
| org.jodd | jodd-core | 3.5.2 |
| org.json4s | json4s-ast_2.11 | 3.5.3 |
| org.json4s | json4s-core_2.11 | 3.5.3 |
| org.json4s | json4s-jackson_2.11 | 3.5.3 |
| org.json4s | json4s-scalap_2.11 | 3.5.3 |
| org.lz4 | lz4-java | 1.4.0 |
| org.mariadb.jdbc | mariadb-java-client | 2.1.2 |
| org.mockito | mockito-all | 1.9.5 |
| org.objenesis | objenesis | 2.5.1 |
| org.postgresql | postgresql | 42.1.4 |
| org.roaringbitmap | RoaringBitmap | 0.7.45 |
| org.roaringbitmap | Podložky | 0.7.45 |
| org.rocksdb | rocksdbjni | 5.2.1 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | scala-compiler_2.11 | 2.11.12 |
| org.scala-lang | scala-library_2.11 | 2.11.12 |
| org.scala-lang | scala-reflect_2.11 | 2.11.12 |
| org.scala-lang.modules | scala-parser-combinators_2.11 | 1.1.0 |
| org.scala-lang.modules | scala-xml_2.11 | 1.0.5 |
| org.scala-sbt | test-interface | 1.0 |
| org.scalacheck | scalacheck_2.11 | 1.12.5 |
| org.scalactic | scalactic_2.11 | 3.0.3 |
| org.scalanlp | breeze-macros_2.11 | 0.13.2 |
| org.scalanlp | breeze_2.11 | 0.13.2 |
| org.scalatest | scalatest_2.11 | 3.0.3 |
| org.slf4j | jcl-over-slf4j | 1.7.16 |
| org.slf4j | jul-to-slf4j | 1.7.16 |
| org.slf4j | slf4j-api | 1.7.16 |
| org.slf4j | slf4j-log4j12 | 1.7.16 |
| org.spark-project.hive | hive-beeline | 1.2.1.spark2 |
| org.spark-project.hive | hive-cli | 1.2.1.spark2 |
| org.spark-project.hive | hive-jdbc | 1.2.1.spark2 |
| org.spark-project.hive | hive-metastore | 1.2.1.spark2 |
| org.spark-project.spark | Nepoužité | 1.0.0 |
| org.spire-math | spire-macros_2.11 | 0.13.0 |
| org.spire-math | spire_2.11 | 0.13.0 |
| org.springframework | spring-core | 4.1.4.RELEASE |
| org.springframework | spring-test | 4.1.4.RELEASE |
| org.tukaani | Xz | 1.5 |
| org.typelevel | machinist_2.11 | 0.6.1 |
| org.typelevel | makro-compat_2.11 | 1.1.1 |
| org.xerial | sqlite-jdbc | 3.8.11.2 |
| org.xerial.snappy | snappy-java | 1.1.7.3 |
| org.yaml | snakeyaml | 1.16 |
| Oro | Oro | 2.0.8 |
| software.amazon.ion | ion-java | 1.0.2 |
| stax | stax-api | 1.0.1 |
| xmlenc | xmlenc | 0,52 |