Databricks Runtime 5,3 (stöds inte)

Databricks släpptes den här avbildningen i april 2019.

Följande viktig information innehåller information om Databricks Runtime 5,3, som drivs av Apache Spark.

Nya funktioner

Databricks Delta

Res tid GA

Delta-tiden går i förgraderad till allmän tillgänglighet. Det lägger till möjligheten att fråga en ögonblicks bild av en tabell med en tidsstämpel-sträng eller en version med hjälp av SQL-syntax samt DataFrameReader alternativ för timestamp-uttryck.

SELECT count(*) FROM events TIMESTAMP AS OF timestamp_expression
SELECT count(*) FROM events VERSION AS OF version

Res tiden har många användnings fall, inklusive:

  • Skapa analyser, rapporter eller utdata på nytt (till exempel utdata från en maskin inlärnings modell), vilket är användbart för fel sökning eller granskning, särskilt i reglerade branscher.
  • Skriva komplexa temporala frågor.
  • Åtgärda misstag i dina data.
  • Tillhandahålla ögonblicks bild isolering för en uppsättning frågor för snabb ändrings tabeller.

Res tid för delta

Se fråga en äldre ögonblicks bild av en tabell (res tid), Väljoch sammanfoga i (delta Lake på Azure Databricks).

MySQL-tabell-replikering till delta offentlig för hands version

Strömma data från en MySQL-tabell direkt i delta för efterföljande förbrukning i Spark Analytics eller data vetenskaps arbets flöden. Med samma strategi som MySQL använder för replikering till andra instanser, binlog används för att identifiera uppdateringar som sedan bearbetas och strömmas till Databricks på följande sätt:

  • Läser ändrings händelser från databas loggen.
  • Strömmar händelser till Databricks.
  • Skriver i samma ordning till en delta tabell.
  • Behåller tillstånd i händelse av från koppling från källan.

Funktioner för privat för hands version

Den här versionen innehåller följande privata för hands versions funktioner för delta Lake:

  • Ett experimentellt kommando har lagts till som gör att Presto kan skicka frågor till delta tabeller direkt.
  • Optimering av automatiskt optimerar fillayouten vid enskilda skrivningar till en delta tabell och förhindrar små filer från att ackumuleras i dina delta tabeller för att bevara frågans prestanda. Dessutom kan skrivningar och upsertar till partitionerade delta tabeller ha stor speedups tack till en anpassningsbar blandning som introduceras i skrivningar.

Kontakta ditt Databricks-konto om du vill delta i en för hands version.

Optimerad DBFS-SÄKRINGs mapp för arbets belastningar för djup inlärning

Azure Databricks erbjuder nu en optimerad SÄKRINGs montering. Du kan använda data åtkomst med hög prestanda under utbildning och härledning utan att använda init-skript. Data som lagras under dbfs:/ml och är tillgängliga lokalt i file:/dbfs/ml har nu backas upp av denna OPTIMERAde säkrings montering. Se Läs in data.

Bättre

  • Bibliotek med Notebook-omfång:

    • Stöd för tillägg i dbutils.library.installPyPI .
    • Stöd för installation av bibliotek med bärbara datorer för bibliotek i Azure-filsystemet, inklusive wasbs , adls och abfss .
    • Förbättrade fel meddelanden för bibliotek med antecknings områden på mål som inte stöds. Exempel: "biblioteks verktyg är inte tillgängliga på Databricks Runtime för Machine Learning".
  • Anslut till Azure Data Lake Storage Gen2 (ADLS Gen2) utan att du behöver tilldela RBAC-rollen "Storage BLOB data Contributor" till tjänstens huvud namn.

  • Databricks Advisor har ytterligare tips för att förbättra prestandan för frågor:

    • När det finns många små filer per partition – > omvandla tabellen till delta och kör OPTIMIZE .
    • När det finns ett mycket selektivt filter – > konvertera till delta och användning ZORDER BY .
    • När metadata hämtas från Hive blir Flask hals – > konvertera tabellen till delta.
  • Uppgraderade Ubuntu från 16.04.5 LTS till 16.04.6 LTS.

  • Uppgraderade Scala 2,11 från 2.11.8 till 2.11.12.

  • Uppgraderade vissa installerade python-bibliotek:

    • PIP: 18,1 till 19.0.3.
    • installations verktyg: 40.6.3 till 40.8.0
    • hjul: 0.32.3 till 0.33.1
  • Uppgraderade R från 3.4.4 till 3.5.2.

  • Uppgraderade flera installerade R-bibliotek. Se installerade R-bibliotek.

Utfasning

  • Apache Kafka 0,8-anslutning för strukturerad strömning stöds inte längre. Den ingår i Databricks Runtime 5,3 men kommer att tas bort från en framtida Databricks Runtime version.
  • Exporten av Databricks ML-modellen är föråldrad och kommer att tas bort i Databricks Runtime 6,0. Använd MLeap för att importera och exportera modeller i stället.
  • Har tagits bort spark.databricks.pyspark.enableExecutorFsPerms som konfigurations alternativ.

Felkorrigeringar

  • Fast installation av ett kluster med en viss installation av python-ägg för kluster aktiverade för tabell-ACL: er.
  • Förbättrad python-kommando annullering genom att åtgärda i vilken situation som annulleringen anropas innan kommandot körs.
  • Ett fel har åtgärd ATS i tabellens ACL: er: nu när du visar objekt i en databas eller katalog, ser du bara de objekt som du har behörighet att visa.

Apache Spark

Databricks Runtime 5,3 innehåller Apache Spark 2.4.0. I den här versionen ingår alla Spark-korrigeringar och förbättringar som ingår i Databricks Runtime 5,2 (stöds inte), samt följande ytterligare fel korrigeringar och förbättringar av Spark:

  • [Spark-27134][SQL] array_distinct funktionen fungerar inte korrekt med kolumner som innehåller matrisen
  • [Spark-24669][SQL] invalidera tabeller i händelse av Drop Database-kaskad
  • [Spark-26572][SQL] korrigera sammanställd resultat utvärdering för CODEGEN
  • [Spark-27046][DSTREAMS] ta bort SPARK-19185 relaterade referenser från dokumentation
  • [Spark-26449][python] Lägg till Transformation-metod i DATAFRAME-API
  • [Spark-26740][SQL] Läs tidsstämpel/datum kolumn statistik skriven av Spark 3,0
  • [Spark-26909][SQL] Använd UnsafeRow. hashkoden () som hash-värde i HashAggregate
  • [Spark-26990][SQL] FileIndex: Använd användarens angivna fält namn om möjligt
  • [Spark-26851][SQL] korrigera dubbelt markerat lås i CachedRDDBuilder
  • [Spark-26864][SQL] frågan kan returnera felaktigt resultat när python UDF används som ett vänster-halvt kopplings villkor
  • [Spark-26887][SQL] [python] skapa datetime.date direkt i stället för att skapa datetime64 som mellanliggande data.
  • [Spark-26859][SQL] korrigera fält skrivar index fel i icke-Vector Orc-deserialiserare
  • [Spark-26864][SQL]-fråga kan returnera felaktigt resultat när python UDF används som kopplings villkor och UDF använder attribut från båda benen av vänster halv koppling
  • [Spark-24360][Spark-26091][BACKPORT] [SQL] support Hive 3,1 metaarkiv
  • [Spark-26873][SQL] Använd en konsekvent tidsstämpel för att bygga Hadoop-jobb-ID: n.
  • [Spark-26734][strömning] korrigera StackOverflowError med stor block kö
  • [Spark-26758][core] inaktiva körningar stoppas inte efter spark.dynamiAllocation.executorIdleTimeout-värde
  • [Spark-26751][SQL] korrigera minnes läcka när instruktionen körs i bakgrunden och Utlös ett undantag som inte är HiveSQLException
  • [Spark-26806][SS] EventTimeStats. sammanslagning ska hantera nollor korrekt
  • [Spark-26745][Spark-24959][SQL] antal återställnings optimering i JSON DataSource av
  • [Spark-26757][GRAPHX] returnera 0 för antal på tomma Edge/hörn-RDD
  • [Spark-26726] Synkronisera mängden minne som används av broadcast-variabeln till GRÄNSSNITTs visningen
  • [Spark-26718][SS] fast heltals spill i SS Kafka rateLimit-beräkning
  • [Spark-26708][SQL] felaktigt resultat orsakade av inkonsekvens mellan cachelagrade RDD i SQL-cache och dess fysiska plan
  • [Spark-26735][SQL] kontrol lera plan integritet för särskilda uttryck
  • [Spark-26619][SQL] rensa oanvända serialiserare från SerializeFromObject
  • [Spark-26379][SS] Använd dummy-TimeZoneId för att undvika UnresolvedException i CurrentBatchTimestamp
  • [Spark-26495][SQL] förenkla SelectedField-Extractor
  • [Spark-26379][SS] korrigera problem vid tillägg av current_timestamp/CURRENT_DATE till strömnings fråga
  • [Spark-26709][SQL] OptimizeMetadataOnlyQuery hanterar inte tomma poster korrekt
  • [Spark-26680][SQL] eagerly skapa inputVars och villkor är lämpliga
  • [Spark-26682][SQL] Använd taskAttemptID i stället för AttemptNumber för Hadoop.
  • [Spark-26706][SQL] korrigera illegalNumericPrecedence för ByteType
  • [Spark-26228][MLLIB] OOM problem påträffades vid beräkning av Gramian Matrix
  • [Spark-26665][core] korrigera en bugg som BlockTransferService. fetchBlockSync kan låsa sig för alltid
  • [Spark-26549][PYSPARK] korrigering för python Worker-återaktivering gäller inte för parallellisera-Lazy intervall
  • [Spark-26351][MLLIB] uppdatera dokument och mindre korrigering i MLLIB-utvärderings mått
  • [Spark-26450] Undvik att skapa en karta över schema för varje kolumn i en projektion
  • [Spark-26638][PYSPARK] [ml] PYSPARK vektor klasser returnerar alltid fel för enställig negation
  • [Spark-26633][repl] Lägg till ExecutorClassLoader. getResourceAsStream
  • [Spark-26629][SS] fast fel med flera fil data strömmar i en fråga + starta om i en batch som inte har några data för en fil ström
  • [Spark-25992][python] dokument SparkContext kan inte delas för multiprocessering
  • [Spark-26615][core] korrigera Transport Server/klient resurs läckor i kärn unittests
  • [Spark-26350][SS] Tillåt att grupp-ID för Kafka-konsumenten åsidosätts
  • [Spark-26538][SQL] ange standard precision och skalning för element i postgres-numerisk matris
  • [Spark-26586][SS] korrigerar villkor för körning som gör att strömmar körs med oväntade conf
  • [Spark-26551][SQL] korrigera schema rensnings fel när du väljer ett komplext fält och det inte är ett predikat som inte är null på ett annat
  • [Spark-26576][SQL] broadcast-tips används inte för partitionerad tabell
  • [Spark-26571][SQL] uppdatera Hive Serde-mappning med kanoniskt namn för Parquet och Orc FileFormat
  • [Spark-26267][SS] försök igen vid identifiering av felaktiga förskjutningar från Kafka (2,4)
  • [Spark-26559][ml] [PYSPARK] ml-avbildningen kan inte fungera med numpy-versioner före 1,9
  • [Spark-26078][SQL] deduplicerar Self-Join-attribut på i under frågor

Underhållsuppdateringar

Se Databricks Runtime 5,3-underhålls uppdateringar.

Systemmiljö

  • Operativ system: Ubuntu 16.04.6 LTS
  • Java: 1.8.0 _191
  • Scala: 2.11.12
  • Python: 2.7.12 för python 2-kluster och 3.5.2 för python 3-kluster. Mer information finns i python-version.
  • R: r version 3.5.2 (2018-12-20)
  • GPU-kluster: följande NVIDIA GPU-bibliotek är installerade:
    • Tesla-drivrutin 375,66
    • CUDA 9,0
    • cuDNN 7,0

Anteckning

Även om Scala 2,12 stöds i Apache Spark 2,4, stöds den inte i Databricks Runtime 5,3.

Installerade python-bibliotek

Bibliotek Version Bibliotek Version Bibliotek Version
ansi2html 1.1.1 argparse 1.2.1 backports – ABC 0,5
boto 2.42.0 boto3 1.4.1 botocore 1.4.70
brewer2mpl 1.4.1 attestera 2016.2.28 cffi 1.7.0
chardet 2.3.0 colorama 0.3.7 configobj 5.0.6
kryptografi 1.5 cykel 0.10.0 Cython 0.24.1
decorator 4.0.10 docutils 0,14 enum34 1.1.6
et-xmlfile 1.0.1 freetype – py 1.0.2 funcsigs 1.0.2
fusepy 2.0.4 Futures 3.2.0 ggplot 0.6.8
html5lib 0,999 idna 2.1 adresser 1.0.16
ipython 2.2.0 ipython – genutils 0.1.0 jdcal 1,2
Jinja2 2.8 jmespath 0.9.0 llvmlite 0.13.0
lxml 3.6.4 MarkupSafe 0,23 matplotlib 1.5.3
mpld3 0,2 msgpack – python 0.4.7 ndg-httpsclient 0.3.3
numba 0.28.1 numpy 1.11.1 openpyxl 2.3.2
Pandas 0.19.2 pathlib2 2.1.0 patsy 0.4.1
pexpect 4.0.1 pickleshare 0.7.4 Pillow 3.3.1
19.0.3 blad 3.9 prompt-Toolkit 1.0.7
psycopg2 2.6.2 ptyprocess 0.5.1 py4j 0.10.3
pyarrow 0.8.0 pyasn1 0.1.9 pycparser 2,14
Pygments 2.1.3 PyGObject 3.20.0 pyOpenSSL 16.0.0
pyparsing 2.2.0 pypng 0.0.18 Python 2.7.12
python – dateutil 2.5.3 python-polyhash 0.8.5 pytz 2016.6.1
autentiseringsbegäran 2.11.1 s3transfer 0.1.9 scikit-learn 0.18.1
scipy 0.18.1 finkamma webben 0,32 seaborn 0.7.1
installations verktyg 40.8.0 simplejson 3.8.2 simples3 1,0
singledispatch 3.4.0.3 sex 1.10.0 statsmodels 0.6.1
Storm 5.1.1 traitlets 4.3.0 urllib3 1.19.1
virtuell miljö 16.1.0 wcwidth 0.1.7 hjul 0.33.1
wsgiref 0.1.2

Installerade R-bibliotek

Bibliotek Version Bibliotek Version Bibliotek Version
abind 1.4-5 askpass 1,1 assertthat 0.2.0
backports 1.1.3 base 3.5.2 base64enc 0.1-3
BH 1.69.0-1 bit 1.1-14 bit64 0.9-7
bitops 1.0-6 blob 1.1.1 boot 1.3-20
brew 1.0-6 callr 3.1.1 car 3.0-2
carData 3.0-2 cirkumflex 6.0-81 cellranger 1.1.0
chron 2.3-53 klass 7.3-15 cli 1.0.1
klippare 0.5.0 clisymbols 1.2.0 cluster 2.0.7-1
codetools 0,2 – 16 colorspace 1.4-0 commonmark 1,7
compiler 3.5.2 config 0.3 crayon 1.3.4
curl 3.3 data.table 1.12.0 datauppsättningar 3.5.2
DBI 1.0.0 dbplyr 1.3.0 desc 1.2.0
devtools 2.0.1 digest 0.6.18 doMC 1.3.5
dplyr 0.8.0.1 ellipsis 0.1.0 fansi 0.4.0
forcats 0.4.0 foreach 1.4.4 foreign 0,8-71
falska 0.2.0 ADFS 1.2.6 gbm 2.1.5
generisk typ 0.0.2 ggplot2 3.1.0 gt 1.0.1
git2r 0.24.0 glmnet 2.0 – 16 glue 1.3.0
gower 0.1.2 grafik 3.5.2 grDevices 3.5.2
grid 3.5.2 gridExtra 2.3 gsubfn 0.7
gtable 0.2.0 H2O 3.22.1.1 haven 2.1.0
hms 0.4.2 htmltools 0.3.6 htmlwidgets 1.3
httr 1.4.0 hwriter 1.3.2 hwriterPlus 1.0-3
ini 0.3.1 ipred 0.9-8 iterators 1.0.10
jsonlite 1.6 KernSmooth 2.23-15 labeling 0.3
lattice 0,20-38 lava 1.6.5 lazyeval 0.2.1
mindre än 0.3.6 lme4 1.1-20 lubridate 1.7.4
magrittr 1.5 mapproj 1.2.6 maps 3.3.0
maptools 0.9-5 MASS 7.3-51.1 Matris 1.2-15
MatrixModels 0.4-1 memoise 1.1.0 methods 3.5.2
mgcv 1.8 – 27 mime 0,6 minqa 1.2.4
ModelMetrics 1.2.2 munsell 0.5.0 mvtnorm 1.0-9
nlme 3.1 – 137 nloptr 1.2.1 nnet 7.3-12
numDeriv 2016.8-1 openssl 1.2.2 openxlsx 4.1.0
parallel 3.5.2 pbkrtest 0.4-7 pillar 1.3.1
pkgbuild 1.0.2 pkgconfig 2.0.2 pkgKitten 0.1.4
pkgload 1.0.2 plogr 0.2.0 plyr 1.8.4
praise 1.0.0 prettyunits 1.0.2 pROC 1.13.0
processx 3.2.1 prodlim 2018.04.18 progress 1.2.0
proto 1.0.0 PS 1.3.0 purrr 0.3.0
quantreg 5,38 R.methodsS3 1.7.1 R.oo 1.22.0
R.utils 2.8.0 r2d3 0.2.3 R6 2.4.0
randomForest 4.6-14 rappdirs 0.3.1 rcmdcheck 1.3.2
RColorBrewer 1.1-2 Rcpp 1.0.0 RcppEigen 0.3.3.5.0
RcppRoll 0.3.0 RCurl 1.95 – 4.11 readr 1.3.1
readxl 1.3.0 recipes 0.1.4 rematch 1.0.1
fjärrlagringsplatser 2.0.2 reshape2 1.4.3 Rio 0.5.16
rlang 0.3.1 RODBC 1.3-15 roxygen2 6.1.1
rpart 4.1-13 rprojroot 1.3-2 Rserve 1.8-6
RSQLite 2.1.1 rstudioapi 0.9.0 scales 1.0.0
sessioninfo 1.1.1 sp 1.3-1 sparklyr 1.0.0
SparkR 2.4.2 SparseM 1.77 spatial 7.3-11
splines 3.5.2 sqldf 0.4-11 SQUAREM 2017.10-1
statmod 1.4.30 stats 3.5.2 stats4 3.5.2
stringi 1.3.1 stringr 1.4.0 survival 2.43-3
sys 3.0 tcltk 3.5.2 TeachingDemos 2,10
testthat 2.0.1 tibble 2.0.1 tidyr 0.8.3
tidyselect 0.2.5 timeDate 3043.102 tools 3.5.2
usethis 1.4.0 utf8 1.1.4 utils 3.5.2
viridisLite 0.3.0 whisker 0.3-2 withr 2.1.2
xml2 1.2.0 xopen 1.0.0 yaml 2.2.0
Komprimera 2.0.0

Installerade Java-och Scala-bibliotek (Scala 2,11-kluster version)

Grupp-ID Artefakt-ID Version
antlr antlr 2.7.7
com. amazonaws Amazon-Kinesis-client 1.8.10
com. amazonaws AWS-Java-SDK – automatisk skalning 1.11.313
com. amazonaws AWS-Java-SDK-cloudformation 1.11.313
com. amazonaws AWS-Java-SDK-cloudfront 1.11.313
com. amazonaws AWS-Java-SDK-cloudhsm 1.11.313
com. amazonaws AWS-Java-SDK-cloudsearch 1.11.313
com. amazonaws AWS-Java-SDK-cloudtrail 1.11.313
com. amazonaws AWS-Java-SDK-CloudWatch 1.11.313
com. amazonaws AWS-Java-SDK-cloudwatchmetrics 1.11.313
com. amazonaws AWS-Java-SDK-codedeploy 1.11.313
com. amazonaws AWS-Java-SDK-cognitoidentity 1.11.313
com. amazonaws AWS-Java-SDK-cognitosync 1.11.313
com. amazonaws AWS-Java-SDK-config 1.11.313
com. amazonaws AWS-Java-SDK-Core 1.11.313
com. amazonaws AWS-Java-SDK-datapipeline 1.11.313
com. amazonaws AWS-Java-SDK-DirectConnect 1.11.313
com. amazonaws AWS-Java-SDK-Directory 1.11.313
com. amazonaws AWS-Java-SDK-dynamodb 1.11.313
com. amazonaws AWS-Java-SDK-EC2 1.11.313
com. amazonaws AWS-Java-SDK-ECS 1.11.313
com. amazonaws AWS-Java-SDK-EFS 1.11.313
com. amazonaws AWS-Java-SDK-elasticache 1.11.313
com. amazonaws AWS-Java-SDK-elasticbeanstalk 1.11.313
com. amazonaws AWS-Java-SDK-elasticloadbalancing 1.11.313
com. amazonaws AWS-Java-SDK-elastictranscoder 1.11.313
com. amazonaws AWS-Java-SDK-EMR 1.11.313
com. amazonaws AWS-Java-SDK-Glacier 1.11.313
com. amazonaws AWS-Java-SDK-IAM 1.11.313
com. amazonaws AWS-Java-SDK-importexport 1.11.313
com. amazonaws AWS-Java-SDK-Kinesis 1.11.313
com. amazonaws AWS-Java-SDK-KMS 1.11.313
com. amazonaws AWS-Java-SDK – lambda 1.11.313
com. amazonaws AWS-Java-SDK – loggar 1.11.313
com. amazonaws AWS-Java-SDK-machinelearning 1.11.313
com. amazonaws AWS-Java-SDK-opsworks 1.11.313
com. amazonaws AWS-Java-SDK-RDS 1.11.313
com. amazonaws AWS-Java-SDK-RedShift 1.11.313
com. amazonaws AWS-Java-SDK-Route53 1.11.313
com. amazonaws AWS-Java-SDK-S3 1.11.313
com. amazonaws AWS-Java-SDK-ses 1.11.313
com. amazonaws AWS-Java-SDK-simpledb 1.11.313
com. amazonaws AWS-Java-SDK-simpleworkflow 1.11.313
com. amazonaws AWS-Java-SDK-SNS 1.11.313
com. amazonaws AWS-Java-SDK-SQS 1.11.313
com. amazonaws AWS-Java-SDK-SSM 1.11.313
com. amazonaws AWS-Java-SDK-storagegateway 1.11.313
com. amazonaws AWS-Java-SDK-STS 1.11.313
com. amazonaws AWS-Java-SDK-support 1.11.313
com. amazonaws AWS-Java-SDK-SWF-libraries 1.11.22
com. amazonaws AWS-Java-SDK – arbets ytor 1.11.313
com. amazonaws jmespath – Java 1.11.313
com. carrotsearch hppc 0.7.2
com. chuusai shapeless_2.11 2.3.2
com. Clearspring. Analytics streama 2.7.0
com. databricks Rserve 1.8-3
com. databricks dbml-local_2.11 0.5.0-db8-Spark 2.4
com. databricks dbml-local_2.11-test 0.5.0-db8-Spark 2.4
com. databricks jets3t 0.7.1-0
com. databricks. scalapb compilerplugin_2.11 0.4.15 – 9
com. databricks. scalapb scalapb-runtime_2.11 0.4.15 – 9
com. esotericsoftware kryo – skuggad 4.0.2
com. esotericsoftware minlog 1.3.0
com. fasterxml classmate 1.0.0
com. fasterxml. Jackson. Core Jackson-kommentarer 2.6.7
com. fasterxml. Jackson. Core Jackson-kärna 2.6.7
com. fasterxml. Jackson. Core Jackson-DataBind 2.6.7.1
com. fasterxml. Jackson. dataformat Jackson-dataformat-cbor 2.6.7
com. fasterxml. Jackson. datatype Jackson-datatype-JODA 2.6.7
com. fasterxml. Jackson. module Jackson-module-paranamer 2.6.7
com. fasterxml. Jackson. module Jackson-modul-scala_2.11 2.6.7.1
com. GitHub. fommil jniloader 1,1
com. GitHub. fommil. netlib grundläggande 1.1.2
com. GitHub. fommil. netlib native_ref-Java 1,1
com. GitHub. fommil. netlib native_ref-Java-inhemska 1,1
com. GitHub. fommil. netlib native_system-Java 1,1
com. GitHub. fommil. netlib native_system-Java-inhemska 1,1
com. GitHub. fommil. netlib netlib-native_ref – Linux-x86_64 – inbyggda 1,1
com. GitHub. fommil. netlib netlib-native_system – Linux-x86_64 – inbyggda 1,1
com. GitHub. Luben zstd-jni 1.3.2-2
com. GitHub. RWL jtransforms 2.4.0
com. Google. Code. findbugs jsr305 2.0.1
com. Google. Code. Gson gson 2.2.4
com. Google. guava guava 15.0
com. Google. protobuf protobuf – Java 2.6.1
com. googlecode. javaewah JavaEWAH 0.3.2
com. h2database H2 1.3.174
com. jcraft jsch 0.1.50
com. jolbox bonecp 0.8.0. RELEASE
com. Microsoft. Azure Azure-Data-Lake-Store-SDK 2.2.8
com. Microsoft. Azure Azure-lagring 5.2.0
com. Microsoft. SQLServer MSSQL-JDBC 6.2.2.jre8
com. ning Komprimera-LZF 1.0.3
com. Sun. mail javax. mail 1.5.2
com. Thoughtworks. paranamer paranamer 2.8
com. trueaccord. linser lenses_2.11 0.3
com. Twitter kyl-Java 0.9.3
com. Twitter chill_2.11 0.9.3
com. Twitter Parquet – Hadoop-paket 1.6.0
com. Twitter util-app_2 11 6.23.0
com. Twitter util-core_2 11 6.23.0
com. Twitter util-jvm_2 11 6.23.0
com. typesafe config 1.2.1
com. typesafe. Scala-Logging Scala-Logging-api_2.11 2.1.2
com. typesafe. Scala-Logging Scala-Logging-slf4j_2.11 2.1.2
com. univocity univocity-tolkare 2.7.3
com. vlkan flatbuffers 1.2.0 – 3f79e055
com. zaxxer HikariCP 3.1.0
commons-beanutils commons-beanutils 1.7.0
commons-beanutils commons-beanutils-Core 1.8.0
Commons-cli Commons-cli 1,2
Commons-codec Commons-codec 1,10
Commons – samlingar Commons – samlingar 3.2.2
Commons-konfiguration Commons-konfiguration 1.6
Commons-dbcp Commons-dbcp 1.4
Commons-sammandrag Commons-sammandrag 1.8
Commons-httpclient Commons-httpclient 3.1
commons-io commons-io 2,4
Commons-lang Commons-lang 2,6
Commons-loggning Commons-loggning 1.1.3
Commons-net Commons-net 3.1
Commons-pool Commons-pool 1.5.4
info. ganglia. gmetric4j gmetric4j 1.0.7
i/o. Airlift luftkomprimerare 0.10
i/o. dropwizard. mått mått – kärna 3.1.5
i/o. dropwizard. mått mått – ganglia 3.1.5
i/o. dropwizard. mått mått – grafsystem 3.1.5
i/o. dropwizard. mått mått – healthchecks 3.1.5
i/o. dropwizard. mått mått – jetty9 3.1.5
i/o. dropwizard. mått mått – JSON 3.1.5
i/o. dropwizard. mått mått – JVM 3.1.5
i/o. dropwizard. mått mått – log4j 3.1.5
i/o. dropwizard. mått mått – servlets 3.1.5
i/o. nett nettning 3.9.9. Final
i/o. nett nett-alla 4.1.17. Final
i/o. Prometheus simpleclient 0.0.16
i/o. Prometheus simpleclient_common 0.0.16
i/o. Prometheus simpleclient_dropwizard 0.0.16
i/o. Prometheus simpleclient_servlet 0.0.16
i/o. Prometheus. JMX samla 0,7
javax. Activation processen 1.1.1
javax. Annotation javax. Annotation-API 1,2
javax. El javax. El-API 2.2.4
javax.jdo JDO – API 3.0.1
javax. servlet javax. servlet-API 3.1.0
javax.servlet.jsp JSP-API 2.1
javax. Transaction jta 1,1
javax. Validation verifiering – API 1.1.0. Final
javax.ws.rs javax.ws.rs – API 2.0.1
javax.xml. bind jaxb – API 2.2.2
javax.xml. Stream Stax – API 1.0-2
javolution javolution 5.5.1
jline jline 2.14.6
JODA-tid JODA-tid 2.9.3
log4j Apache-log4j – tillägg 1.2.17
log4j log4j 1.2.17
net. hydromatic eigenbase – egenskaper 1.1.5
net. razorvine pyrolite 4,13
net. SF. jpam jpam 1,1
net. SF. opencsv opencsv 2.3
net. SF. supercsv Super-CSV 2.2.0
net. snö snö-intag – SDK 0.9.5
net. snö snö-JDBC 3.6.15
net. snö Spark-snowflake_2.11 2.4.10 – spark_2.4
net. sourceforge. f2j arpack_combined_all 0,1
org. acplt ONCRPC 1.0.7
org. antlr ST4 4.0.4
org. antlr antlr – körning 3.4
org. antlr antlr4 – körning 4.7
org. antlr stringtemplate 3.2.1
org. apache. Ant Ant 1.9.2
org. apache. Ant Ant-jsch 1.9.2
org. apache. Ant Ant-start 1.9.2
org. apache.-pil pil-format 0.10.0
org. apache.-pil pil-minne 0.10.0
org. apache.-pil pil-Vector 0.10.0
org. apache. avro Avro 1.8.2
org. apache. avro Avro – IPC 1.8.2
org. apache. avro Avro-mapred-hadoop2 1.8.2
org. apache. Calcite calcite-avatica 1.2.0 – inkubation
org. apache. Calcite Calcite – kärna 1.2.0 – inkubation
org. apache. Calcite calcite-linq4j 1.2.0 – inkubation
org. apache. Commons Commons-komprimera 1.8.1
org. apache. Commons Commons-krypto 1.0.0
org. apache. Commons Commons-lang3 3.5
org. apache. Commons Commons-math3 3.4.1
org. apache. curator curator-klient 2.7.1
org. apache. curator curator – ramverk 2.7.1
org. apache. curator curator – recept 2.7.1
org. apache. Derby derby 10.12.1.1
org. apache. Directory. API API – asn1-API 1.0.0 – M20
org. apache. Directory. API API-util 1.0.0 – M20
org. apache. Directory. Server apacheds-i18n 2.0.0 – M15
org. apache. Directory. Server apacheds – Kerberos-codec 2.0.0 – M15
org. apache. Hadoop Hadoop-kommentarer 2.7.3
org. apache. Hadoop Hadoop-auth 2.7.3
org. apache. Hadoop Hadoop-klient 2.7.3
org. apache. Hadoop Hadoop – vanligt 2.7.3
org. apache. Hadoop Hadoop-HDFS 2.7.3
org. apache. Hadoop Hadoop-MapReduce-client-app 2.7.3
org. apache. Hadoop Hadoop-MapReduce-client – common 2.7.3
org. apache. Hadoop Hadoop-MapReduce-client-core 2.7.3
org. apache. Hadoop Hadoop-MapReduce-client-jobclient 2.7.3
org. apache. Hadoop Hadoop-MapReduce-client-blandar 2.7.3
org. apache. Hadoop Hadoop-garn-API 2.7.3
org. apache. Hadoop Hadoop-garn-client 2.7.3
org. apache. Hadoop Hadoop-garn – vanligt 2.7.3
org. apache. Hadoop Hadoop-garn-server-common 2.7.3
org. apache. htrace htrace – kärna 3.1.0 – inkubation
org. apache. httpcomponents httpclient 4.5.4
org. apache. httpcomponents httpcore 4.4.8
org. apache. Ivy ivy 2.4.0
org. apache. Orc Orc-Core-nohive 1.5.2
org. apache. Orc Orc-MapReduce-nohive 1.5.2
org. apache. Orc Orc-shims 1.5.2
org. apache. Parquet Parquet-kolumn 1.10.1.1-databricks3
org. apache. Parquet Parquet – common 1.10.1.1-databricks3
org. apache. Parquet Parquet-kodning 1.10.1.1-databricks3
org. apache. Parquet Parquet-format 2.4.0
org. apache. Parquet Parquet – Hadoop 1.10.1.1-databricks3
org. apache. Parquet Parquet-Jackson 1.10.1.1-databricks3
org. apache. Thrift libfb303 0.9.3
org. apache. Thrift libthrift 0.9.3
org. apache. xbean xbean – asm6-skuggad 4.8
org. apache. Zookeeper zookeeper 3.4.6
org. codehaus. Jackson Jackson-Core – ASL 1.9.13
org. codehaus. Jackson Jackson-jaxrs 1.9.13
org. codehaus. Jackson Jackson-Mapper-ASL 1.9.13
org. codehaus. Jackson Jackson-XC 1.9.13
org. codehaus. janino Commons-compiler 3.0.10
org. codehaus. janino janino 3.0.10
org. datanucleus datanucleus – API-JDO 3.2.6
org. datanucleus datanucleus – kärna 3.2.10
org. datanucleus datanucleus – RDBMS 3.2.9
org. Sol förmörkelse. Jetty Jetty-klient 9.3.20.v20170531
org. Sol förmörkelse. Jetty Jetty – fortsättning 9.3.20.v20170531
org. Sol förmörkelse. Jetty Jetty-http 9.3.20.v20170531
org. Sol förmörkelse. Jetty Jetty-IO 9.3.20.v20170531
org. Sol förmörkelse. Jetty Jetty – JNDI 9.3.20.v20170531
org. Sol förmörkelse. Jetty Jetty – plus 9.3.20.v20170531
org. Sol förmörkelse. Jetty Jetty-proxy 9.3.20.v20170531
org. Sol förmörkelse. Jetty Jetty – säkerhet 9.3.20.v20170531
org. Sol förmörkelse. Jetty Jetty-Server 9.3.20.v20170531
org. Sol förmörkelse. Jetty Jetty – servlet 9.3.20.v20170531
org. Sol förmörkelse. Jetty Jetty – servlets 9.3.20.v20170531
org. Sol förmörkelse. Jetty Jetty-util 9.3.20.v20170531
org. Sol förmörkelse. Jetty Jetty-webapp 9.3.20.v20170531
org. Sol förmörkelse. Jetty Jetty-XML 9.3.20.v20170531
org. fusesource. leveldbjni leveldbjni – alla 1.8
org. glassfish. hK2 hK2 – API 2.4.0-b34
org. glassfish. hK2 hK2-Locator 2.4.0-b34
org. glassfish. hK2 hK2 – utils 2.4.0-b34
org. glassfish. hK2 OSGi – Resource-Locator 1.0.1
org. glassfish. hK2. external aopalliance – ompaketerad 2.4.0-b34
org. glassfish. hK2. external javax. injicera 2.4.0-b34
org. glassfish. tröjor. paket. paketerade Jersey-guava 2.22.2
org. glassfish. Jersey. containers Jersey-container – servlet 2.22.2
org. glassfish. Jersey. containers Jersey-container-servlet-Core 2.22.2
org. glassfish. Jersey. Core Jersey-client 2.22.2
org. glassfish. Jersey. Core Jersey – vanligt 2.22.2
org. glassfish. Jersey. Core Jersey-Server 2.22.2
org. glassfish. Jersey. Media Jersey-Media – jaxb 2.22.2
org. vilo läge vilo läge-verifierare 5.1.1. slutlig
org. iq80. fästfunktionen Snappy 0,2
org. javassist javassist 3.18.1 – GA
org. JBoss. logging JBoss – loggning 3.1.3.GA
org. jdbi jdbi 2.63.1
org. joda JODA – konvertera 1,7
org. jodd jodd – kärna 3.5.2
org.json4s json4s-ast_2.11 3.5.3
org.json4s json4s-core_2.11 3.5.3
org.json4s json4s-jackson_2.11 3.5.3
org.json4s json4s-scalap_2.11 3.5.3
org. lz4 lz4 – Java 1.4.0
org. MariaDB. JDBC MariaDB-Java-client 2.1.2
org. Mockito mockito – alla 1.9.5
org. objenesis objenesis 2.5.1
org. postgresql postgresql 42.1.4
org. roaringbitmap RoaringBitmap 0.5.11
org. rocksdb rocksdbjni punkt
org. rosuda. REngine REngine 2.1.0
org. Scala-lang Scala-compiler_2.11 2.11.12
org. Scala-lang scala-library_2.11 2.11.12
org. Scala-lang Scala-reflect_2.11 2.11.12
org. Scala-lang. modules Scala-parser-combinators_2.11 1.1.0
org. Scala-lang. modules Scala-xml_2.11 1.0.5
org. Scala – SBT test-gränssnitt 1,0
org. scalacheck scalacheck_2.11 1.12.5
org. scalactic scalactic_2.11 3.0.3
org. scalanlp enkelt-macros_2.11 0.13.2
org. scalanlp breeze_2.11 0.13.2
org. scalatest scalatest_2.11 3.0.3
org. slf4j JCL – över-slf4j 1.7.16
org. slf4j jul-till-slf4j 1.7.16
org. slf4j slf4j – API 1.7.16
org. slf4j slf4j – log4j12 1.7.16
org. Spark-Project. Hive Hive-Beeline 1.2.1. spark2
org. Spark-Project. Hive Hive-cli 1.2.1. spark2
org. Spark-Project. Hive Hive-exec 1.2.1. spark2
org. Spark-Project. Hive Hive-JDBC 1.2.1. spark2
org. Spark-Project. Hive Hive-metaarkiv 1.2.1. spark2
org. Spark-Project. Spark outnyttja 1.0.0
org. Spire – matematik Spire-macros_2.11 0.13.0
org. Spire – matematik spire_2.11 0.13.0
org. springframework våren-kärna 4.1.4. RELEASE
org. springframework våren-test 4.1.4. RELEASE
org. tukaani xz 1.5
org. typelevel machinist_2.11 0.6.1
org. typelevel makro-compat_2.11 1.1.1
org. xerial sqlite-JDBC 3.8.11.2
org. xerial. fästfunktionen fästning – Java 1.1.7.1
org. yaml snakeyaml 1.16
oro oro 2.0.8
program vara. Amazon. Jon Jon-Java 1.0.2
stax Stax – API 1.0.1
xmlenc xmlenc 0,52