Databricks Runtime 6.1 (stöds inte)
Databricks släppte den här bilden i oktober 2019.
Följande viktig information innehåller information om Databricks Runtime 6.1 som drivs av Apache Spark.
Nya funktioner
Förbättringar av Delta Lake
Python-API:er för Delta-tabeller (offentlig förhandsversion)
Nu kan du ta bort från och öka data till Delta-tabeller, rensa tabeller och hämta tabellhistorik med hjälp av Python-API:er.
Mer information finns i Vad är Delta Lake?.
DFP (Dynamic File Pruning) aktiverad som standard
DFP använder Delta-tabellmetadata (till exempel min/max-kolumnstatistik i en fil) förbättrar prestandan för många frågor avsevärt genom att hoppa över filer med kolumnvärden utom räckhåll. Till skillnad från DPP (Dynamic Partition Pruning) fungerar DFP även på icke-partitionerade kolumner. DFP kan vara fördelaktigt för arbetsbelastningar som ansluter till icke-partitionerade nycklar.
Konfigurera kluster med en egen containeravbildning med hjälp av Databricks Container Services
Med Databricks Container Services kan du konfigurera ett kluster med din egen containeravbildning. Du kan förpaketera komplexa miljöer i en container, publicera dem till ett populärt containerregister som ACR, ECR eller Docker Hub och sedan låta Databricks hämta avbildningen för att skapa ett kluster. Några exempel på användningsfall är:
- Biblioteksanpassning – du har fullständig kontroll över de systembibliotek som du vill installera
- Gyllene containermiljö – Docker-avbildningen är en låst miljö som aldrig ändras
- Docker CI/CD-integrering – du kan integrera Azure Databricks med dina Docker CI/CD-pipelines
Det finns många andra användningsfall, allt från att ange konfiguration till att installera maskininlärningspaket.
Mer information finns i Anpassa containrar med Databricks Container Service.
Hemligheter som refereras av konfigurationsegenskaper och miljövariabler för Spark (allmänt tillgänglig förhandsversion)
Från och med underhållsuppdateringen av Databricks Runtime 6.1 den 7 november finns möjligheten att referera till en hemlighet i en Spark-konfigurationsegenskap eller miljövariabel i offentlig förhandsversion. Mer information finns i Använda en hemlighet i en Spark-konfigurationsegenskap eller miljövariabel.
Ganglia-mått är nu tillgängliga i kluster med tabell-ACL:er och genomströmning av autentiseringsuppgifter
Tidigare hade Ganglia-mått inte stöd för kluster med tabellåtkomstkontroll eller genomströmning av autentiseringsuppgifter aktiverat. De är nu tillgängliga.
Förbättringar
- Uppgraderade netty-all från 4.1.17.Final till 4.1.39.Final
- Uppgraderad Snowflake-anslutning från 2.4.10 till 2.5.3
Genomströmning för autentiseringsuppgifter
- Microsoft Entra-ID-autentiseringsuppgifter sprids nu i notebook-filer som körs med .
dbutils.notebook.run() - Alla PySpark ML-klasser stöds nu.
- Ganglia-användargränssnittet är nu tillgängligt.
Mer information finns i Access Azure Data Lake Storage using Microsoft Entra ID (tidigare Azure Active Directory) genomströmning av autentiseringsuppgifter (äldre).
Apache Spark
Databricks Runtime 6.1 innehåller Apache Spark 2.4.4. Den här versionen innehåller alla Spark-korrigeringar och förbättringar som ingår i Databricks Runtime 6.0 (stöds inte) samt följande ytterligare felkorrigeringar och förbättringar som gjorts i Spark:
- [SPARK-28782][SQL] Generatorstöd i aggregerade uttryck
- [SPARK-19147][CORE] Hantera fel i aktiviteten korrekt när köruppgiften har stoppats
- [SPARK-26003][SQL] Förbättra prestanda för SQLAppStatusListener.aggregateMetrics
- [SPARK-29101][SQL] Åtgärda antal API för csv-fil när DROPMALFORMED-läge har valts
- [SPARK-29042][CORE] Samplingsbaserad RDD med osorterade indata bör vara INDETERMINATE
- [SPARK-29124][CORE] Använd MurmurHash3 bytesHash(data, seed) i stället för bytesHash(data)
- [SPARK-26713][CORE] Avbryt I/O-trådar i PipedRDD när aktiviteten är klar
- [SPARK-29046][SQL] Åtgärda NPE i SQLConf.get när aktiv SparkContext stoppas
- [SPARK-28483] Åtgärda barriärlägesaktiviteten låser sig på barriär() när aktiviteten avlivas
- [SPARK-29087][CORE] [STREAMING] Använd DelegeraServletContextHandler för att undvika CCE
- [SPARK-27122][CORE] Jetty-klasser får inte returneras via getters i org.apache.spark.ui.WebUI
- [SPARK-11150][SQL] Dynamisk partitionsrensning
- [SPARK-27592][SQL] Ange den bucketade datakälltabellen SerDe korrekt
- [SPARK-23519][SQL] Skapa vy bör fungera från fråga med duplicerade utdatakolumner
- [SPARK-29011][BUILD] Uppdatera netty-all från 4.1.17-Final till 4.1.39-Final
- [SPARK-28912] MatchError har åtgärdats i getCheckpointFiles()
- [SPARK-26046][SS] Lägg till StreamingQueryManager.listListeners()
- [SPARK-3137][CORE] Ersätt det globala TorrentBroadcast-låset med finkorniga KeyLock (6.x)
- [SPARK-28709][DSTREAMS] Åtgärda StreamingContext-läckage via direktuppspelning
- [SPARK-22955][DSTREAMS] – graciös avstängning bör inte leda till jobbgen...
- [SPARK-28730][SPARK-28495] Introducera ANSI-lagringstilldelningsprincip för tabellinfogning
- [SPARK-27992][SPARK-28881][PYTHON] Tillåt att Python ansluter med anslutningstråd för att sprida fel
- [SPARK-28025][SS] Åtgärda FileContextBasedCheckpointFileManager-läckande crc-filer
- [SPARK-28699][CORE] Åtgärda ett hörnfall för att avbryta obestämd fas
- [SPARK-28780][ML] inaktuella LinearSVCModel.setWeightCol
- [SPARK-28844][SQL] Åtgärda stavfel i SQLConf FILE_COMRESSION_FACTOR
- [SPARK-26895][CORE] prepareSubmitEnvironment ska anropas inom doAs för proxyanvändare
Underhållsuppdateringar
Se Underhållsuppdateringar för Databricks Runtime 6.1.
Systemmiljö
- Operativsystem: Ubuntu 16.04.6 LTS
- Java: 1.8.0_232
- Scala: 2.11.12
- Python: 3.7.3
- R: R version 3.6.1 (2019-07-05)
- Delta lake: 0.4.0
Kommentar
Även om Scala 2.12 är tillgänglig som en experimentell funktion i Apache Spark 2.4 stöds den inte i Databricks Runtime 6.1.
Installerade Python-bibliotek
| Bibliotek | Version | Bibliotek | Version | Bibliotek | Version |
|---|---|---|---|---|---|
| asn1crypto | 0.24.0 | backcall | 0.1.0 | Boto | 2.49.0 |
| boto3 | 1.9.162 | botocore | 1.12.163 | Certifi | 2019.3.9 |
| Cffi | 1.12.2 | Chardet | 3.0.4 | Kryptografi | 2.6.1 |
| Apparat | 0.10.0 | Cython | 0.29.6 | Dekoratör | 4.4.0 |
| Docutils | 0,14 | idna | 2.8 | Ipython | 7.4.0 |
| ipython-genutils | 0.2.0 | Jedi | 0.13.3 | jmespath | 0.9.4 |
| kiwisolver | 1.1.0 | matplotlib | 3.0.3 | Numpy | 1.16.2 |
| Pandas | 0.24.2 | parso | 0.3.4 | Patsy | 0.5.1 |
| Pexpect | 4.6.0 | pickleshare | 0.7.5 | Pip | 19.0.3 |
| prompt-toolkit | 2.0.9 | psycopg2 | 2.7.6.1 | ptyprocess | 0.6.0 |
| pyarrow | 0.13.0 | pycparser | 2,19 | Pycurl | 7.43.0 |
| Pygments | 2.3.1 | Pygobject | 3.20.0 | Pyopenssl | 19.0.0 |
| Pyparsing | 2.4.2 | PySocks | 1.6.8 | python-apt | 1.1.0.b1+ubuntu0.16.04.5 |
| python-dateutil | 2.8.0 | pytz | 2018.9 | begäranden | 2.21.0 |
| s3transfer | 0.2.1 | scikit-learn | 0.20.3 | Scipy | 1.2.1 |
| seaborn | 0.9.0 | Setuptools | 40.8.0 | Sex | 1.12.0 |
| ssh-import-id | 5,5 | statsmodels | 0.9.0 | traitlets | 4.3.2 |
| obevakade uppgraderingar | 0,1 | urllib3 | 1.24.1 | Virtualenv | 16.4.1 |
| wcwidth | 0.1.7 | Hjul | 0.33.1 |
Installerade R-bibliotek
| Bibliotek | Version | Bibliotek | Version | Bibliotek | Version |
|---|---|---|---|---|---|
| Abind | 1.4-5 | Askpass | 1,1 | assertthat | 0.2.1 |
| Backports | 1.1.3 | bas | 3.6.1 | base64enc | 0.1-3 |
| BH | 1.69.0-1 | bit | 1.1-14 | bit64 | 0.9-7 |
| Bitops | 1.0-6 | blob | 1.1.1 | start | 1.3-23 |
| Brygga | 1.0-6 | anropare | 3.2.0 | car | 3.0-2 |
| carData | 3.0-2 | textmarkör | 6.0-82 | cellranger | 1.1.0 |
| Chron | 2.3-53 | klass | 7.3-15 | cli | 1.1.0 |
| clipr | 0.5.0 | clisymbols | 1.2.0 | cluster | 2.1.0 |
| Codetools | 0.2-16 | Färgrymd | 1.4-1 | commonmark | 1,7 |
| Kompilator | 3.6.1 | config | 0,3 | Krita | 1.3.4 |
| Curl | 3.3 | data.table | 1.12.0 | datauppsättningar | 3.6.1 |
| DBI | 1.0.0 | dbplyr | 1.3.0 | Desc | 1.2.0 |
| Devtools | 2.0.1 | Digest | 0.6.18 | doMC | 1.3.5 |
| dplyr | 0.8.0.1 | ellips | 0.1.0 | fansi | 0.4.0 |
| forcats | 0.4.0 | foreach | 1.4.4 | Utländska | 0.8-72 |
| Forge | 0.2.0 | Fs | 1.2.7 | Gbm | 2.1.5 |
| Generika | 0.0.2 | ggplot2 | 3.1.0 | Gh | 1.0.1 |
| git2r | 0.25.2 | glmnet | 2.0-16 | Lim | 1.3.1 |
| Gower | 0.2.0 | grafik | 3.6.1 | grDevices | 3.6.1 |
| Rutnät | 3.6.1 | gridExtra | 2.3 | gsubfn | 0,7 |
| gtable | 0.3.0 | H2o | 3.22.1.1 | Tillflyktsort | 2.1.0 |
| Hms | 0.4.2 | htmltools | 0.3.6 | htmlwidgets | 1.3 |
| httr | 1.4.0 | hwriter | 1.3.2 | hwriterPlus | 1.0-3 |
| Ini | 0.3.1 | Ipred | 0.9-8 | Iteratorer | 1.0.10 |
| jsonlite | 1.6 | Kernsmooth | 2.23-15 | Märkning | 0,3 |
| Galler | 0.20-38 | Lava | 1.6.5 | lazyeval | 0.2.2 |
| Littler | 0.3.7 | lme4 | 1.1-21 | lubridate | 1.7.4 |
| magrittr | 1.5 | Mapproj | 1.2.6 | Kartor | 3.3.0 |
| maptools | 0.9-5 | MASSACHUSETTS | 7.3-51.4 | Matris | 1.2-17 |
| MatrixModels | 0.4-1 | pmise | 1.1.0 | metoder | 3.6.1 |
| Mgcv | 1.8-29 | Mime | 0,6 | minqa | 1.2.4 |
| ModelMetrics | 1.2.2 | munsell | 0.5.0 | Mvtnorm | 1.0-10 |
| Nlme | 3.1-141 | nloptr | 1.2.1 | Nnet | 7.3-12 |
| numDeriv | 2016.8-1 | openssl | 1.3 | openxlsx | 4.1.0 |
| parallel | 3.6.1 | pbkrtest | 0.4-7 | Pelaren | 1.3.1 |
| pkgbuild | 1.0.3 | Pkgconfig | 2.0.2 | pkgKitten | 0.1.4 |
| pkgload | 1.0.2 | plogr | 0.2.0 | plyr | 1.8.4 |
| Beröm | 1.0.0 | prettyunits | 1.0.2 | Proc | 1.14.0 |
| processx | 3.3.0 | prodlim | 2018.04.18 | Förlopp | 1.2.0 |
| Proto | 1.0.0 | Ps | 1.3.0 | Purrr | 0.3.2 |
| quantreg | 5.38 | R.methodsS3 | 1.7.1 | R.oo | 1.22.0 |
| R.utils | 2.8.0 | r2d3 | 0.2.3 | R6 | 2.4.0 |
| randomForest | 4.6-14 | rappdirs | 0.3.1 | rcmdcheck | 1.3.2 |
| Rcolorbrewer | 1.1-2 | Rcpp | 1.0.1 | RcppEigen | 0.3.3.5.0 |
| RcppRoll | 0.3.0 | RCurl | 1.95-4.12 | readr | 1.3.1 |
| readxl | 1.3.1 | recept | 0.1.5 | Returmatch | 1.0.1 |
| Fjärrkontroller | 2.0.2 | omforma2 | 1.4.3 | Rio | 0.5.16 |
| rlang | 0.3.3 | RODBC | 1.3-15 | roxygen2 | 6.1.1 |
| Rpart | 4.1-15 | rprojroot | 1.3-2 | Rserve | 1.8-6 |
| RSQLite | 2.1.1 | rstudioapi | 0.10 | Skalor | 1.0.0 |
| sessioninfo | 1.1.1 | Sp | 1.3-1 | sparklyr | 1.0.0 |
| SparkR | 2.4.5 | SparseM | 1.77 | Rumsliga | 7.3-11 |
| Splines | 3.6.1 | sqldf | 0.4-11 | SQUAREM | 2017.10-1 |
| statmod | 1.4.30 | Statistik | 3.6.1 | stats4 | 3.6.1 |
| stringi | 1.4.3 | stringr | 1.4.0 | Överlevnad | 2.44-1.1 |
| sys | 3.1 | Tcltk | 3.6.1 | TeachingDemos | 2.10 |
| testthat | 2.0.1 | Tibble | 2.1.1 | tidyr | 0.8.3 |
| avmarkera | 0.2.5 | Timedate | 3043.102 | verktyg | 3.6.1 |
| usethis | 1.4.0 | utf8 | 1.1.4 | verktyg | 3.6.1 |
| viridisLite | 0.3.0 | Morrhår | 0.3-2 | withr | 2.1.2 |
| xml2 | 1.2.0 | xopen | 1.0.0 | Yaml | 2.2.0 |
| Zip | 2.0.1 |
Installerade Java- och Scala-bibliotek (Scala 2.11-klusterversion)
| Grupp-ID | Artefakt-ID | Version |
|---|---|---|
| Antlr | Antlr | 2.7.7 |
| com.amazonaws | amazon-kinesis-client | 1.8.10 |
| com.amazonaws | aws-java-sdk-autoscaling | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudfront | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudhsm | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudsearch | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.11.595 |
| com.amazonaws | aws-java-sdk-codedeploy | 1.11.595 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.11.595 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.11.595 |
| com.amazonaws | aws-java-sdk-config | 1.11.595 |
| com.amazonaws | aws-java-sdk-core | 1.11.595 |
| com.amazonaws | aws-java-sdk-datapipeline | 1.11.595 |
| com.amazonaws | aws-java-sdk-directconnect | 1.11.595 |
| com.amazonaws | aws-java-sdk-directory | 1.11.595 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.11.595 |
| com.amazonaws | aws-java-sdk-ec2 | 1.11.595 |
| com.amazonaws | aws-java-sdk-ecs | 1.11.595 |
| com.amazonaws | aws-java-sdk-efs | 1.11.595 |
| com.amazonaws | aws-java-sdk-elasticache | 1.11.595 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.11.595 |
| com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.11.595 |
| com.amazonaws | aws-java-sdk-elastictranscoder | 1.11.595 |
| com.amazonaws | aws-java-sdk-emr | 1.11.595 |
| com.amazonaws | aws-java-sdk-glacier | 1.11.595 |
| com.amazonaws | aws-java-sdk-glue | 1.11.595 |
| com.amazonaws | aws-java-sdk-iam | 1.11.595 |
| com.amazonaws | aws-java-sdk-importexport | 1.11.595 |
| com.amazonaws | aws-java-sdk-kinesis | 1.11.595 |
| com.amazonaws | aws-java-sdk-kms | 1.11.595 |
| com.amazonaws | aws-java-sdk-lambda | 1.11.595 |
| com.amazonaws | aws-java-sdk-logs | 1.11.595 |
| com.amazonaws | aws-java-sdk-machinelearning | 1.11.595 |
| com.amazonaws | aws-java-sdk-opsworks | 1.11.595 |
| com.amazonaws | aws-java-sdk-rds | 1.11.595 |
| com.amazonaws | aws-java-sdk-redshift | 1.11.595 |
| com.amazonaws | aws-java-sdk-route53 | 1.11.595 |
| com.amazonaws | aws-java-sdk-s3 | 1.11.595 |
| com.amazonaws | aws-java-sdk-ses | 1.11.595 |
| com.amazonaws | aws-java-sdk-simpledb | 1.11.595 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.11.595 |
| com.amazonaws | aws-java-sdk-sns | 1.11.595 |
| com.amazonaws | aws-java-sdk-sqs | 1.11.595 |
| com.amazonaws | aws-java-sdk-ssm | 1.11.595 |
| com.amazonaws | aws-java-sdk-storagegateway | 1.11.595 |
| com.amazonaws | aws-java-sdk-sts | 1.11.595 |
| com.amazonaws | aws-java-sdk-support | 1.11.595 |
| com.amazonaws | aws-java-sdk-swf-libraries | 1.11.22 |
| com.amazonaws | aws-java-sdk-workspaces | 1.11.595 |
| com.amazonaws | jmespath-java | 1.11.595 |
| com.carrotsearch | hppc | 0.7.2 |
| com.chuusai | shapeless_2.11 | 2.3.2 |
| com.clearspring.analytics | Stream | 2.7.0 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | dbml-local_2.11 | 0.5.0-db8-spark2.4 |
| com.databricks | dbml-local_2.11-tests | 0.5.0-db8-spark2.4 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | compilerplugin_2.11 | 0.4.15-9 |
| com.databricks.scalapb | scalapb-runtime_2.11 | 0.4.15-9 |
| com.esotericsoftware | kryo-skuggad | 4.0.2 |
| com.esotericsoftware | Minlog | 1.3.0 |
| com.fasterxml | Klasskamrat | 1.0.0 |
| com.fasterxml.jackson.core | jackson-anteckningar | 2.6.7 |
| com.fasterxml.jackson.core | jackson-core | 2.6.7 |
| com.fasterxml.jackson.core | jackson-databind | 2.6.7.1 |
| com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.6.7 |
| com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-scala_2.11 | 2.6.7.1 |
| com.github.fommil | jniloader | 1,1 |
| com.github.fommil.netlib | kärna | 1.1.2 |
| com.github.fommil.netlib | native_ref-java | 1,1 |
| com.github.fommil.netlib | native_ref-java-natives | 1,1 |
| com.github.fommil.netlib | native_system-java | 1,1 |
| com.github.fommil.netlib | native_system-java-natives | 1,1 |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1,1 |
| com.github.fommil.netlib | netlib-native_system-linux-x86_64-natives | 1,1 |
| com.github.luben | zstd-jni | 1.3.2-2 |
| com.github.rwl | jtransforms | 2.4.0 |
| com.google.code.findbugs | jsr305 | 2.0.1 |
| com.google.code.gson | gson | 2.2.4 |
| com.google.guava | Guava | 15.0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.googlecode.javaewah | JavaEWAH | 0.3.2 |
| com.h2database | h2 | 1.3.174 |
| com.jcraft | Jsch | 0.1.50 |
| com.jolbox | bonecp | 0.8.0.RELEASE |
| com.microsoft.azure | azure-data-lake-store-sdk | 2.2.8 |
| com.microsoft.azure | azure-lagring | 7.0.0 |
| com.microsoft.sqlserver | mssql-jdbc | 6.2.2.jre8 |
| com.ning | compress-lzf | 1.0.3 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.thoughtworks.paranamer | paranamer | 2.8 |
| com.trueaccord.lenses | lenses_2.11 | 0,3 |
| com.twitter | chill-java | 0.9.3 |
| com.twitter | chill_2.11 | 0.9.3 |
| com.twitter | parquet-hadoop-bundle | 1.6.0 |
| com.twitter | util-app_2.11 | 6.23.0 |
| com.twitter | util-core_2.11 | 6.23.0 |
| com.twitter | util-jvm_2.11 | 6.23.0 |
| com.typesafe | config | 1.2.1 |
| com.typesafe.scala-logging | scala-logging-api_2.11 | 2.1.2 |
| com.typesafe.scala-logging | scala-logging-slf4j_2.11 | 2.1.2 |
| com.univocity | univocity-parsers | 2.7.3 |
| com.vlkan | flatbuffers | 1.2.0-3f79e055 |
| com.zaxxer | HikariCP | 3.1.0 |
| commons-beanutils | commons-beanutils | 1.9.3 |
| commons-cli | commons-cli | 1.2 |
| commons-codec | commons-codec | 1.10 |
| commons-collections | commons-collections | 3.2.2 |
| commons-configuration | commons-configuration | 1.6 |
| commons-dbcp | commons-dbcp | 1.4 |
| commons-digester | commons-digester | 1.8 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2.4 |
| commons-lang | commons-lang | 2,6 |
| commons-logging | commons-logging | 1.1.3 |
| commons-net | commons-net | 3.1 |
| commons-pool | commons-pool | 1.5.4 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.7 |
| io.airlift | aircompressor | 0.10 |
| io.dropwizard.metrics | metrics-core | 3.1.5 |
| io.dropwizard.metrics | metrics-ganglia | 3.1.5 |
| io.dropwizard.metrics | metrics-graphite | 3.1.5 |
| io.dropwizard.metrics | metrics-healthchecks | 3.1.5 |
| io.dropwizard.metrics | metrics-jetty9 | 3.1.5 |
| io.dropwizard.metrics | metrics-json | 3.1.5 |
| io.dropwizard.metrics | metrics-jvm | 3.1.5 |
| io.dropwizard.metrics | metrics-log4j | 3.1.5 |
| io.dropwizard.metrics | metrics-servlets | 3.1.5 |
| io.netty | Netty | 3.9.9.Final |
| io.netty | netty-all | 4.1.39.Final |
| javax.activation | aktivering | 1.1.1 |
| javax.annotation | javax.annotation-api | 1.2 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.servlet | javax.servlet-api | 3.1.0 |
| javax.servlet.jsp | jsp-api | 2.1 |
| javax.transaction | Jta | 1,1 |
| javax.validation | validation-api | 1.1.0.Final |
| javax.ws.rs | javax.ws.rs-api | 2.0.1 |
| javax.xml.bind | jaxb-api | 2.2.2 |
| javax.xml.stream | stax-api | 1.0-2 |
| javolution | javolution | 5.5.1 |
| Jline | Jline | 2.14.6 |
| joda-time | joda-time | 2.9.3 |
| Junit | Junit | 4.12 |
| log4j | apache-log4j-extras | 1.2.17 |
| log4j | log4j | 1.2.17 |
| net.hydromatic | eigenbase-properties | 1.1.5 |
| net.razorvine | pyrolit | 4.13 |
| net.sf.jpam | jpam | 1,1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | super-csv | 2.2.0 |
| net.snowflake | snowflake-ingest-sdk | 0.9.6 |
| net.snowflake | snowflake-jdbc | 3.12.0 |
| net.snowflake | spark-snowflake_2.11 | 2.5.9-spark_2.4 |
| net.sourceforge.f2j | arpack_combined_all | 0,1 |
| org.acplt | oncrpc | 1.0.7 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | antlr-runtime | 3.4 |
| org.antlr | antlr4-runtime | 4.7 |
| org.antlr | stringtemplate | 3.2.1 |
| org.apache.ant | Ant | 1.9.2 |
| org.apache.ant | ant-jsch | 1.9.2 |
| org.apache.ant | ant-launcher | 1.9.2 |
| org.apache.arrow | pilformat | 0.10.0 |
| org.apache.arrow | pilminne | 0.10.0 |
| org.apache.arrow | pilvektor | 0.10.0 |
| org.apache.avro | Avro | 1.8.2 |
| org.apache.avro | avro-ipc | 1.8.2 |
| org.apache.avro | avro-mapred-hadoop2 | 1.8.2 |
| org.apache.calcite | calcite-avatica | 1.2.0-inkubering |
| org.apache.calcite | calcite-core | 1.2.0-inkubering |
| org.apache.calcite | calcite-linq4j | 1.2.0-inkubering |
| org.apache.commons | commons-compress | 1.8.1 |
| org.apache.commons | commons-crypto | 1.0.0 |
| org.apache.commons | commons-lang3 | 3.5 |
| org.apache.commons | commons-math3 | 3.4.1 |
| org.apache.curator | curator-client | 2.7.1 |
| org.apache.curator | curator-framework | 2.7.1 |
| org.apache.curator | curator-recept | 2.7.1 |
| org.apache.derby | Derby | 10.12.1.1 |
| org.apache.directory.api | api-asn1-api | 1.0.0-M20 |
| org.apache.directory.api | api-util | 1.0.0-M20 |
| org.apache.directory.server | apacheds-i18n | 2.0.0-M15 |
| org.apache.directory.server | apacheds-kerberos-codec | 2.0.0-M15 |
| org.apache.hadoop | hadoop-anteckningar | 2.7.3 |
| org.apache.hadoop | hadoop-auth | 2.7.3 |
| org.apache.hadoop | hadoop-client | 2.7.3 |
| org.apache.hadoop | hadoop-common | 2.7.3 |
| org.apache.hadoop | hadoop-hdfs | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-app | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-common | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-core | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-jobclient | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-shuffle | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-api | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-client | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-common | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-server-common | 2.7.3 |
| org.apache.htrace | htrace-core | 3.1.0-inkubering |
| org.apache.httpcomponents | httpclient | 4.5.6 |
| org.apache.httpcomponents | httpcore | 4.4.10 |
| org.apache.ivy | Ivy | 2.4.0 |
| org.apache.orc | orc-core-nohive | 1.5.5 |
| org.apache.orc | orc-mapreduce-nohive | 1.5.5 |
| org.apache.orc | orc-shims | 1.5.5 |
| org.apache.parquet | parquet-column | 1.10.1.2-databricks4 |
| org.apache.parquet | parquet-common | 1.10.1.2-databricks4 |
| org.apache.parquet | parquet-kodning | 1.10.1.2-databricks4 |
| org.apache.parquet | parquet-format | 2.4.0 |
| org.apache.parquet | parquet-hadoop | 1.10.1.2-databricks4 |
| org.apache.parquet | parquet-jackson | 1.10.1.2-databricks4 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.9.3 |
| org.apache.xbean | xbean-asm6-shaded | 4.8 |
| org.apache.zookeeper | zookeeper | 3.4.6 |
| org.codehaus.jackson | jackson-core-asl | 1.9.13 |
| org.codehaus.jackson | jackson-jaxrs | 1.9.13 |
| org.codehaus.jackson | jackson-mapper-asl | 1.9.13 |
| org.codehaus.jackson | jackson-xc | 1.9.13 |
| org.codehaus.janino | commons-compiler | 3.0.10 |
| org.codehaus.janino | Janino | 3.0.10 |
| org.datanucleus | datanucleus-api-jdo | 3.2.6 |
| org.datanucleus | datanucleus-core | 3.2.10 |
| org.datanucleus | datanucleus-rdbms | 3.2.9 |
| org.eclipse.jetty | jetty-client | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-fortsättning | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-http | 9.3.27.v20190418 |
| org.eclipse.jetty | brygga-io | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-jndi | 9.3.27.v20190418 |
| org.eclipse.jetty | brygga plus | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-proxy | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-security | 9.3.27.v20190418 |
| org.eclipse.jetty | brygga-server | 9.3.27.v20190418 |
| org.eclipse.jetty | brygga-servlet | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-servlets | 9.3.27.v20190418 |
| org.eclipse.jetty | brygga-util | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-webapp | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-xml | 9.3.27.v20190418 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-locator | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-utils | 2.4.0-b34 |
| org.glassfish.hk2 | osgi-resource-locator | 1.0.1 |
| org.glassfish.hk2.external | aopalliance-repackaged | 2.4.0-b34 |
| org.glassfish.hk2.external | javax.inject | 2.4.0-b34 |
| org.glassfish.jersey.bundles.repackaged | jersey-guava | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet-core | 2.22.2 |
| org.glassfish.jersey.core | jersey-client | 2.22.2 |
| org.glassfish.jersey.core | jersey-common | 2.22.2 |
| org.glassfish.jersey.core | jersey-server | 2.22.2 |
| org.glassfish.jersey.media | jersey-media-jaxb | 2.22.2 |
| org.hamcrest | hamcrest-core | 1.3 |
| org.hamcrest | hamcrest-library | 1.3 |
| org.hibernate | vilolägesverifierare | 5.1.1.Final |
| org.iq80.snappy | Snappy | 0.2 |
| org.javassist | javassist | 3.18.1-GA |
| org.jboss.logging | jboss-logging | 3.1.3.GA |
| org.jdbi | jdbi | 2.63.1 |
| org.joda | joda-convert | 1,7 |
| org.jodd | jodd-core | 3.5.2 |
| org.json4s | json4s-ast_2.11 | 3.5.3 |
| org.json4s | json4s-core_2.11 | 3.5.3 |
| org.json4s | json4s-jackson_2.11 | 3.5.3 |
| org.json4s | json4s-scalap_2.11 | 3.5.3 |
| org.lz4 | lz4-java | 1.4.0 |
| org.mariadb.jdbc | mariadb-java-client | 2.1.2 |
| org.mockito | mockito-core | 1.10.19 |
| org.objenesis | objenesis | 2.5.1 |
| org.postgresql | postgresql | 42.1.4 |
| org.roaringbitmap | RoaringBitmap | 0.7.45 |
| org.roaringbitmap | Shims | 0.7.45 |
| org.rocksdb | rocksdbjni | 6.2.2 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | scala-compiler_2.11 | 2.11.12 |
| org.scala-lang | scala-library_2.11 | 2.11.12 |
| org.scala-lang | scala-reflect_2.11 | 2.11.12 |
| org.scala-lang.modules | scala-parser-combinators_2.11 | 1.1.0 |
| org.scala-lang.modules | scala-xml_2.11 | 1.0.5 |
| org.scala-sbt | test-interface | 1.0 |
| org.scalacheck | scalacheck_2.11 | 1.12.5 |
| org.scalactic | scalactic_2.11 | 3.0.3 |
| org.scalanlp | breeze-macros_2.11 | 0.13.2 |
| org.scalanlp | breeze_2.11 | 0.13.2 |
| org.scalatest | scalatest_2.11 | 3.0.3 |
| org.slf4j | jcl-over-slf4j | 1.7.16 |
| org.slf4j | jul-to-slf4j | 1.7.16 |
| org.slf4j | slf4j-api | 1.7.16 |
| org.slf4j | slf4j-log4j12 | 1.7.16 |
| org.spark-project.hive | hive-beeline | 1.2.1.spark2 |
| org.spark-project.hive | hive-cli | 1.2.1.spark2 |
| org.spark-project.hive | hive-jdbc | 1.2.1.spark2 |
| org.spark-project.hive | hive-metaarkiv | 1.2.1.spark2 |
| org.spark-project.spark | Oanvända | 1.0.0 |
| org.spire-math | spire-macros_2.11 | 0.13.0 |
| org.spire-math | spire_2.11 | 0.13.0 |
| org.springframework | spring-core | 4.1.4.RELEASE |
| org.springframework | spring-test | 4.1.4.RELEASE |
| org.tukaani | Xz | 1.5 |
| org.typelevel | machinist_2.11 | 0.6.1 |
| org.typelevel | macro-compat_2.11 | 1.1.1 |
| org.xerial | sqlite-jdbc | 3.8.11.2 |
| org.xerial.snappy | snappy-java | 1.1.7.3 |
| org.yaml | snakeyaml | 1.16 |
| oro | oro | 2.0.8 |
| software.amazon.ion | ion-java | 1.0.2 |
| Stax | stax-api | 1.0.1 |
| xmlenc | xmlenc | 0,52 |