Databricks Runtime 5.3 (stöds inte)
Databricks släppte den här bilden i april 2019.
Följande viktig information innehåller information om Databricks Runtime 5.3 som drivs av Apache Spark.
Nya funktioner
Databricks Delta
Ga för tidsresor
Deltatidsresor har tagits ut till allmän tillgänglighet. Den lägger till möjligheten att fråga en ögonblicksbild av en tabell med hjälp av en tidsstämpelsträng eller en version, med hjälp av SQL-syntax samt DataFrameReader alternativ för tidsstämpeluttryck.
SELECT count(*) FROM events TIMESTAMP AS OF timestamp_expression
SELECT count(*) FROM events VERSION AS OF version
Tidsresor har många användningsfall, bland annat:
- Återskapa analyser, rapporter eller utdata (till exempel utdata från en maskininlärningsmodell), vilket är användbart för felsökning eller granskning, särskilt i reglerade branscher.
- Skriva komplexa temporala frågor.
- Åtgärda misstag i dina data.
- Tillhandahålla ögonblicksbildisolering för en uppsättning frågor för snabbväxande tabeller.
Läs mer i Arbeta med Delta Lake-tabellhistorik.
MySQL-tabellreplikering till Delta Public Preview
Strömma data från en MySQL-tabell direkt till Delta för nedströmsförbrukning i Spark-analys eller arbetsflöden för datavetenskap. Genom att använda samma strategi som MySQL använder för replikering till andra instanser binlog används den för att identifiera uppdateringar som sedan bearbetas och strömmas till Databricks på följande sätt:
- Läser ändringshändelser från databasloggen.
- Flöden händelserna till Databricks.
- Skriver i samma ordning till en Delta-tabell.
- Underhåller tillstånd vid frånkopplingar från källan.
Funktioner för privat förhandsversion
Den här versionen innehåller följande privata förhandsversionsfunktioner för Delta Lake:
- Lade till ett experimentellt kommando som gör att Presto kan fråga Delta-tabeller direkt.
- Autooptimera optimerar fillayouten under enskilda skrivningar till en Delta-tabell och förhindrar att små filer ackumuleras i deltatabellerna för att upprätthålla blixthastighetens frågeprestanda. Dessutom kan skrivningar och upserts i partitionerade Delta-tabeller få stora hastigheter tack vare en anpassningsbar blandning som introduceras i skrivningar.
Om du vill delta i någon av förhandsversionerna kontaktar du ditt Databricks-kontoteam.
Optimerad DBFS FUSE-mapp för djupinlärningsarbetsbelastningar
Azure Databricks erbjuder nu en optimerad FUSE-montering. Du kan ha dataåtkomst med höga prestanda under träning och slutsatsdragning utan att använda init-skript. Data som lagras under dbfs:/ml och är tillgängliga lokalt på file:/dbfs/ml backas nu upp av den här optimerade FUSE-monteringen. Se Läsa in data för maskininlärning och djupinlärning.
Förbättringar
Bibliotek med notebook-omfång:
- Stöd för extrafunktioner i
dbutils.library.installPyPI. - Stöd för biblioteksinstallation med notebook-omfång för bibliotek i Azure-filsystemet, inklusive
wasbs,adlsochabfss. - Förbättrade felmeddelanden för bibliotek med notebook-omfång på mål som inte stöds. Till exempel: "Biblioteksverktyg är inte tillgängliga på Databricks Runtime för Machine Learning."
- Stöd för extrafunktioner i
Anslut till Azure Data Lake Storage Gen2 (ADLS Gen2) utan att behöva bevilja en kontoomfattande RBAC-roll för "Storage Blob Data Contributor" till tjänstens huvudnamn.
Databricks Advisor har ytterligare tips för att förbättra prestanda för frågor:
- När det finns många små filer per partition –> Konvertera tabell till Delta och kör
OPTIMIZE. - När det finns ett mycket selektivt filter –> Konvertera till Delta och använd
ZORDER BY. - När metadata hämtas från Hive blir en flaskhals –> Konvertera tabellen till Delta.
- När det finns många små filer per partition –> Konvertera tabell till Delta och kör
Uppgraderade Ubuntu från 16.04.5 LTS till 16.04.6 LTS.
Uppgraderade Scala 2.11 från 2.11.8 till 2.11.12.
Uppgraderade några installerade Python-bibliotek:
- pip: 18.1 till 19.0.3.
- setuptools: 40.6.3 till 40.8.0
- hjul: 0.32.3 till 0.33.1
Uppgraderad R från 3.4.4 till 3.5.2.
Uppgraderade flera installerade R-bibliotek. Se Installerade R-bibliotek.
Inaktualitet
- Apache Kafka 0.8-anslutningsprogrammet för strukturerad direktuppspelning stöds inte längre. Den ingår i Databricks Runtime 5.3 men tas bort från en framtida Databricks Runtime-version.
- Databricks ML-modellexport är inaktuell och tas bort i Databricks Runtime 6.0. Använd MLeap för att importera och exportera modeller i stället.
- Har tagits bort
spark.databricks.pyspark.enableExecutorFsPermssom ett konfigurationsalternativ.
Felkorrigeringar
- En klusteromfattande Python Egg-biblioteksinstallation har åtgärdats för kluster som är aktiverade för tabell-ACL:er.
- Förbättrad annullering av Python-kommandon genom att åtgärda den situation där annullering anropas innan kommandot körs.
- Ett fel har åtgärdats i tabell-ACL:er: nu när du listar objekt i en databas eller katalog ser du bara de objekt som du har behörighet att se.
Apache Spark
Databricks Runtime 5.3 innehåller Apache Spark 2.4.0. Den här versionen innehåller alla Spark-korrigeringar och förbättringar som ingår i Databricks Runtime 5.2 (stöds inte) samt följande ytterligare felkorrigeringar och förbättringar som gjorts i Spark:
- [SPARK-27134][SQL] array_distinct funktionen fungerar inte korrekt med kolumner som innehåller matrismatris
- [SPARK-24669][SQL] Ogiltigförklara tabeller vid DROP DATABASE CASCADE
- [SPARK-26572][SQL] korrigerar utvärdering av sammanställda codegen-resultat
- [SPARK-27046][DSTREAMS] Ta bort SPARK-19185-relaterade referenser från dokumentationen
- [SPARK-26449][PYTHON] Lägga till transformeringsmetod i DataFrame API
- [SPARK-26740][SQL] Läs tidsstämpel/datumkolumnstatistik skriven av Spark 3.0
- [SPARK-26909][SQL] använder unsafeRow.hashCode() som hash-värde i HashAggregate
- [SPARK-26990][SQL] FileIndex: använd angivna fältnamn om möjligt
- [SPARK-26851][SQL] Åtgärda dubbelkontrollerad låsning i CachedRDDBuilder
- [SPARK-26864][SQL] Frågan kan returnera felaktigt resultat när Python UDF används som ett villkor för vänster-semikoppling
- [SPARK-26887][SQL] [PYTHON] Skapa
datetime.datedirekt i stället för att skapa datetime64 som mellanliggande data. - [SPARK-26859][SQL] Åtgärda indexfel för fältskrivare i icke-vektoriserad ORC-deserialiserare
- [SPARK-26864][SQL] Frågan kan returnera felaktigt resultat när Python UDF används som ett kopplingsvillkor och udf använder attribut från båda benen på vänster halvkoppling
- [SPARK-24360][SPARK-26091][BACKPORT] [SQL] Stöd för Hive 3.1-metaarkiv
- [SPARK-26873][SQL] Använd en konsekvent tidsstämpel för att skapa Hadoop-jobb-ID:er.
- [SPARK-26734][STREAMING] Åtgärda StackOverflowError med stor blockkö
- [SPARK-26758][CORE] Inaktiva utförare avlivas inte efter värdet spark.dynamiAllocation.executorIdleTimeout
- [SPARK-26751][SQL] Åtgärda minnesläckage när instruktionen körs i bakgrunden och utlösa undantag som inte är HiveSQLException
- [SPARK-26806][SS] EventTimeStats.merge ska hantera nollor korrekt
- [SPARK-26745][SPARK-24959][SQL] Återställ optimering av antal i JSON-datakälla efter
- [SPARK-26757][GRAPHX] Returnera 0 för antal tomma Edge/Hörn-RDD:ar
- [SPARK-26726] Synkronisera mängden minne som används av sändningsvariabeln till UI-visningen
- [SPARK-26718][SS] Fast heltalsspill i SS kafka rateLimit-beräkning
- [SPARK-26708][SQL] Felaktigt resultat som orsakas av inkonsekvens mellan en SQL-cache cachelagrad RDD och dess fysiska plan
- [SPARK-26735][SQL] Verifiera planens integritet för specialuttryck
- [SPARK-26619][SQL] Rensa de oanvända serialiserarna från SerializeFromObject
- [SPARK-26379][SS] Använd dummy TimeZoneId för att undvika UnresolvedException i CurrentBatchTimestamp
- [SPARK-26495][SQL] Förenkla SelectedField-extraktorn
- [SPARK-26379][SS] Åtgärda problem med att lägga till current_timestamp/current_date i strömmande fråga
- [SPARK-26709][SQL] OptimizeMetadataOnlyQuery hanterar inte tomma poster korrekt
- [SPARK-26680][SQL] Skapa ivrigt inputVars medan förhållandena är lämpliga
- [SPARK-26682][SQL] Använd taskAttemptID i stället för attemptNumber för Hadoop.
- [SPARK-26706][SQL] Åtgärda illegalNumericPrecedence för ByteType
- [SPARK-26228][MLLIB] OOM-problem påträffades vid databehandling av grammatris
- [SPARK-26665][CORE] Åtgärda en bugg som BlockTransferService.fetchBlockSync kan hänga för alltid
- [SPARK-26549][PYSPARK] Korrigering för återanvändning av Python-arbetare har ingen effekt för parallellisering av lat iterbart intervall
- [SPARK-26351][MLLIB] Uppdatera dokument och mindre korrigering i mllib-utvärderingsmåtten
- [SPARK-26450]Undvik att återskapa schemakartan för varje kolumn i en projektion
- [SPARK-26638][PYSPARK] [ML] Pyspark-vektorklasser returnerar alltid fel för oföränderlig negation
- [SPARK-26633][REPL] Lägg till ExecutorClassLoader.getResourceAsStream
- [SPARK-26629][SS] Ett fel har åtgärdats med flera filströmmar i en fråga + omstart på en batch som inte har några data för en filström
- [SPARK-25992][PYTHON] Dokumentet SparkContext kan inte delas för flera processer
- [SPARK-26615][CORE] Åtgärda transportserver-/klientresursläckor i kärnenhetstesterna
- [SPARK-26350][SS] Tillåt att åsidosätta grupp-ID för Kafka-konsumenten
- [SPARK-26538][SQL] Ange standardprecision och skalning för element i postgres numerisk matris
- [SPARK-26586][SS] Åtgärda konkurrenstillstånd som gör att strömmar körs med oväntade konfigurationer
- [SPARK-26551][SQL] Åtgärda schemarensningsfel när du väljer ett komplext fält och har inte är null-predikat på ett annat
- [SPARK-26576][SQL] Sändningstipset tillämpas inte på partitionerad tabell
- [SPARK-26571][SQL] Uppdatera Hive Serde-mappning med kanoniskt namn på Parquet och Orc FileFormat
- [SPARK-26267][SS] Försök igen när du identifierar felaktiga förskjutningar från Kafka (2.4)
- [SPARK-26559][ML] [PYSPARK] ML-avbildningen kan inte fungera med numpy-versioner före 1.9
- [SPARK-26078][SQL] Dedupliceringsattribut för självkoppling i IN-underfrågor
Underhållsuppdateringar
Se Underhållsuppdateringar för Databricks Runtime 5.3.
Systemmiljö
- Operativsystem: Ubuntu 16.04.6 LTS
- Java: 1.8.0_191
- Scala: 2.11.12
- Python: 2.7.12 för Python 2-kluster och 3.5.2 för Python 3-kluster.
- R: R version 3.5.2 (2018-12-20)
- GPU-kluster: Följande NVIDIA GPU-bibliotek är installerade:
- Tesla-förare 375,66
- CUDA 9.0
- cuDNN 7.0
Kommentar
Även om Scala 2.12 stöds i Apache Spark 2.4 stöds det inte i Databricks Runtime 5.3.
Installerade Python-bibliotek
| Bibliotek | Version | Bibliotek | Version | Bibliotek | Version |
|---|---|---|---|---|---|
| ansi2html | 1.1.1 | argparse | 1.2.1 | backports-abc | 0,5 |
| Boto | 2.42.0 | boto3 | 1.4.1 | botocore | 1.4.70 |
| brewer2mpl | 1.4.1 | Certifi | 2016.2.28 | Cffi | 1.7.0 |
| Chardet | 2.3.0 | Colorama | 0.3.7 | Configobj | 5.0.6 |
| Kryptografi | 1.5 | Apparat | 0.10.0 | Cython | 0.24.1 |
| Dekoratör | 4.0.10 | Docutils | 0,14 | uppräkning 34 | 1.1.6 |
| et-xmlfile | 1.0.1 | freetype-py | 1.0.2 | funcsigs | 1.0.2 |
| fusepy | 2.0.4 | Terminer | 3.2.0 | ggplot | 0.6.8 |
| html5lib | 0,999 | idna | 2.1 | Ip | 1.0.16 |
| Ipython | 2.2.0 | ipython-genutils | 0.1.0 | jdcal | 1.2 |
| Jinja2 | 2.8 | jmespath | 0.9.0 | llvmlite | 0.13.0 |
| Lxml | 3.6.4 | Markering Valv | 0.23 | matplotlib | 1.5.3 |
| mpld3 | 0.2 | msgpack-python | 0.4.7 | ndg-httpsclient | 0.3.3 |
| numba | 0.28.1 | Numpy | 1.11.1 | openpyxl | 2.3.2 |
| Pandas | 0.19.2 | pathlib2 | 2.1.0 | Patsy | 0.4.1 |
| Pexpect | 4.0.1 | pickleshare | 0.7.4 | Kudde | 3.3.1 |
| Pip | 19.0.3 | Ply | 3.9 | prompt-toolkit | 1.0.7 |
| psycopg2 | 2.6.2 | ptyprocess | 0.5.1 | py4j | 0.10.3 |
| pyarrow | 0.8.0 | pyasn1 | 0.1.9 | pycparser | 2,14 |
| Pygments | 2.1.3 | Pygobject | 3.20.0 | Pyopenssl | 16.0.0 |
| Pyparsing | 2.2.0 | pypng | 0.0.18 | Python | 2.7.12 |
| python-dateutil | 2.5.3 | python-geohash | 0.8.5 | pytz | 2016.6.1 |
| begäranden | 2.11.1 | s3transfer | 0.1.9 | scikit-learn | 0.18.1 |
| Scipy | 0.18.1 | Skura | 0.32 | seaborn | 0.7.1 |
| Setuptools | 40.8.0 | Simplejson | 3.8.2 | simples3 | 1.0 |
| singledispatch | 3.4.0.3 | Sex | 1.10.0 | statsmodels | 0.6.1 |
| Tornado | 5.1.1 | traitlets | 4.3.0 | urllib3 | 1.19.1 |
| Virtualenv | 16.1.0 | wcwidth | 0.1.7 | Hjul | 0.33.1 |
| Wsgiref | 0.1.2 |
Installerade R-bibliotek
| Bibliotek | Version | Bibliotek | Version | Bibliotek | Version |
|---|---|---|---|---|---|
| Abind | 1.4-5 | Askpass | 1,1 | assertthat | 0.2.0 |
| Backports | 1.1.3 | bas | 3.5.2 | base64enc | 0.1-3 |
| BH | 1.69.0-1 | bit | 1.1-14 | bit64 | 0.9-7 |
| Bitops | 1.0-6 | blob | 1.1.1 | start | 1.3-20 |
| Brygga | 1.0-6 | anropare | 3.1.1 | car | 3.0-2 |
| carData | 3.0-2 | textmarkör | 6.0-81 | cellranger | 1.1.0 |
| Chron | 2.3-53 | klass | 7.3-15 | cli | 1.0.1 |
| clipr | 0.5.0 | clisymbols | 1.2.0 | cluster | 2.0.7-1 |
| Codetools | 0.2-16 | Färgrymd | 1.4-0 | commonmark | 1,7 |
| Kompilator | 3.5.2 | config | 0,3 | Krita | 1.3.4 |
| Curl | 3.3 | data.table | 1.12.0 | datauppsättningar | 3.5.2 |
| DBI | 1.0.0 | dbplyr | 1.3.0 | Desc | 1.2.0 |
| Devtools | 2.0.1 | Digest | 0.6.18 | doMC | 1.3.5 |
| dplyr | 0.8.0.1 | ellips | 0.1.0 | fansi | 0.4.0 |
| forcats | 0.4.0 | foreach | 1.4.4 | Utländska | 0.8-71 |
| Forge | 0.2.0 | Fs | 1.2.6 | Gbm | 2.1.5 |
| Generika | 0.0.2 | ggplot2 | 3.1.0 | Gh | 1.0.1 |
| git2r | 0.24.0 | glmnet | 2.0-16 | Lim | 1.3.0 |
| Gower | 0.1.2 | grafik | 3.5.2 | grDevices | 3.5.2 |
| Rutnät | 3.5.2 | gridExtra | 2.3 | gsubfn | 0,7 |
| gtable | 0.2.0 | H2o | 3.22.1.1 | Tillflyktsort | 2.1.0 |
| Hms | 0.4.2 | htmltools | 0.3.6 | htmlwidgets | 1.3 |
| httr | 1.4.0 | hwriter | 1.3.2 | hwriterPlus | 1.0-3 |
| Ini | 0.3.1 | Ipred | 0.9-8 | Iteratorer | 1.0.10 |
| jsonlite | 1.6 | Kernsmooth | 2.23-15 | Märkning | 0,3 |
| Galler | 0.20-38 | Lava | 1.6.5 | lazyeval | 0.2.1 |
| Littler | 0.3.6 | lme4 | 1.1-20 | lubridate | 1.7.4 |
| magrittr | 1.5 | Mapproj | 1.2.6 | Kartor | 3.3.0 |
| maptools | 0.9-5 | MASSACHUSETTS | 7.3-51.1 | Matris | 1.2-15 |
| MatrixModels | 0.4-1 | pmise | 1.1.0 | metoder | 3.5.2 |
| Mgcv | 1.8-27 | Mime | 0,6 | minqa | 1.2.4 |
| ModelMetrics | 1.2.2 | munsell | 0.5.0 | Mvtnorm | 1.0-9 |
| Nlme | 3.1-137 | nloptr | 1.2.1 | Nnet | 7.3-12 |
| numDeriv | 2016.8-1 | openssl | 1.2.2 | openxlsx | 4.1.0 |
| parallel | 3.5.2 | pbkrtest | 0.4-7 | Pelaren | 1.3.1 |
| pkgbuild | 1.0.2 | Pkgconfig | 2.0.2 | pkgKitten | 0.1.4 |
| pkgload | 1.0.2 | plogr | 0.2.0 | plyr | 1.8.4 |
| Beröm | 1.0.0 | prettyunits | 1.0.2 | Proc | 1.13.0 |
| processx | 3.2.1 | prodlim | 2018.04.18 | Förlopp | 1.2.0 |
| Proto | 1.0.0 | Ps | 1.3.0 | Purrr | 0.3.0 |
| quantreg | 5.38 | R.methodsS3 | 1.7.1 | R.oo | 1.22.0 |
| R.utils | 2.8.0 | r2d3 | 0.2.3 | R6 | 2.4.0 |
| randomForest | 4.6-14 | rappdirs | 0.3.1 | rcmdcheck | 1.3.2 |
| Rcolorbrewer | 1.1-2 | Rcpp | 1.0.0 | RcppEigen | 0.3.3.5.0 |
| RcppRoll | 0.3.0 | RCurl | 1.95-4.11 | readr | 1.3.1 |
| readxl | 1.3.0 | recept | 0.1.4 | Returmatch | 1.0.1 |
| Fjärrkontroller | 2.0.2 | omforma2 | 1.4.3 | Rio | 0.5.16 |
| rlang | 0.3.1 | RODBC | 1.3-15 | roxygen2 | 6.1.1 |
| Rpart | 4.1-13 | rprojroot | 1.3-2 | Rserve | 1.8-6 |
| RSQLite | 2.1.1 | rstudioapi | 0.9.0 | Skalor | 1.0.0 |
| sessioninfo | 1.1.1 | Sp | 1.3-1 | sparklyr | 1.0.0 |
| SparkR | 2.4.2 | SparseM | 1.77 | Rumsliga | 7.3-11 |
| Splines | 3.5.2 | sqldf | 0.4-11 | SQUAREM | 2017.10-1 |
| statmod | 1.4.30 | Statistik | 3.5.2 | stats4 | 3.5.2 |
| stringi | 1.3.1 | stringr | 1.4.0 | Överlevnad | 2.43-3 |
| sys | 3,0 | Tcltk | 3.5.2 | TeachingDemos | 2.10 |
| testthat | 2.0.1 | Tibble | 2.0.1 | tidyr | 0.8.3 |
| avmarkera | 0.2.5 | Timedate | 3043.102 | tools | 3.5.2 |
| usethis | 1.4.0 | utf8 | 1.1.4 | verktyg | 3.5.2 |
| viridisLite | 0.3.0 | Morrhår | 0.3-2 | withr | 2.1.2 |
| xml2 | 1.2.0 | xopen | 1.0.0 | Yaml | 2.2.0 |
| Zip | 2.0.0 |
Installerade Java- och Scala-bibliotek (Scala 2.11-klusterversion)
| Grupp-ID | Artefakt-ID | Version |
|---|---|---|
| Antlr | Antlr | 2.7.7 |
| com.amazonaws | amazon-kinesis-client | 1.8.10 |
| com.amazonaws | aws-java-sdk-autoscaling | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudfront | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudhsm | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudsearch | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.11.313 |
| com.amazonaws | aws-java-sdk-codedeploy | 1.11.313 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.11.313 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.11.313 |
| com.amazonaws | aws-java-sdk-config | 1.11.313 |
| com.amazonaws | aws-java-sdk-core | 1.11.313 |
| com.amazonaws | aws-java-sdk-datapipeline | 1.11.313 |
| com.amazonaws | aws-java-sdk-directconnect | 1.11.313 |
| com.amazonaws | aws-java-sdk-directory | 1.11.313 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.11.313 |
| com.amazonaws | aws-java-sdk-ec2 | 1.11.313 |
| com.amazonaws | aws-java-sdk-ecs | 1.11.313 |
| com.amazonaws | aws-java-sdk-efs | 1.11.313 |
| com.amazonaws | aws-java-sdk-elasticache | 1.11.313 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.11.313 |
| com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.11.313 |
| com.amazonaws | aws-java-sdk-elastictranscoder | 1.11.313 |
| com.amazonaws | aws-java-sdk-emr | 1.11.313 |
| com.amazonaws | aws-java-sdk-glacier | 1.11.313 |
| com.amazonaws | aws-java-sdk-iam | 1.11.313 |
| com.amazonaws | aws-java-sdk-importexport | 1.11.313 |
| com.amazonaws | aws-java-sdk-kinesis | 1.11.313 |
| com.amazonaws | aws-java-sdk-kms | 1.11.313 |
| com.amazonaws | aws-java-sdk-lambda | 1.11.313 |
| com.amazonaws | aws-java-sdk-logs | 1.11.313 |
| com.amazonaws | aws-java-sdk-machinelearning | 1.11.313 |
| com.amazonaws | aws-java-sdk-opsworks | 1.11.313 |
| com.amazonaws | aws-java-sdk-rds | 1.11.313 |
| com.amazonaws | aws-java-sdk-redshift | 1.11.313 |
| com.amazonaws | aws-java-sdk-route53 | 1.11.313 |
| com.amazonaws | aws-java-sdk-s3 | 1.11.313 |
| com.amazonaws | aws-java-sdk-ses | 1.11.313 |
| com.amazonaws | aws-java-sdk-simpledb | 1.11.313 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.11.313 |
| com.amazonaws | aws-java-sdk-sns | 1.11.313 |
| com.amazonaws | aws-java-sdk-sqs | 1.11.313 |
| com.amazonaws | aws-java-sdk-ssm | 1.11.313 |
| com.amazonaws | aws-java-sdk-storagegateway | 1.11.313 |
| com.amazonaws | aws-java-sdk-sts | 1.11.313 |
| com.amazonaws | aws-java-sdk-support | 1.11.313 |
| com.amazonaws | aws-java-sdk-swf-libraries | 1.11.22 |
| com.amazonaws | aws-java-sdk-workspaces | 1.11.313 |
| com.amazonaws | jmespath-java | 1.11.313 |
| com.carrotsearch | hppc | 0.7.2 |
| com.chuusai | shapeless_2.11 | 2.3.2 |
| com.clearspring.analytics | Stream | 2.7.0 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | dbml-local_2.11 | 0.5.0-db8-spark2.4 |
| com.databricks | dbml-local_2.11-tests | 0.5.0-db8-spark2.4 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | compilerplugin_2.11 | 0.4.15-9 |
| com.databricks.scalapb | scalapb-runtime_2.11 | 0.4.15-9 |
| com.esotericsoftware | kryo-skuggad | 4.0.2 |
| com.esotericsoftware | Minlog | 1.3.0 |
| com.fasterxml | Klasskamrat | 1.0.0 |
| com.fasterxml.jackson.core | jackson-anteckningar | 2.6.7 |
| com.fasterxml.jackson.core | jackson-core | 2.6.7 |
| com.fasterxml.jackson.core | jackson-databind | 2.6.7.1 |
| com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.6.7 |
| com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-scala_2.11 | 2.6.7.1 |
| com.github.fommil | jniloader | 1,1 |
| com.github.fommil.netlib | kärna | 1.1.2 |
| com.github.fommil.netlib | native_ref-java | 1,1 |
| com.github.fommil.netlib | native_ref-java-natives | 1,1 |
| com.github.fommil.netlib | native_system-java | 1,1 |
| com.github.fommil.netlib | native_system-java-natives | 1,1 |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1,1 |
| com.github.fommil.netlib | netlib-native_system-linux-x86_64-natives | 1,1 |
| com.github.luben | zstd-jni | 1.3.2-2 |
| com.github.rwl | jtransforms | 2.4.0 |
| com.google.code.findbugs | jsr305 | 2.0.1 |
| com.google.code.gson | gson | 2.2.4 |
| com.google.guava | Guava | 15.0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.googlecode.javaewah | JavaEWAH | 0.3.2 |
| com.h2database | h2 | 1.3.174 |
| com.jcraft | Jsch | 0.1.50 |
| com.jolbox | bonecp | 0.8.0.RELEASE |
| com.microsoft.azure | azure-data-lake-store-sdk | 2.2.8 |
| com.microsoft.azure | azure-lagring | 5.2.0 |
| com.microsoft.sqlserver | mssql-jdbc | 6.2.2.jre8 |
| com.ning | compress-lzf | 1.0.3 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.thoughtworks.paranamer | paranamer | 2.8 |
| com.trueaccord.lenses | lenses_2.11 | 0,3 |
| com.twitter | chill-java | 0.9.3 |
| com.twitter | chill_2.11 | 0.9.3 |
| com.twitter | parquet-hadoop-bundle | 1.6.0 |
| com.twitter | util-app_2.11 | 6.23.0 |
| com.twitter | util-core_2.11 | 6.23.0 |
| com.twitter | util-jvm_2.11 | 6.23.0 |
| com.typesafe | config | 1.2.1 |
| com.typesafe.scala-logging | scala-logging-api_2.11 | 2.1.2 |
| com.typesafe.scala-logging | scala-logging-slf4j_2.11 | 2.1.2 |
| com.univocity | univocity-parsers | 2.7.3 |
| com.vlkan | flatbuffers | 1.2.0-3f79e055 |
| com.zaxxer | HikariCP | 3.1.0 |
| commons-beanutils | commons-beanutils | 1.7.0 |
| commons-beanutils | commons-beanutils-core | 1.8.0 |
| commons-cli | commons-cli | 1.2 |
| commons-codec | commons-codec | 1.10 |
| commons-collections | commons-collections | 3.2.2 |
| commons-configuration | commons-configuration | 1.6 |
| commons-dbcp | commons-dbcp | 1.4 |
| commons-digester | commons-digester | 1.8 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2.4 |
| commons-lang | commons-lang | 2,6 |
| commons-logging | commons-logging | 1.1.3 |
| commons-net | commons-net | 3.1 |
| commons-pool | commons-pool | 1.5.4 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.7 |
| io.airlift | aircompressor | 0.10 |
| io.dropwizard.metrics | metrics-core | 3.1.5 |
| io.dropwizard.metrics | metrics-ganglia | 3.1.5 |
| io.dropwizard.metrics | metrics-graphite | 3.1.5 |
| io.dropwizard.metrics | metrics-healthchecks | 3.1.5 |
| io.dropwizard.metrics | metrics-jetty9 | 3.1.5 |
| io.dropwizard.metrics | metrics-json | 3.1.5 |
| io.dropwizard.metrics | metrics-jvm | 3.1.5 |
| io.dropwizard.metrics | metrics-log4j | 3.1.5 |
| io.dropwizard.metrics | metrics-servlets | 3.1.5 |
| io.netty | Netty | 3.9.9.Final |
| io.netty | netty-all | 4.1.17.Final |
| io.prometheus | simpleclient | 0.0.16 |
| io.prometheus | simpleclient_common | 0.0.16 |
| io.prometheus | simpleclient_dropwizard | 0.0.16 |
| io.prometheus | simpleclient_servlet | 0.0.16 |
| io.prometheus.jmx | Samlare | 0,7 |
| javax.activation | aktivering | 1.1.1 |
| javax.annotation | javax.annotation-api | 1.2 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.servlet | javax.servlet-api | 3.1.0 |
| javax.servlet.jsp | jsp-api | 2.1 |
| javax.transaction | Jta | 1,1 |
| javax.validation | validation-api | 1.1.0.Final |
| javax.ws.rs | javax.ws.rs-api | 2.0.1 |
| javax.xml.bind | jaxb-api | 2.2.2 |
| javax.xml.stream | stax-api | 1.0-2 |
| javolution | javolution | 5.5.1 |
| Jline | Jline | 2.14.6 |
| joda-time | joda-time | 2.9.3 |
| log4j | apache-log4j-extras | 1.2.17 |
| log4j | log4j | 1.2.17 |
| net.hydromatic | eigenbase-properties | 1.1.5 |
| net.razorvine | pyrolit | 4.13 |
| net.sf.jpam | jpam | 1,1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | super-csv | 2.2.0 |
| net.snowflake | snowflake-ingest-sdk | 0.9.5 |
| net.snowflake | snowflake-jdbc | 3.6.15 |
| net.snowflake | spark-snowflake_2.11 | 2.4.10-spark_2.4 |
| net.sourceforge.f2j | arpack_combined_all | 0,1 |
| org.acplt | oncrpc | 1.0.7 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | antlr-runtime | 3.4 |
| org.antlr | antlr4-runtime | 4.7 |
| org.antlr | stringtemplate | 3.2.1 |
| org.apache.ant | Ant | 1.9.2 |
| org.apache.ant | ant-jsch | 1.9.2 |
| org.apache.ant | ant-launcher | 1.9.2 |
| org.apache.arrow | pilformat | 0.10.0 |
| org.apache.arrow | pilminne | 0.10.0 |
| org.apache.arrow | pilvektor | 0.10.0 |
| org.apache.avro | Avro | 1.8.2 |
| org.apache.avro | avro-ipc | 1.8.2 |
| org.apache.avro | avro-mapred-hadoop2 | 1.8.2 |
| org.apache.calcite | calcite-avatica | 1.2.0-inkubering |
| org.apache.calcite | calcite-core | 1.2.0-inkubering |
| org.apache.calcite | calcite-linq4j | 1.2.0-inkubering |
| org.apache.commons | commons-compress | 1.8.1 |
| org.apache.commons | commons-crypto | 1.0.0 |
| org.apache.commons | commons-lang3 | 3.5 |
| org.apache.commons | commons-math3 | 3.4.1 |
| org.apache.curator | curator-client | 2.7.1 |
| org.apache.curator | curator-framework | 2.7.1 |
| org.apache.curator | curator-recept | 2.7.1 |
| org.apache.derby | Derby | 10.12.1.1 |
| org.apache.directory.api | api-asn1-api | 1.0.0-M20 |
| org.apache.directory.api | api-util | 1.0.0-M20 |
| org.apache.directory.server | apacheds-i18n | 2.0.0-M15 |
| org.apache.directory.server | apacheds-kerberos-codec | 2.0.0-M15 |
| org.apache.hadoop | hadoop-anteckningar | 2.7.3 |
| org.apache.hadoop | hadoop-auth | 2.7.3 |
| org.apache.hadoop | hadoop-client | 2.7.3 |
| org.apache.hadoop | hadoop-common | 2.7.3 |
| org.apache.hadoop | hadoop-hdfs | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-app | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-common | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-core | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-jobclient | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-shuffle | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-api | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-client | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-common | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-server-common | 2.7.3 |
| org.apache.htrace | htrace-core | 3.1.0-inkubering |
| org.apache.httpcomponents | httpclient | 4.5.4 |
| org.apache.httpcomponents | httpcore | 4.4.8 |
| org.apache.ivy | Ivy | 2.4.0 |
| org.apache.orc | orc-core-nohive | 1.5.2 |
| org.apache.orc | orc-mapreduce-nohive | 1.5.2 |
| org.apache.orc | orc-shims | 1.5.2 |
| org.apache.parquet | parquet-column | 1.10.1.1-databricks3 |
| org.apache.parquet | parquet-common | 1.10.1.1-databricks3 |
| org.apache.parquet | parquet-kodning | 1.10.1.1-databricks3 |
| org.apache.parquet | parquet-format | 2.4.0 |
| org.apache.parquet | parquet-hadoop | 1.10.1.1-databricks3 |
| org.apache.parquet | parquet-jackson | 1.10.1.1-databricks3 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.9.3 |
| org.apache.xbean | xbean-asm6-shaded | 4.8 |
| org.apache.zookeeper | zookeeper | 3.4.6 |
| org.codehaus.jackson | jackson-core-asl | 1.9.13 |
| org.codehaus.jackson | jackson-jaxrs | 1.9.13 |
| org.codehaus.jackson | jackson-mapper-asl | 1.9.13 |
| org.codehaus.jackson | jackson-xc | 1.9.13 |
| org.codehaus.janino | commons-compiler | 3.0.10 |
| org.codehaus.janino | Janino | 3.0.10 |
| org.datanucleus | datanucleus-api-jdo | 3.2.6 |
| org.datanucleus | datanucleus-core | 3.2.10 |
| org.datanucleus | datanucleus-rdbms | 3.2.9 |
| org.eclipse.jetty | jetty-client | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-fortsättning | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-http | 9.3.20.v20170531 |
| org.eclipse.jetty | brygga-io | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-jndi | 9.3.20.v20170531 |
| org.eclipse.jetty | brygga plus | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-proxy | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-security | 9.3.20.v20170531 |
| org.eclipse.jetty | brygga-server | 9.3.20.v20170531 |
| org.eclipse.jetty | brygga-servlet | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-servlets | 9.3.20.v20170531 |
| org.eclipse.jetty | brygga-util | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-webapp | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-xml | 9.3.20.v20170531 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-locator | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-utils | 2.4.0-b34 |
| org.glassfish.hk2 | osgi-resource-locator | 1.0.1 |
| org.glassfish.hk2.external | aopalliance-repackaged | 2.4.0-b34 |
| org.glassfish.hk2.external | javax.inject | 2.4.0-b34 |
| org.glassfish.jersey.bundles.repackaged | jersey-guava | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet-core | 2.22.2 |
| org.glassfish.jersey.core | jersey-client | 2.22.2 |
| org.glassfish.jersey.core | jersey-common | 2.22.2 |
| org.glassfish.jersey.core | jersey-server | 2.22.2 |
| org.glassfish.jersey.media | jersey-media-jaxb | 2.22.2 |
| org.hibernate | vilolägesverifierare | 5.1.1.Final |
| org.iq80.snappy | Snappy | 0.2 |
| org.javassist | javassist | 3.18.1-GA |
| org.jboss.logging | jboss-logging | 3.1.3.GA |
| org.jdbi | jdbi | 2.63.1 |
| org.joda | joda-convert | 1,7 |
| org.jodd | jodd-core | 3.5.2 |
| org.json4s | json4s-ast_2.11 | 3.5.3 |
| org.json4s | json4s-core_2.11 | 3.5.3 |
| org.json4s | json4s-jackson_2.11 | 3.5.3 |
| org.json4s | json4s-scalap_2.11 | 3.5.3 |
| org.lz4 | lz4-java | 1.4.0 |
| org.mariadb.jdbc | mariadb-java-client | 2.1.2 |
| org.mockito | mockito-all | 1.9.5 |
| org.objenesis | objenesis | 2.5.1 |
| org.postgresql | postgresql | 42.1.4 |
| org.roaringbitmap | RoaringBitmap | 0.5.11 |
| org.rocksdb | rocksdbjni | 5.2.1 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | scala-compiler_2.11 | 2.11.12 |
| org.scala-lang | scala-library_2.11 | 2.11.12 |
| org.scala-lang | scala-reflect_2.11 | 2.11.12 |
| org.scala-lang.modules | scala-parser-combinators_2.11 | 1.1.0 |
| org.scala-lang.modules | scala-xml_2.11 | 1.0.5 |
| org.scala-sbt | test-interface | 1.0 |
| org.scalacheck | scalacheck_2.11 | 1.12.5 |
| org.scalactic | scalactic_2.11 | 3.0.3 |
| org.scalanlp | breeze-macros_2.11 | 0.13.2 |
| org.scalanlp | breeze_2.11 | 0.13.2 |
| org.scalatest | scalatest_2.11 | 3.0.3 |
| org.slf4j | jcl-over-slf4j | 1.7.16 |
| org.slf4j | jul-to-slf4j | 1.7.16 |
| org.slf4j | slf4j-api | 1.7.16 |
| org.slf4j | slf4j-log4j12 | 1.7.16 |
| org.spark-project.hive | hive-beeline | 1.2.1.spark2 |
| org.spark-project.hive | hive-cli | 1.2.1.spark2 |
| org.spark-project.hive | hive-exec | 1.2.1.spark2 |
| org.spark-project.hive | hive-jdbc | 1.2.1.spark2 |
| org.spark-project.hive | hive-metaarkiv | 1.2.1.spark2 |
| org.spark-project.spark | Oanvända | 1.0.0 |
| org.spire-math | spire-macros_2.11 | 0.13.0 |
| org.spire-math | spire_2.11 | 0.13.0 |
| org.springframework | spring-core | 4.1.4.RELEASE |
| org.springframework | spring-test | 4.1.4.RELEASE |
| org.tukaani | Xz | 1.5 |
| org.typelevel | machinist_2.11 | 0.6.1 |
| org.typelevel | macro-compat_2.11 | 1.1.1 |
| org.xerial | sqlite-jdbc | 3.8.11.2 |
| org.xerial.snappy | snappy-java | 1.1.7.1 |
| org.yaml | snakeyaml | 1.16 |
| oro | oro | 2.0.8 |
| software.amazon.ion | ion-java | 1.0.2 |
| Stax | stax-api | 1.0.1 |
| xmlenc | xmlenc | 0,52 |