Databricks Runtime 13.0 (nicht unterstützt)

Die folgenden Versionshinweise enthalten Informationen zu Databricks Runtime 13.0, unterstützt von Apache Spark 3.4.0.

Databricks hat diese Images im April 2023 veröffentlicht.

Neue Features und Verbesserungen

H3-Ausdrücke unterstützen jetzt lineare geografische Regionen

Die Funktionen h3_coverash3 und h3_coverash3string unterstützen jetzt lineare (linestring und multilinestring) geografische Regionen. Die Funktionen erzeugen eine minimale Abdeckung von H3-Zellen bei der angegebenen Auflösung. Siehe h3_coverash3 und h3_coverash3string.

Ganglia durch Clustermetriken ersetzt

Für Databricks Runtime-Versionen 13 und höher werden Ganglia-Metriken durch Azure Databricks-Clustermetriken ersetzt. Für Databricks Runtime-Versionen 12 und niedriger können Sie weiterhin Ganglia-Metriken verwenden. Wenn Sie über einen Workflow verfügen, der von Ganglia-Metriken abhängt, die nicht mit Clustermetriken erfüllt werden können, kontaktieren Sie Ihr Azure Databricks-Kontoteam. Siehe Anzeigen von Compute-Metriken.

Spark 3.4.0 veröffentlicht

Apache Spark 3.4.0 ist jetzt allgemein verfügbar. Weitere Informationen finden Sie unterSpark Release 3.4.0.

Photon gibt einen Fehler zurück, wenn eine Datei zwischen Abfrageplanung und -ausführung geändert wird

Databricks Runtime-Abfragen geben jetzt einen Fehler zurück, wenn eine Datei zwischen Abfrageplanung und Aufruf aktualisiert wird. Vor dieser Änderung hat Photon eine Datei gelesen, auch wenn sich die Änderungszeit zwischen Abfrageplanung und -ausführung ändert, was zu unvorhersehbaren Ergebnissen führen kann.

Neue Features für Predictive I/O

Photon unterstützt jetzt gleitende Frames sowohl für den ZEILEN- als auch für den BEREICHS-Modus, wobei {ROWS | RANGE} BETWEEN offset_start { PRECEDING | FOLLOWING } AND offset_stop { PRECEDING | FOLLOWING } verwendet wird.

Erweiterte Unterstützung für Vorhersage-E/A-Features

Photon erweiterte die Unterstützung für CSV-, AVRO- und DataFrame-Zwischenspeicherungsdatenquellen, wenn Ihr Schema ausschließlich Skalarspalten enthält. Die Unterstützung wird auch für geschachtelte Typen wie Zuordnungen, Strukturen und Arrays erweitert.

Verwenden des Databricks-Connectors zum Herstellen einer Verbindung mit einem anderen Databricks-Arbeitsbereich

Mit dem Azure Databricks-Connector können Sie eine Verbindung mit Computeressourcen herstellen, die in einem anderen Arbeitsbereich konfiguriert sind, und Ergebnisse an Ihren aktuellen Azure Databricks-Arbeitsbereich zurückgeben. Der Azure Databricks JDBC-Treiber ist jetzt in Databricks Runtime enthalten. Weitere Informationen finden Sie unter Verwenden des Databricks-Connectors zum Herstellen einer Verbindung mit einem anderen Databricks-Arbeitsbereich.

Zusätzliche Kafka-Optionen für strukturiertes Streaming mit freigegebenem Cluster in Unity Catalog

Sie können jetzt die Einstellungen kakfa.ssl.truststore.location und kafak.ssl.keystore.location zum Speichern von Kafka-Zertifikaten an externen Speicherorten verwenden, die von Unity Catalog verwaltet werden, wenn Sie strukturiertes Streaming in Shared Access-Clustern verwenden. Sie können keine Speicherorte im DBFS-Stamm verwenden.

Überspringen von Delta-Tabellenänderungen mit strukturiertem Streaming

Sie können jetzt skipChangeCommits verwenden, um Datenänderungscommits in der Delta-Tabelle für die Vorgänge UPDATE, MERGE und DELETE zu ignorieren. Dadurch wird ignoreChanges ersetzt, was jetzt veraltet ist. Weitere Informationen finden Sie unter Ignorieren von Updates und Löschungen.

CREATE TABLE LIKE-Feature für Delta-Tabellen

CREATE TABLE LIKE wird jetzt unterstützt, wenn Delta-Tabellen verwendet werden.

Neue Spaltenfelder mit Metadaten über Dateiblockstart und -länge

Sie können nun die folgenden Metadateninformationen für Eingabedateien mit der _metadata Spalte abrufen: file_block_start und file_block_length. Weitere Informationen finden Sie unter Dateimetadatenspalte.

Neue H3-Geodatenfunktionen

Die neuen h3_coverash3- und h3_coverash3string-Ausdrücke stehen für die Geodatenverarbeitung zur Verfügung, wenn Photon aktiviert ist. Weitere Informationen finden Sie unter H3-Geodatenfunktionen.

Neue integrierte SQL-Funktionen

Die folgenden analytischen Funktionen wurden hinzugefügt:

%sql in Python-Notebooks

Auf alle nicht leeren %sql Ergebnisse in Python-Notebooks kann jetzt über _sqldf oder das Ausgabezwischenspeicherungssystem von IPython zugegriffen werden. Dies vereinfacht die Verwendung des DataFrame-Ergebnisses in Python. Dies ist ein Behavior Change gegenüber früheren DBR-Versionen, wobei _sqldf nicht immer neu zugewiesen wurde.

_sqldf wird für ein %sql Zellergebnis nicht neu zugewiesen, wenn die Zelle mit paralleler SQL-Zellenausführung ausgeführt wurde.

%pip startet Python nicht automatisch neu

Nach dem Ausführen von %pip-Befehlen in Python-Notebooks, die virtualEnv ändern, startet Databricks den Python-Prozess nicht mehr automatisch neu. Um den Python-Prozess neu zu starten, rufen Sie dbutils.library.restartPython() auf. Mit dieser Änderung verhalten sich %pip-Befehle auf Databricks ähnlich wie Jupyter Notebooks und sind mit den Befehlen !pip und %sh pipkonsistent. Databricks empfiehlt %pip anstelle von !pip oder %sh pip.

Python-Bibliotheken im Clusterbereich werden mithilfe eines Nicht-Stammbenutzers installiert

Bibliotheken werden jetzt mithilfe eines Nicht-Stammbenutzers installiert, der für Die Installation von Bibliotheken verantwortlich ist. Wenn Sie das Pip-Installationsverhalten in Initialisierungsskripts konfigurieren möchten, verwenden Sie die [Datei https://pip.pypa.io/en/stable/topics/configuration/#configuration-files auf globaler Ebene].

Fehlerkorrekturen

  • In den %sh-Befehlen wurden die folgenden Korrekturen vorgenommen:
    • Die Ausgabe, die keine UTF-8-Zeichen enthält, wird jetzt unterstützt.
    • Teilprozesse werden jetzt unterbrochen, wenn der Befehl abgebrochen wird.

Bibliotheksupgrades

  • Aktualisierte Python-Bibliotheken:
    • asttokens von 2.0.5 auf 2.2.1
    • black von 22.3.0 auf 22.6.0
    • boto3 von 1.21.32 auf 1.24.28
    • botocore von 1.24.32 auf 1.27.28
    • certifi von 2021.10.8 auf 2022.9.14
    • cffi von 1.15.0 auf 1.15.1
    • cryptography von 3.4.8 auf 37.0.1
    • Cython von 0.29.28 auf 0.29.32
    • dbus-python von 1.2.16 auf 1.2.18
    • docstring-to-markdown von 0.11 auf 0.12
    • executing von 0.8.3 auf 1.2.0
    • facets-overview von 1.0.0 auf 1.0.2
    • fastjsonschema von 2.16.2 auf 2.16.3
    • filelock von 3.9.0 auf 3.10.7
    • ipykernel von 6.15.3 auf 6.17.1
    • ipython von 8.5.0 auf 8.10.0
    • joblib von 1.1.1 auf 1.2.0
    • jsonschema von 4.4.0 auf 4.16.0
    • jupyter-client von 6.1.12 auf 7.3.4
    • kiwisolver von 1.3.2 auf 1.4.2
    • matplotlib von 3.5.1 auf 3.5.2
    • matplotlib-inline von 0.1.2 auf 0.1.6
    • nbformat von 5.3.0 auf 5.5.0
    • notebook von 6.4.8 auf 6.4.12
    • pandas von 1.4.2 auf 1.4.4
    • Pillow von 9.0.1 auf 9.2.0
    • pip von 21.2.4 auf 22.2.2
    • platformdirs von 2.6.2 auf 2.5.2
    • plotly von 5.6.0 auf 5.9.0
    • prometheus-client von 0.13.1 auf 0.14.1
    • prompt-toolkit von 3.0.20 auf 3.0.36
    • psutil von 5.8.0 auf 5.9.0
    • pyflakes von 2.5.0 auf 3.0.1
    • PyGObject von 3.36.0 auf 3.42.1
    • pyparsing von 3.0.4 auf 3.0.9
    • pyright von 1.1.283 auf 1.1.294
    • python-lsp-server von 1.6.0 auf 1.7.1
    • pytz von 2021.3 auf 2022.1
    • pyzmq von 22.3.0 auf 23.2.0
    • requests von 2.27.1 auf 2.28.1
    • rope von 0.22.0 auf 1.7.0
    • s3transfer von 0.5.0 auf 0.6.0
    • scikit-learn von 1.0.2 auf 1.1.1
    • scipy von 1.7.3 auf 1.9.1
    • setuptools: von 61.2.0 auf 63.4.1
    • ssh-import-id von 5.10 auf 5.11
    • stack-data von 0.2.0 auf 0.6.2
    • testpath von 0.5.0 auf 0.6.0
    • tomli von 1.2.2 auf 2.0.1
    • ujson von 5.1.0 auf 5.4.0
    • urllib3 von 1.26.9 auf 1.26.11
    • virtualenv von 20.8.0 auf 20.16.3
    • whatthepatch von 1.0.4 auf 1.0.2
    • wheel von 0.37.0 auf 0.37.1
  • Aktualisierte R-Bibliotheken:
    • arrow von 10.0.0 auf 10.0.1
    • bit von 4.0.4 auf 4.0.5
    • broom von 1.0.1 auf 1.0.3
    • bslib von 0.4.1 auf 0.4.2
    • chron von 2.3-58 auf 2.3-59
    • cli von 3.4.1 auf 3.6.0
    • colorspace von 2.0-3 auf 2.1-0
    • curl von 4.3.3 auf 5.0.0
    • data.table von 1.14.4 auf 1.14.6
    • dbplyr von 2.2.1 auf 2.3.0
    • digest von 0.6.30 auf 0.6.31
    • dplyr von 1.0.10 auf 1.1.0
    • e1071 von 1.7-12 auf 1.7-13
    • evaluate von 0.18 auf 0.20
    • fansi von 1.0.3 auf 1.0.4
    • fontawesome von 0.4.0 auf 0.5.0
    • forcats von 0.5.2 auf 1.0.0
    • fs von 1.5.2 auf 1.6.1
    • future von 1.29.0 auf 1.31.0
    • gargle von 1.2.1 auf 1.3.0
    • gert von 1.9.1 auf 1.9.2
    • glmnet von 4.1-4 auf 4.1-6
    • globals von 0.16.1 auf 0.16.2
    • gower von 1.0.0 auf 1.0.1
    • highr von 0.9 auf 0.10
    • htmltools von 0.5.3 auf 0.5.4
    • htmlwidgets von 1.5.4 auf 1.6.1
    • httpuv von 1.6.6 auf 1.6.8
    • isoband von 0.2.6 auf 0.2.7
    • jsonlite von 1.8.3 auf 1.8.4
    • knitr von 1.40 auf 1.42
    • lava von 1.7.0 auf 1.7.1
    • listenv von 0.8.0 auf 0.9.0
    • lubridate von 1.9.0 auf 1.9.1
    • markdown von 1.3 auf 1.5
    • modelr von 0.1.9 auf 0.1.10
    • openssl von 2.0.4 auf 2.0.5
    • parallelly von 1.32.1 auf 1.34.0
    • pkgbuild von 1.3.1 auf 1.4.0
    • pkgdown von 2.0.6 auf 2.0.7
    • pkgload von 1.3.1 auf 1.3.2
    • plyr von 1.8.7 auf 1.8.8
    • progressr von 0.11.0 auf 0.13.0
    • purrr von 0.3.5 auf 1.0.1
    • ragg von 1.2.4 auf 1.2.5
    • Rcpp von 1.0.9 auf 1.0.10
    • readxl von 1.4.1 auf 1.4.2
    • recipes von 1.0.3 auf 1.0.4
    • rmarkdown von 2.18 auf 2.20
    • RODBC von 1.3-19 auf 1.3-20
    • roxygen2 von 7.2.1 auf 7.2.3
    • RSQLite von 2.2.18 auf 2.2.20
    • sass von 0.4.2 auf 0.4.5
    • shiny von 1.7.3 auf 1.7.4
    • sourcetools von 0.1.7 auf 0.1.7-1
    • sparklyr von 1.7.8 auf 1.7.9
    • SparkR von 3.3.2 auf 3.4.0
    • spatial von 7.3-11 auf 7.3-15
    • stringi von 1.7.8 auf 1.7.12
    • stringr von 1.4.1 auf 1.5.0
    • survival von 3.4-0 auf 3.5-3
    • testthat von 3.1.5 auf 3.1.6
    • tidyr von 1.2.1 auf 1.3.0
    • timechange von 0.1.1 auf 0.2.0
    • timeDate von 4021.106 auf 4022.108
    • tinytex von 0.42 auf 0.44
    • utf8 von 1.2.2 auf 1.2.3
    • vctrs von 0.5.0 auf 0.5.2
    • vroom von 1.6.0 auf 1.6.1
    • whisker von 0.4 auf 0.4.1
    • xfun von 0.34 auf 0.37
    • yaml von 2.3.6 auf 2.3.7
  • Aktualisierte Java-Bibliotheken:
    • com.amazonaws.aws-java-sdk-autoscaling von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-cloudformation von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-cloudfront von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-cloudhsm von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-cloudsearch von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-cloudtrail von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-cloudwatch von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-cloudwatchmetrics von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-codedeploy von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-cognitoidentity von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-cognitosync von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-config von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-core von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-datapipeline von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-directconnect von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-directory von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-dynamodb von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-ec2 von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-ecs von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-efs von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-elasticache von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-elasticbeanstalk von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-elasticloadbalancing von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-elastictranscoder von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-emr von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-glacier von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-glue von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-iam von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-importexport von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-kinesis von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-kms von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-lambda von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-logs von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-machinelearning von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-opsworks von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-rds von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-redshift von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-route53 von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-s3 von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-ses von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-simpledb von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-simpleworkflow von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-sns von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-sqs von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-ssm von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-storagegateway von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-sts von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-Unterstützung von 1.12.189 auf 1.12.390
    • com.amazonaws.aws-java-sdk-workspaces von 1.12.189 auf 1.12.390
    • com.amazonaws.jmespath-java von 1.12.189 auf 1.12.390
    • com.fasterxml.jackson.core.jackson-annotations von 2.13.4 auf 2.14.2
    • com.fasterxml.jackson.core.jackson-core von 2.13.4 auf 2.14.2
    • com.fasterxml.jackson.core.jackson-databind von 2.13.4.2 auf 2.14.2
    • com.fasterxml.jackson.dataformat.jackson-dataformat-cbor von 2.13.4 auf 2.14.2
    • com.fasterxml.jackson.datatype.jackson-datatype-joda von 2.13.4 auf 2.14.2
    • com.fasterxml.jackson.module.jackson-module-paranamer von 2.13.4 auf 2.14.2
    • com.fasterxml.jackson.module.jackson-module-scala_2.12 von 2.13.4 auf 2.14.2
    • com.github.luben.zstd-jni von 1.5.2-1 auf 1.5.2-5
    • com.google.code.gson.gson von 2.8.6 auf 2.8.9
    • com.google.crypauf.tink.tink von 1.6.1 auf 1.7.0
    • com.h2database.h2 von 2.0.204 auf 2.1.214
    • com.jcraft.jsch von 0.1.50 auf 0.1.55
    • com.ning.compress-lzf von 1.1 auf 1.1.2
    • commons-fileupload.commons-fileupload von 1.3.3 auf 1.5
    • dev.ludovic.netlib.arpack von 2.2.1 auf 3.0.3
    • dev.ludovic.netlib.blas von 2.2.1 auf 3.0.3
    • dev.paket.netlib.lapack von 2.2.1 auf 3.0.3
    • io.dropwizard.metrics.metrics-core von 4.1.1 auf 4.2.10
    • io.dropwizard.metrics.metrics-graphite von 4.1.1 auf 4.2.10
    • io.dropwizard.metrics.metrics-healthchecks von 4.1.1 auf 4.2.10
    • io.dropwizard.metrics.metrics-jetty9 von 4.1.1 auf 4.2.10
    • io.dropwizard.metrics.metrics-jmx von 4.1.1 auf 4.2.10
    • io.dropwizard.metrics.metrics-json von 4.1.1 auf 4.2.10
    • io.dropwizard.metrics.metrics-jvm von 4.1.1 auf 4.2.10
    • io.dropwizard.metrics.metrics-servlets von 4.1.1 auf 4.2.10
    • io.netty.netty-all von 4.1.74.Final auf 4.1.87.Final
    • io.netty.netty-buffer von 4.1.74.Final auf 4.1.87.Final
    • io.netty.netty-codec von 4.1.74.Final auf 4.1.87.Final
    • io.netty.netty-common von 4.1.74.Final auf 4.1.87.Final
    • io.netty.netty-handler von 4.1.74.Final auf 4.1.87.Final
    • io.netty.netty-resolver von 4.1.74.Final auf 4.1.87.Final
    • io.netty.netty-transport von 4.1.74.Final auf 4.1.87.Final
    • io.netty.netty-transport-classes-epoll von 4.1.74.Final auf 4.1.87.Final
    • io.netty.netty-transport-classes-kqueue von 4.1.74.Final auf 4.1.87.Final
    • io.netty.netty-transport-native-unix-common von 4.1.74.Final auf 4.1.87.Final
    • joda-time.joda-time von 2.10.13 auf 2.12.1
    • net.razorvine.pickle von 1.2 auf 1.3
    • org.antlr.antlr4-runtime von 4.8 auf 4.9.3
    • org.apache.ant.ant von 1.9.2 auf 1.9.16
    • org.apache.ant.ant-jsch von 1.9.2 auf 1.9.16
    • org.apache.ant.ant-launcher von 1.9.2 auf 1.9.16
    • org.apache.arrow.arrow-format von 7.0.0 auf 11.0.0
    • org.apache.arrow.arrow-memory-core von 7.0.0 auf 11.0.0
    • org.apache.arrow.arrow-memory-netty von 7.0.0 auf 11.0.0
    • org.apache.arrow.arrow-vector von 7.0.0 auf 11.0.0
    • org.apache.avro.avro von 1.11.0 auf 1.11.1
    • org.apache.avro.avro-ipc von 1.11.0 auf 1.11.1
    • org.apache.avro.avro-mapred von 1.11.0 auf 1.11.1
    • org.apache.httpcomponents.httpcore von 4.5.13 auf 4.5.14
    • org.apache.httpcomponents.httpcore von 4.4.14 auf 4.4.16
    • org.apache.ivy.ivy von 2.5.0 auf 2.5.1
    • org.apache.logging.log4j.log4j-1.2-api von 2.18.0 auf 2.19.0
    • org.apache.logging.log4j.log4j-api von 2.18.0 auf 2.19.0
    • org.apache.logging.log4j.log4j-core von 2.18.0 auf 2.19.0
    • org.apache.orc.orc-core von 1.7.6-shaded-protobuf auf 1.8.2-shaded-protobuf
    • org.apache.orc.orc-mapreduce von 1.7.6-shaded-protobuf auf 1.8.2-shaded-protobuf
    • org.apache.orc.orc-shims von 1.7.6 auf 1.8.2
    • org.apache.xbean.xbean-asm9-shaded von 4.20 auf 4.22
    • org.apache.zookeeper.zookeeper von 3.6.2 auf 3.6.3
    • org.apache.zookeeper.zookeeper-jute von 3.6.2 auf 3.6.3
    • org.eclipse.jetty.jetty-client von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.eclipse.jetty.jetty-continuation von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.eclipse.jetty.jetty-http von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.eclipse.jetty.jetty-io von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.eclipse.jetty.jetty-jndi von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.eclipse.jetty.jetty-plus von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.eclipse.jetty.jetty-proxy von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.eclipse.jetty.jetty-security von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.eclipse.jetty.jetty-server von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.eclipse.jetty.jetty-servlet von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.eclipse.jetty.jetty-servlets von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.eclipse.jetty.jetty-util von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.eclipse.jetty.jetty-util-ajax von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.eclipse.jetty.jetty-webapp von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.eclipse.jetty.jetty-xml von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.eclipse.jetty.websocket.websocket-api von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.eclipse.jetty.websocket.websocket-client von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.eclipse.jetty.websocket.websocket-common von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.eclipse.jetty.websocket.websocket-server von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.eclipse.jetty.websocket.websocket-servlet von 9.4.46.v20220331 auf 9.4.50.v20221201
    • org.hibernate.validator.hibernate-validator von 6.1.0.Final auf 6.1.7.Final
    • org.mlflow.mlflow-spark von 2.1.1 auf 2.2.0
    • org.postgresql.postgresql von 42.3.3 auf 42.3.8
    • org.roaringbitmap.RoaringBitmap von 0.9.25 auf 0.9.39
    • org.roaringbitmap.shims von 0.9.25 auf 0.9.39
    • org.rocksdb.rocksdbjni von 6.28.2 auf 7.8.3
    • org.scala-lang.scala-compiler_2.12 von 2.12.14 auf 2.12.15
    • org.scala-lang.scala-library_2.12 von 2.12.14 auf 2.12.15
    • org.scala-lang.scala-reflect_2.12 von 2.12.14 auf 2.12.15
    • org.scalanlp.breeze-macros_2.12 von 1.2 auf 2.1.0
    • org.scalanlp.breeze_2.12 von 1.2 auf 2.1.0
    • org.slf4j.jcl-over-slf4j von 1.7.36 auf 2.0.6
    • org.slf4j.jul-to-slf4j von 1.7.36 auf 2.0.6
    • org.slf4j.slf4j-api von 1.7.36 auf 2.0.6
    • org.threeten.threeten-extra von 1.5.0 auf 1.7.1
    • org.wildfly.openssl.wildfly-openssl von 1.0.7.Final auf 1.1.3.Final
    • org.yaml.snakeyaml von 1.24 auf 1.33

Apache Spark

Databricks Runtime 13.0 enthält Apache Spark 3.4.0.

Spark SQL

Funktionen

  • Unterstützung für DEFAULT-Werte für Spalten in Tabellen implementieren (SPARK-38334)
  • Hinzufügen von Dataset.as(StructType) (SPARK-39625)
  • Unterstützung von parametrisierter SQL (SPARK-41271, SPARK-42702)
  • Hinzufügen von Entpivot/Melt (SPARK-38864, SPARK-39876)
  • Unterstützung von „Lateral Column Alias References“ (SPARK-27561)
  • Unterstützung der Ergebnis-Offset-Klausel (SPARK-28330, SPARK-39159)
  • Unterstützung von Zeitstempel ohne Zeitzonendatentyp (SPARK-35662)
  • Unterstützung von skalare Unterabfragen in der Zeitreise (SPARK-39306)
  • Kompatibilität der Katalog-API mit dem 3-Layer-Namespace (SPARK-39235)
  • Unterstützung von timestamp in Sekunden für TimeTravel mit Dataframe-Optionen (SPARK-39633)
  • Hinzufügen von SparkSession.config(Map) (SPARK-40163)
  • Ändern der Standarddatenbank für den Sitzungskatalogs wird unterstützt (SPARK-35242)
  • Protobuf-Unterstützung für Spark – from_protobuf AND to_protobuf (SPARK-40654)
  • Hinzufügen der WHEN NOT MATCHED BY SOURCE-Klausel zu MERGE INTO (SPARK-40921)
  • Aufheben der Einschränkung für die Reihenfolge für CREATE TABLE-Spaltenoptionen (SPARK-40944)
  • SQL-Äquivalent für Befehl zum Überschreiben des Dataframe (SPARK-40956)
  • Unterstützung von Generieren ohne erforderliche Ausgabe von untergeordneten Elementen zum Hosten äußerer Verweise (SPARK-41441)
  • ORDER BY ALL (SPARK-41637)
  • GROUP BY ALL (SPARK-41635)
  • Hinzufügen von flatMapSortedGroups und cogroupSorted (SPARK-38591)
  • Unterstützung von Unterabfragen mit korrelierten Ungleichheitsprädikaten (SPARK-36114)
  • Unterstützung von Unterabfragen mit Korrelation über UNION/INTERSECT/EXCEPT (SPARK-36124)

ANSI-Compliance

  • ANSI-Modus: Immer NULL zurückgeben bei ungültigem Zugriff auf die Zuordnungsspalte (SPARK-40066)
  • Unterstützung doppelter Anführungszeichen (SPARK-40585)
  • ANSI SQL-Modus: Round/Bround sollte einen Fehler beim Integerüberlauf zurückgeben (SPARK-42045)
  • Unterstützung der Umwandlung von Integralen in ANSI-Intervalle (SPARK-40008)
  • Unterstützung der Umwandlung von Dezimalstellen in ANSI-Intervallen (SPARK-40014)
  • Rückgabe von weiter gefassten ANSI-Intervalltypen von Perzentilfunktionen (SPARK-40151)
  • Unterstützung der Umwandlung von ANSI-Intervallen in Dezimalstellen (SPARK-39470)
  • Unterstützung von Umwandlungsintervallen für Integrale im ANSI-Modus (SPARK-39451)
  • Härten der Verwendung von SQLSTATE für Fehlerklassen (SPARK-41994)

Funktionen

  • Unterstützung von Tabellenwertgeneratorfunktionen in der FROM-Klausel (SPARK-41594)
  • Unterstützung von ANSI-Aggregationsfunktion: REGR_SXY (SPARK-37681)
  • Unterstützung von ANSI-Aggregationsfunktion: REGR_R2 (SPARK-37641)
  • Unterstützung von ANSI-Aggregationsfunktion: REGR_SXX (SPARK-37672)
  • Unterstützung von ANSI-Aggregationsfunktion: REGR_SYY (SPARK-37702)
  • Unterstützung von ANSI-Aggregationsfunktion: REGR_SLOPE (SPARK-39230)
  • Unterstützung der ANSI-Aggregatfunktion: REGR_INTERCEPT (SPARK-37623)
  • Unterstützung der ANSI-Aggregationsfunktion PERCENTILE_CONT als Fensterfunktion (SPARK-38219)
  • Unterstützung von ANSI-Aggregationsfunktion: PERCENTILE_DISC (SPARK-37691)
  • Unterstützung der SPLIT_PART-Funktion (SPARK-38063)
  • Unterstützung der TRY_AVG-Funktion (SPARK-38589)
  • Unterstützung der TRY_TO_BINARY-Funktion (SPARK-38590)
  • Unterstützung der SQL-Funktionen TO_NUMBER und TRY_TO_NUMBER gemäß einer neuen Spezifikation (SPARK-38796)
  • Unterstützung der allgemeinen ANSI-Wertspezifikation und -funktion – USER (SPARK-39138)
  • Unterstützung von TO_CHAR- und TRY_TO_CHAR-Funktionen zum Formatieren von Dezimalwerten als Zeichenfolgen (SPARK-28516)
  • Unterstützung der ANY_VALUE Aggregatfunktion (SPARK-39213)
  • Unterstützung der EQUAL_NUL-Funktion (SPARK-39305)
  • Unterstützung der Aggregatfunktion MEDIAN (SPARK-39320)
  • Unterstützung der REGEXP_COUNT-Funktion (SPARK-39618)
  • Unterstützung der REGEXP_INSTR-Funktion (SPARK-39744)
  • Unterstützung der REGEXP_SUBSTR-Funktion (SPARK-39695)
  • Unterstützung der UNPIVOT-Funktion (SPARK-39876)
  • Unterstützung der TRY_TO_TIMESTAMP-Funktion (SPARK-39795)
  • Unterstützung von Codierung/Decodierung der URL als integrierte Funktion und Aufräumen URL-bezogener Funktionen (SPARK-39741)
  • Unterstützung der Aggregatfunktion MODE (SPARK-39808)
  • Unterstützung der GET-Funktion (SPARK-40109)
  • Hinzufügen von Funktionsaliasen: LEN, DATEPART, DATEADD, DATE_DIFF, CURDATE (SPARK-40352)
  • Verbessern der TO_BINARY-Funktion (SPARK-40112)
  • Unterstützung CURRENT_SCHEMA (SPARK-41323)
  • Unterstützung der integrierten Datenmaskierungsfunktion MASK (SPARK-40687)
  • Unterstützung für hohe Ordnungsfunktion: ARRAY_COMPACT (SPARK-41235)
  • Unterstützung der ARRAY_APPEND-Funktion (SPARK-41232)
  • Unterstützung der ARRAY_INSERT-Funktion (SPARK-41234)
  • Unterstützung der LUHN_CHECK-Funktion (SPARK-42191)
  • Hinzufügen von ARRAY_SORT(Spalte, Vergleich) (SPARK-39925)

Data Sources (Datenquellen)

  • Unterstützung von Spaltenstatistiken in DS v2 (SPARK-41378)
  • Storage Partitioned Join (SPJ) in DS v2 (SPARK-37375)
  • Vorgänge auf Zeilenebene in DS v2 (SPARK-35801)
  • Hinzufügen des SupportsReportOrdering-Mix in der Schnittstelle für DS v2 Scan (SPARK-38647)
  • Ableitung des DATE-Typs für die Inferenz des CSV-Schemas (SPARK-39469)
  • Unterstützung Treibermesswerte in der benutzerdefinierten Messwert-API von DS v2 (SPARK-39635)
  • Unterstützung der DS v2-Funktion beim Schreiben (SPARK-39607)
  • StringEndsWith/Contains-Unterstützung für Pushen in Parquet, damit wir den Wörterbuchfilter nutzen können (SPARK-39002)
  • Unterstützung von UDT im vektorisierten Spark Parquet-Reader (SPARK-39086)
  • Erweiterung der METADATA-Spalte zur Unterstützung von Zeilenindizes für Parquet-Dateien (SPARK-37980)
  • Unterstützung beim Lesen des Parquet-Typs FIXED_LEN_BYTE_ARRAY (SPARK-41096)
  • Optimierung der Reihenfolge der Filter-Prädikate (SPARK-40045)
  • Unterstützung von CTE- und temporären Tabellenabfragen mit MSSQL JDBC (SPARK-37259)
  • Unterstützung von ignoreCorruptFiles und ignoreMissingFiles in den Datenquellenoptionen (SPARK-38767)
  • Pull-Ausführung von v1 write to WriteFiles (SPARK-41407)
  • Hinzufügen eines schreibseitigen Zeichenabstandes zum Abdecken externer Datendateien (SPARK-40697)

Abfrageoptimierung

  • Nicht korrelierte skalare Unterabfragen zusammenführen (SPARK-34079)
  • Standardmäßige Aktivierung von Bloom-Filterjoins (SPARK-38841)
  • Entfernen von unnötigen Unterschieden im Aggregatausdruck durch distinctKeys (SPARK-38832)
  • Prädikat-Pushdowns und Spaltenbereinigung für deduplizierte CTEs unterstützen (SPARK-37670)
  • Entfernen des äußeren Joins, wenn Aggregatfunktionen auf gestreamter Seite doppelt unabhängig sind (SPARK-38886)
  • Entfernen der linken/rechten äußeren Verknüpfung, wenn nur die Spalten der linken/rechten Seite ausgewählt sind und die Verknüpfungsschlüssel auf der anderen Seite eindeutig sind (SPARK-39172)
  • Optimieren der globalen Sortierung in RepartitionByExpression (SPARK-39911)
  • Optimieren der TransposeWindow Regel (SPARK-38034)
  • Verbessern von EliminateSorts zur Unterstützung des Entfernens von Sortierungen über LocalLimit (SPARK-40050)
  • Pushen des lokalen Limits an beiden Seiten, wenn die Verknüpfungsbedingung leer ist (SPARK-40040)
  • Hinzufügen des PushProjectionThroughLimit für Optimierer (SPARK-40501)
  • Unterstützung von PIVOT/UNPIVOT mit untergeordneten JOIN-Elementen (SPARK-41195)
  • Unterstützung der Spaltenbeschneidung mit mehreren nicht deterministischen Filtern (SPARK-41017)
  • Verbessern der Ausgabepartitionierung und -reihenfolge mit AQE-Cache (SPARK-41048)
  • Verbessern der Multi-Like-Leistung durch Erstellen eines Prädikats für eine ausgeglichene Ausdrucksstruktur (SPARK-41167)
  • Sort entfernen, wenn es RepartitionByExpression untergeordnet ist (SPARK-36703)
  • Verwenden verfügbarer Spaltenstatistiken aus abgeschlossenen Abfragephasen (SPARK-39991)
  • Wiederverwenden von Ausdrücken in WindowSpecDefinition (SPARK-41805)
  • Verbessern von AliasAwareOutputPartitioning und AliasAwareQueryOutputOrdering, um alle Aliase zu berücksichtigen (SPARK-40086, SPARK-42049)
  • Pushdownlimit über Python-UDFs (SPARK-42115)

Codegenerierung und Abfrageausführung

  • Einstellung, dass defaultJoin in BroadcastNestedLoopJoinExec parallel ausgeführt wird (SPARK-40487)
  • Codegen-Unterstützung für HiveGenericUDF (SPARK-42051)
  • Einführung von Shuffle auf SinglePartition (SPARK-41986)
  • Macht DPP-Unterstützung für die Bereinigungsseite hat Union (SPARK-39217)

Andere wichtige Änderungen

  • Unterstützung der Sammlung automatischer Partitionsstatistiken (SPARK-38573)
  • Formatieren von Fehlermeldungen im Thrift Server (SPARK-40098)
  • Hinzufügen einer Erweiterungs-API zum Durchführen der Plannormalisierung für die Zwischenspeicherung (SPARK-41183)
  • Umgestalten von Spark-Typen durch Einführung physischer Typen (SPARK-41226)
  • OneOf-Feldunterstützung und Rekursionsüberprüfungen (SPARK-41396)
  • Zentralisieren der Spaltenauflösungslogik (SPARK-41405)
  • Verbessern der Planänderungsüberprüfung (SPARK-42081)
  • Einführung von SparkPath für typesafety (SPARK-41970)
  • Auslösen einer Ausnahme für db_name.view_name beim Erstellen einer temporären Ansicht durch die Dataset-API (SPARK-41090)
  • Ändern des Standardwerts des Arguments der Mask-Funktion von -42070 zu NULL (SPARK-42070)

Spark Core

Decommission

  • Vermeiden Sie unnötige erneute Aufgabenausführungen auf außer Betrieb gesetztem Executor, der verloren geht, wenn Shuffle-Daten migriert werden (SPARK-41469)
  • Fehler beim Abrufen der Phase ignorieren, verursacht durch außer Betrieb gesetzten Executor (SPARK-40481)
  • Standardmäßiges Aktivieren von spark.storage.decommission. (rdd|shuffle) Blocks.enabled (SPARK-40198)
  • Hinzufügen der Unterstützung für die Außerbetriebnahme von YARN, wenn ESS deaktiviert ist (SPARK-30835)

Scheduler

  • Unterstützung des lokalen Clustermodus für die Phasenplanung (SPARK-41949)
  • Unterstützung für Aufgabenressourcenprofil auf Phasenebene für eigenständige Cluster, wenn die dynamische Zuordnung deaktiviert ist (SPARK-39853)
  • Verzögerung von onDisconnected, damit der Treiber ExecutorExitCode empfangen kann (SPARK-39957)
  • Verbessern der Spekulation durch die Phasenaufgaben-Metriken (SPARK-32170)
  • Ressourcenplanungsunterstützung auf Phasenebene für eigenständige Cluster hinzugefügt (SPARK-39062)
  • Verbessern des LaunchTask-Prozesses, um Stagefehler zu vermeiden, die durch das fehlgeschlagene Senden von LaunchTask-Nachrichten verursacht werden (SPARK-39955)

Shuffle

  • Hinzufügen von clientseitigen Push-basierten Shuffle-Lesemetriken (SPARK-36620)
  • Serverseitige Shuffle-Metriken für pushbasiertes Shuffle (SPARK-33573)
  • Sicherstellen, dass mergedShuffleCleaner vor dem Schließen der Datenbank heruntergefahren wurde (SPARK-40186)
  • Hinzufügen von RocksDB-Unterstützung für shuffle-Dienststatusspeicher (SPARK-38888)
  • Kapseln von LevelDB zum Speichern des Remote-/externen Shufflezustands als DB (SPARK-38909)
  • Standardmäßiges Aktivieren von spark.dynamicAllocation.shuffleTracking.enabled (SPARK-3984)
  • Aktivieren des Push-basierten Shuffle-Dienstes, um den Status in der DB auf NM-Ebene zu speichern, um den Neustart zu erhalten (SPARK-33236)
  • Entfernen von Shuffleblöcken mithilfe des Shuffle-Diensts für freigegebene Executors (SPARK-37618)

Andere wichtige Änderungen

  • Unterstützung von nur IPv6-Umgebung (SPARK-39457)
  • Standardmäßiges Aktivieren von spark.kryo.unsafe (SPARK-42137)
  • Nicht zulassen beliebiger benutzerdefinierter Klassenpfade mit Proxy-Benutzer im Clustermodus (SPARK-41958)
  • Erneute Registrierung von BlockManager vermeiden, wenn der Executor verloren gegangen ist (SPARK-41360)
  • Entfernen der Einschränkung, dass ein einzelnes Vorgangsergebnis in 2 GB passen muss (SPARK-40622)
  • Entfernen der Unterstützung für veraltete spark.akka.*-Konfigurationen (SPARK-40401)
  • Ändern der Standardprotokollierung in stderr, um mit dem Verhalten von log4j konsistent zu sein (SPARK-40406)
  • Ausschließen von DirectTaskResult-Metadaten beim Berechnen der Ergebnisgröße (SPARK-40261)
  • Zulassen des Anpassens der anfänglichen Partitionsnummer im take()-Verhalten (SPARK-40211)
  • Verwenden einer unterbrechbaren Sperre anstelle einer synchronisierten in Executor.updateDependencies() (SPARK-40235)
  • Taskfehler sollten immer Taskfehlerlistener auslösen (SPARK-40106)
  • Hinzufügen der Möglichkeit zum selektiven Deaktivieren der Überwachung oder Abfrage (SPARK-36462)
  • Keine Zwischenspeicherung von nicht serialisierten Broadcast-Relationen auf dem Treiber (SPARK-39983)
  • Beheben des Deadlock zwischen TaskMemoryManager und UnsafeExternalSorter.SpillableIterator (SPARK-39283)
  • Verfügbarmachen der Zahlenpartitionen in einer Phase für TaskContext (SPARK-38679)
  • Konfigurieren des Arbeitsspeichermehraufwands (SPARK-38194)
  • Vermeidung der Verwendung von bash -c in ShellBasedGroupsMappingProvider (SPARK-38992)

Strukturiertes Streaming

Hauptfeatures

  • Asynchrone Fortschrittsverfolgung (SPARK-39591)
  • Beliebige zustandsbehaftete Verarbeitung im strukturierten Streaming mit Python (SPARK-40434)
  • Protobuf-Unterstützung für strukturiertes Streaming (SPARK-40653)
  • Korrektur der späten Datensatzfilterung zur Unterstützung der Verkettung zustandsbehafteter Operatoren (SPARK-40925)

Andere wichtige Änderungen

  • Einführung eines Streaming-Prüfpunktdatei-Managers, basierend auf der Abortable-Schnittstelle von Hadoop (SPARK-40039)
  • Veralteter Trigger.Once und Höherstufen von Trigger.AvailableNow (SPARK-39805)
  • Freigabe der Informationen der Katalogtabelle für den logischen Plan in der Streaming-Abfrage (SPARK-39564)
  • Unterstützung des Sammelns von Metriken aus Streamingsenken (SPARK-38564)
  • Veraltete DStream-API (SPARK-42075)
  • Standardwert von Konfiguration zum Abrufen des Kafka-Versatzes gespiegelt (SPARK-40844)
  • Bereitstellen einer geklonten Spark-Sitzung in DataFrame in der Benutzerfunktion für die foreachBatch-Senke in PySpark (SPARK-41379)

Spark Connect

Python-Client

Scala Client

PySpark

Pandas-API in Spark

  • Wichtige Verbesserungen
    • Beliebige zustandsbehaftete Verarbeitung im strukturierten Streaming mit Python (SPARK-40434)
    • Implementieren fehlender Pandas-API-Parameter (SPARK-42883)
    • Pandas 1.5-Unterstützung (SPARK-40576)
  • Hauptfeatures

Andere wichtige Änderungen

  • Wichtige Verbesserungen
    • Bereitstellen eines Speicherprofilers für benutzerdefinierte PySpark-Funktionen (SPARK-40281)
    • Kompatibilität der Katalog-API mit dem 3-Layer-Namespace (SPARK-39235)
    • NumPy-Eingabe-Unterstützung in PySpark (SPARK-39405)
    • PySpark-Fehlerverbesserungen (SPARK-41597)
  • Hauptfeatures
    • Unterstützung parametrisierter SQL in PySpark (SPARK-41666)
    • Implementieren der „Median“-Funktion (SPARK-40003)
    • Implementieren der „Mode“-Funktion (SPARK-40007)
    • Implementieren der „Unpivot/Melt“-Funktion (SPARK-39877)
    • Unterstützung für Varchar in PySpark (SPARK-39760)
    • Unterstützung für CharType in PySpark (SPARK-39809)

MLLIB

SparkR

Live-Benutzeroberfläche und Verlaufsserverdienst

  • Bessere Skalierbarkeit der Spark-Benutzeroberfläche und Treiberstabilität für große Anwendungen(SPARK-41053)
  • Standardmäßiges Verwenden von RocksDB für spark.history.store.hybridStore.diskBackend (SPARK-42277)
  • Gruppierung geschachtelter Ausführungen unter der Stammausführung (SPARK-41752)
  • Anzeigen von Metrikeigenschaften im Tab „Umgebung“ (SPARK-39110)
  • StagePage Eingabegröße/Datensätze werden nicht angezeigt, wenn die Datensätze größer als Null sind (SPARK-34777)
  • Verbessern der JsonProtocol-Leistung der Ereignisprotokollierung, indem Jackson anstelle von Json4s verwendet wird (SPARK-39489)
  • Unterstützung von spark.history.fs.update.batchSize (SPARK-39225)

Build

  • Aktualisieren von cloudpickle auf v2.2.0 (SPARK-40991)
  • Verwerfen der Unterstützung für Python 3.7 (SPARK-39861)
  • Unterstützung für Python 3.11 (SPARK-41454)
  • Aktualisieren von dev.ludovic.netlib auf 3.0.2 (SPARK-40251)
  • Aktualisieren von breeze auf 2.0 (SPARK-39616)
  • Aktualisieren der slf4j-Version auf 2.0.6 (SPARK-41561)
  • Aktualisieren der kubernetes-client-Version auf 6.4.1 (SPARK-42362)
  • Aktualisieren von rocksdbjni auf 7.9.2 ( SPARK-42129)
  • Aktualisieren von Apache Arrow auf 11.0.0 (SPARK-42161)
  • Upgrade von Apache Kafka auf 3.3.2 (SPARK-42109)

Wartungsupdates

Weitere Informationen finden Sie unter Wartungsupdates für Databricks Runtime 13.0.

Systemumgebung

  • Betriebssystem: Ubuntu 22.04.2 LTS
  • Java: Zulu 8.68.0.21-CA-linux64
  • Scala: 2.12.15
  • Python: 3.10.6
  • R: 4.2.2
  • Delta Lake: 2.3.0

Installierte Python-Bibliotheken

Bibliothek Version Bibliothek Version Bibliothek Version
appdirs 1.4.4 argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0
asttokens 2.2.1 attrs 21.4.0 backcall 0.2.0
beautifulsoup4 4.11.1 black 22.6.0 bleach 4.1.0
blinker 1.4 boto3 1.24.28 botocore 1.27.28
certifi 2022.9.14 cffi 1.15.1 chardet 4.0.0
charset-normalizer 2.0.4 Klicken 8.0.4 cryptography 37.0.1
cycler 0.11.0 Cython 0.29.32 dbus-python 1.2.18
debugpy 1.5.1 decorator 5.1.1 defusedxml 0.7.1
distlib 0.3.6 docstring-to-markdown 0,12 entrypoints 0,4
executing 1.2.0 facets-overview 1.0.2 fastjsonschema 2.16.3
filelock 3.10.7 fonttools 4.25.0 googleapis-common-protos 1.56.4
grpcio 1.48.1 grpcio-status 1.48.1 httplib2 0.20.2
idna 3.3 importlib-metadata 4.6.4 ipykernel 6.17.1
ipython 8.10.0 ipython-genutils 0.2.0 ipywidgets 7.7.2
jedi 0.18.1 jeepney 0.7.1 Jinja2 2.11.3
jmespath 0.10.0 joblib 1.2.0 jsonschema 4.16.0
jupyter-client 7.3.4 jupyter_core 4.11.2 jupyterlab-pygments 0.1.2
jupyterlab-widgets 1.0.0 keyring 23.5.0 kiwisolver 1.4.2
launchpadlib 1.10.16 lazr.restfulclient 0.14.4 lazr.uri 1.0.6
MarkupSafe 2.0.1 matplotlib 3.5.2 matplotlib-inline 0.1.6
mccabe 0.7.0 mistune 0.8.4 more-itertools 8.10.0
mypy-extensions 0.4.3 nbclient 0.5.13 nbconvert 6.4.4
nbformat 5.5.0 nest-asyncio 1.5.5 nodeenv 1.7.0
Notebook 6.4.12 numpy 1.21.5 oauthlib 3.2.0
Packen 21,3 Pandas 1.4.4 pandocfilters 1.5.0
parso 0.8.3 pathspec 0.9.0 patsy 0.5.2
pexpect 4.8.0 pickleshare 0.7.5 Pillow 9.2.0
pip 22.2.2 platformdirs 2.5.2 plotly 5.9.0
pluggy 1.0.0 prometheus-client 0.14.1 prompt-toolkit 3.0.36
protobuf 3.19.4 psutil 5.9.0 psycopg2 2.9.3
ptyprocess 0.7.0 pure-eval 0.2.2 pyarrow 7.0.0
pycparser 2.21 pyflakes 3.0.1 Pygments 2.11.2
PyGObject 3.42.1 PyJWT 2.3.0 pyodbc 4.0.32
pyparsing 3.0.9 pyright 1.1.294 pyrsistent 0.18.0
Python-dateutil 2.8.2 python-lsp-jsonrpc 1.0.0 python-lsp-server 1.7.1
pytoolconfig 1.2.2 pytz 2022.1 pyzmq 23.2.0
requests 2.28.1 rope 1.7.0 s3transfer 0.6.0
scikit-learn 1.1.1 scipy 1.9.1 seaborn 0.11.2
SecretStorage 3.3.1 Send2Trash 1.8.0 setuptools 63.4.1
sechs 1.16.0 soupsieve 2.3.1 ssh-import-id 5.11
stack-data 0.6.2 statsmodels 0.13.2 tenacity 8.0.1
terminado 0.13.1 testpath 0.6.0 threadpoolctl 2.2.0
tokenize-rt 4.2.1 tomli 2.0.1 tornado 6.1
traitlets 5.1.1 ujson 5.4.0 unattended-upgrades 0,1
urllib3 1.26.11 virtualenv 20.16.3 wadllib 1.3.6
wcwidth 0.2.5 webencodings 0.5.1 whatthepatch 1.0.2
wheel 0.37.1 widgetsnbextension 3.6.1 yapf 0.31.0
zipp 1.0.0

Installierte R-Bibliotheken

R-Bibliotheken werden aus der Microsoft CRAN-Momentaufnahme vom 10.02.2023 installiert.

Bibliothek Version Bibliothek Version Bibliothek Version
Pfeil 10.0.1 askpass 1.1 assertthat 0.2.1
backports 1.4.1 base 4.2.2 base64enc 0.1-3
bit 4.0.5 bit64 4.0.5 Blob 1.2.3
boot 1.3-28 brew 1,0 - 8 brio 1.1.3
broom 1.0.3 bslib 0.4.2 cachem 1.0.6
callr 3.7.3 caret 6.0-93 cellranger 1.1.0
chron 2.3-59 class 7.3-21 cli 3.6.0
clipr 0.8.0 clock 0.6.1 cluster 2.1.4
codetools 0.2-19 colorspace 2.1-0 commonmark 1.8.1
compiler 4.2.2 config 0.3.1 cpp11 0.4.3
crayon 1.5.2 Anmeldeinformationen 1.3.2 curl 5.0.0
data.table 1.14.6 datasets 4.2.2 DBI 1.1.3
dbplyr 2.3.0 desc 1.4.2 devtools 2.4.5
diffobj 0.3.5 digest 0.6.31 downlit 0.4.2
dplyr 1.1.0 dtplyr 1.2.2 e1071 1.7-13
ellipsis 0.3.2 Evaluieren 0,20 fansi 1.0.4
farver 2.1.1 fastmap 1.1.0 fontawesome 0.5.0
forcats 1.0.0 foreach 1.5.2 foreign 0.8-82
forge 0.2.0 fs 1.6.1 future 1.31.0
future.apply 1.10.0 gargle 1.3.0 generics 0.1.3
gert 1.9.2 ggplot2 3.4.0 gh 1.3.1
gitcreds 0.1.2 glmnet 4.1-6 globals 0.16.2
glue 1.6.2 googledrive 2.0.0 googlesheets4 1.0.1
gower 1.0.1 Grafiken 4.2.2 grDevices 4.2.2
grid 4.2.2 gridExtra 2.3 gsubfn 0.7
gtable 0.3.1 hardhat 1.2.0 haven 2.5.1
highr 0,10 hms 1.1.2 htmltools 0.5.4
htmlwidgets 1.6.1 httpuv 1.6.8 httr 1.4.4
ids 1.0.1 ini 0.3.1 ipred 0.9-13
isoband 0.2.7 iterators 1.0.14 jquerylib 0.1.4
jsonlite 1.8.4 KernSmooth 2.23-20 knitr 1.42
labeling 0.4.2 later 1.3.0 lattice 0.20-45
lava 1.7.1 Lebenszyklus 1.0.3 listenv 0.9.0
lubridate 1.9.1 magrittr 2.0.3 markdown 1.5
MASS 7.3-58.2 Matrix 1.5-1 memoise 2.0.1
methods 4.2.2 mgcv 1.8-41 mime 0,12
miniUI 0.1.1.1 ModelMetrics 1.2.2.2 modelr 0.1.10
munsell 0.5.0 nlme 3.1-162 nnet 7.3-18
numDeriv 2016.8-1.1 openssl 2.0.5 parallel 4.2.2
parallelly 1.34.0 pillar 1.8.1 pkgbuild 1.4.0
pkgconfig 2.0.3 pkgdown 2.0.7 pkgload 1.3.2
plogr 0.2.0 plyr 1.8.8 praise 1.0.0
prettyunits 1.1.1 pROC 1.18.0 processx 3.8.0
prodlim 2019.11.13 profvis 0.3.7 Fortschritt 1.2.2
progressr 0.13.0 promises 1.2.0.1 proto 1.0.0
proxy 0.4-27 ps 1.7.2 purrr 1.0.1
r2d3 0.2.6 R6 2.5.1 ragg 1.2.5
randomForest 4.7-1.1 rappdirs 0.3.3 rcmdcheck 1.4.0
RColorBrewer 1.1-3 Rcpp 1.0.10 RcppEigen 0.3.3.9.3
readr 2.1.3 readxl 1.4.2 recipes 1.0.4
rematch 1.0.1 rematch2 2.1.2 remotes 2.4.2
reprex 2.0.2 reshape2 1.4.4 rlang 1.0.6
rmarkdown 2,20 RODBC 1.3-20 roxygen2 7.2.3
rpart 4.1.19 rprojroot 2.0.3 Rserve 1.8-12
RSQLite 2.2.20 rstudioapi 0.14 rversions 2.1.2
rvest 1.0.3 sass 0.4.5 scales 1.2.1
selectr 0.4-2 sessioninfo 1.2.2 shape 1.4.6
shiny 1.7.4 sourcetools 0.1.7-1 sparklyr 1.7.9
SparkR 3.4.0 spatial 7.3-15 splines 4.2.2
sqldf 0.4-11 SQUAREM 2021.1 stats 4.2.2
stats4 4.2.2 stringi 1.7.12 stringr 1.5.0
survival 3.5-3 sys 3.4.1 systemfonts 1.0.4
tcltk 4.2.2 testthat 3.1.6 textshaping 0.3.6
tibble 3.1.8 tidyr 1.3.0 tidyselect 1.2.0
tidyverse 1.3.2 timechange 0.2.0 timeDate 4022.108
tinytex 0.44 Tools 4.2.2 tzdb 0.3.0
urlchecker 1.0.1 usethis 2.1.6 utf8 1.2.3
utils 4.2.2 uuid 1.1-0 vctrs 0.5.2
viridisLite 0.4.1 vroom 1.6.1 waldo 0.4.0
whisker 0.4.1 withr 2.5.0 xfun 0,37
xml2 1.3.3 xopen 1.0.0 xtable 1.8-4
yaml 2.3.7 zip 2.2.2

Installierte Java- und Scala-Bibliotheken (Scala 2.12-Clusterversion)

Gruppen-ID Artefakt-ID Version
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.12.390
com.amazonaws aws-java-sdk-cloudformation 1.12.390
com.amazonaws aws-java-sdk-cloudfront 1.12.390
com.amazonaws aws-java-sdk-cloudhsm 1.12.390
com.amazonaws aws-java-sdk-cloudsearch 1.12.390
com.amazonaws aws-java-sdk-cloudtrail 1.12.390
com.amazonaws aws-java-sdk-cloudwatch 1.12.390
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.390
com.amazonaws aws-java-sdk-codedeploy 1.12.390
com.amazonaws aws-java-sdk-cognitoidentity 1.12.390
com.amazonaws aws-java-sdk-cognitosync 1.12.390
com.amazonaws aws-java-sdk-config 1.12.390
com.amazonaws aws-java-sdk-core 1.12.390
com.amazonaws aws-java-sdk-datapipeline 1.12.390
com.amazonaws aws-java-sdk-directconnect 1.12.390
com.amazonaws aws-java-sdk-directory 1.12.390
com.amazonaws aws-java-sdk-dynamodb 1.12.390
com.amazonaws aws-java-sdk-ec2 1.12.390
com.amazonaws aws-java-sdk-ecs 1.12.390
com.amazonaws aws-java-sdk-efs 1.12.390
com.amazonaws aws-java-sdk-elasticache 1.12.390
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.390
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.390
com.amazonaws aws-java-sdk-elastictranscoder 1.12.390
com.amazonaws aws-java-sdk-emr 1.12.390
com.amazonaws aws-java-sdk-glacier 1.12.390
com.amazonaws aws-java-sdk-glue 1.12.390
com.amazonaws aws-java-sdk-iam 1.12.390
com.amazonaws aws-java-sdk-importexport 1.12.390
com.amazonaws aws-java-sdk-kinesis 1.12.390
com.amazonaws aws-java-sdk-kms 1.12.390
com.amazonaws aws-java-sdk-lambda 1.12.390
com.amazonaws aws-java-sdk-logs 1.12.390
com.amazonaws aws-java-sdk-machinelearning 1.12.390
com.amazonaws aws-java-sdk-opsworks 1.12.390
com.amazonaws aws-java-sdk-rds 1.12.390
com.amazonaws aws-java-sdk-redshift 1.12.390
com.amazonaws aws-java-sdk-route53 1.12.390
com.amazonaws aws-java-sdk-s3 1.12.390
com.amazonaws aws-java-sdk-ses 1.12.390
com.amazonaws aws-java-sdk-simpledb 1.12.390
com.amazonaws aws-java-sdk-simpleworkflow 1.12.390
com.amazonaws aws-java-sdk-sns 1.12.390
com.amazonaws aws-java-sdk-sqs 1.12.390
com.amazonaws aws-java-sdk-ssm 1.12.390
com.amazonaws aws-java-sdk-storagegateway 1.12.390
com.amazonaws aws-java-sdk-sts 1.12.390
com.amazonaws aws-java-sdk-support 1.12.390
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.390
com.amazonaws jmespath-java 1.12.390
com.clearspring.analytics Datenstrom 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo-shaded 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml classmate 1.3.4
com.fasterxml.jackson.core jackson-annotations 2.14.2
com.fasterxml.jackson.core jackson-core 2.14.2
com.fasterxml.jackson.core jackson-databind 2.14.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.14.2
com.fasterxml.jackson.datatype jackson-datatype-joda 2.14.2
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.13.4
com.fasterxml.jackson.module jackson-module-paranamer 2.14.2
com.fasterxml.jackson.module jackson-module-scala_2.12 2.14.2
com.github.ben-manes.caffeine caffeine 2.3.4
com.github.fommil jniloader 1.1
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java 1.1-natives
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java 1.1-natives
com.github.fommil.netlib netlib-native_ref-linux-x86_64 1.1-natives
com.github.fommil.netlib netlib-native_system-linux-x86_64 1.1-natives
com.github.luben zstd-jni 1.5.2-5
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.8.9
com.google.crypto.tink tink 1.7.0
com.google.flatbuffers flatbuffers-java 1.12.0
com.google.guava guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 2.1.214
com.helger profiler 1.1.1
com.jcraft jsch 0.1.55
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.ning compress-lzf 1.1.2
com.sun.mail javax.mail 1.5.2
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.uber h3 3.7.0
com.univocity univocity-parsers 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.5.0
commons-codec commons-codec 1.15
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.5
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.11.0
commons-lang commons-lang 2.6
commons-logging commons-logging 1.1.3
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 3.0.3
dev.ludovic.netlib blas 3.0.3
dev.ludovic.netlib lapack 3.0.3
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0,21
io.delta delta-sharing-spark_2.12 0.6.3
io.dropwizard.metrics metrics-core 4.2.10
io.dropwizard.metrics metrics-graphite 4.2.10
io.dropwizard.metrics metrics-healthchecks 4.2.10
io.dropwizard.metrics metrics-jetty9 4.2.10
io.dropwizard.metrics metrics-jmx 4.2.10
io.dropwizard.metrics metrics-json 4.2.10
io.dropwizard.metrics metrics-jvm 4.2.10
io.dropwizard.metrics metrics-servlets 4.2.10
io.netty netty-all 4.1.87.Final
io.netty netty-buffer 4.1.87.Final
io.netty netty-codec 4.1.87.Final
io.netty netty-codec-http 4.1.87.Final
io.netty netty-codec-http2 4.1.87.Final
io.netty netty-codec-socks 4.1.87.Final
io.netty netty-common 4.1.87.Final
io.netty netty-handler 4.1.87.Final
io.netty netty-handler-proxy 4.1.87.Final
io.netty netty-resolver 4.1.87.Final
io.netty netty-transport 4.1.87.Final
io.netty netty-transport-classes-epoll 4.1.87.Final
io.netty netty-transport-classes-kqueue 4.1.87.Final
io.netty netty-transport-native-epoll 4.1.87.Final
io.netty netty-transport-native-epoll 4.1.87.Final-linux-aarch_64
io.netty netty-transport-native-epoll 4.1.87.Final-linux-x86_64
io.netty netty-transport-native-kqueue 4.1.87.Final-osx-aarch_64
io.netty netty-transport-native-kqueue 4.1.87.Final-osx-x86_64
io.netty netty-transport-native-unix-common 4.1.87.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx Sammlung 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation activation 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction transaction-api 1.1
javax.xml.bind jaxb-api 2.2.11
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.12.1
net.java.dev.jna jna 5.8.0
net.razorvine pickle 1.3
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.13.22
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.9.3
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.9.16
org.apache.ant ant-jsch 1.9.16
org.apache.ant ant-launcher 1.9.16
org.apache.arrow arrow-format 11.0.0
org.apache.arrow arrow-memory-core 11.0.0
org.apache.arrow arrow-memory-netty 11.0.0
org.apache.arrow arrow-vector 11.0.0
org.apache.avro avro 1.11.1
org.apache.avro avro-ipc 1.11.1
org.apache.avro avro-mapred 1.11.1
org.apache.commons commons-collections4 4.4
org.apache.commons commons-compress 1.21
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.6.1
org.apache.commons commons-text 1.10.0
org.apache.curator curator-client 2.13.0
org.apache.curator curator-framework 2.13.0
org.apache.curator curator-recipes 2.13.0
org.apache.datasketches datasketches-java 3.1.0
org.apache.datasketches datasketches-memory 2.0.0
org.apache.derby derby 10.14.2.0
org.apache.hadoop hadoop-client-runtime 3.3.4
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive hive-shims 2.3.9
org.apache.hive hive-storage-api 2.8.1
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.httpcomponents httpclient 4.5.14
org.apache.httpcomponents httpcore 4.4.16
org.apache.ivy ivy 2.5.1
org.apache.logging.log4j log4j-1.2-api 2.19.0
org.apache.logging.log4j log4j-api 2.19.0
org.apache.logging.log4j log4j-core 2.19.0
org.apache.logging.log4j log4j-slf4j2-impl 2.19.0
org.apache.mesos mesos 1.11.0-shaded-protobuf
org.apache.orc orc-core 1.8.2-shaded-protobuf
org.apache.orc orc-mapreduce 1.8.2-shaded-protobuf
org.apache.orc orc-shims 1.8.2
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm9-shaded 4,22
org.apache.yetus audience-annotations 0.13.0
org.apache.zookeeper zookeeper 3.6.3
org.apache.zookeeper zookeeper-jute 3.6.3
org.checkerframework checker-qual 3.5.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-compiler 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.50.v20221201
org.eclipse.jetty jetty-continuation 9.4.50.v20221201
org.eclipse.jetty jetty-http 9.4.50.v20221201
org.eclipse.jetty jetty-io 9.4.50.v20221201
org.eclipse.jetty jetty-jndi 9.4.50.v20221201
org.eclipse.jetty jetty-plus 9.4.50.v20221201
org.eclipse.jetty jetty-proxy 9.4.50.v20221201
org.eclipse.jetty jetty-security 9.4.50.v20221201
org.eclipse.jetty jetty-server 9.4.50.v20221201
org.eclipse.jetty jetty-servlet 9.4.50.v20221201
org.eclipse.jetty jetty-servlets 9.4.50.v20221201
org.eclipse.jetty jetty-util 9.4.50.v20221201
org.eclipse.jetty jetty-util-ajax 9.4.50.v20221201
org.eclipse.jetty jetty-webapp 9.4.50.v20221201
org.eclipse.jetty jetty-xml 9.4.50.v20221201
org.eclipse.jetty.websocket websocket-api 9.4.50.v20221201
org.eclipse.jetty.websocket websocket-client 9.4.50.v20221201
org.eclipse.jetty.websocket websocket-common 9.4.50.v20221201
org.eclipse.jetty.websocket websocket-server 9.4.50.v20221201
org.eclipse.jetty.websocket websocket-servlet 9.4.50.v20221201
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-locator 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2,36
org.glassfish.jersey.containers jersey-container-servlet-core 2,36
org.glassfish.jersey.core jersey-client 2,36
org.glassfish.jersey.core jersey-common 2,36
org.glassfish.jersey.core jersey-server 2,36
org.glassfish.jersey.inject jersey-hk2 2,36
org.hibernate.validator hibernate-validator 6.1.7.Final
org.javassist javassist 3.25.0-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains annotations 17.0.0
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.8.0
org.mariadb.jdbc mariadb-java-client 2.7.4
org.mlflow mlflow-spark 2.2.0
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.3.8
org.roaringbitmap RoaringBitmap 0.9.39
org.roaringbitmap shims 0.9.39
org.rocksdb rocksdbjni 7.8.3
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.15
org.scala-lang scala-library_2.12 2.12.15
org.scala-lang scala-reflect_2.12 2.12.15
org.scala-lang.modules scala-collection-compat_2.12 2.4.3
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt test-interface 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp breeze-macros_2.12 2.1.0
org.scalanlp breeze_2.12 2.1.0
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 2.0.6
org.slf4j jul-to-slf4j 2.0.6
org.slf4j slf4j-api 2.0.6
org.threeten threeten-extra 1.7.1
org.tukaani xz 1.9
org.typelevel algebra_2.12 2.0.1
org.typelevel cats-kernel_2.12 2.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.1.3.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.8.4
org.yaml snakeyaml 1,33
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.cryptools AmazonCorrettoCryptoProvider 1.6.1-linux-x86_64
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1