Databricks Runtime 13.0 (desteklenmiyor)

  • Makale

Aşağıdaki sürüm notları, Apache Spark 3.4.0 tarafından desteklenen Databricks Runtime 13.0 hakkında bilgi sağlar.

Databricks bu görüntüleri Nisan 2023'te yayımladı.

Yeni özellikler ve geliştirmeler

H3 ifadeleri artık doğrusal coğrafyaları destekliyor

h3_coverash3 ve h3_coverash3string işlevleri artık doğrusal (linestring ve multilinestring) coğrafyaları destekliyor. İşlevler, belirtilen çözünürlükte en az sayıda H3 hücresi kapsayan bir küme oluşturur. Bkz. h3_coverash3 ve h3_coverash3string.

Ganglia yerine küme ölçümleri eklendi

Databricks Runtime sürüm 13 ve üzeri için Ganglia ölçümleri, Azure Databricks kümesi ölçümleriyle değiştirilir. Databricks Runtime sürüm 12 ve altı için Ganglia ölçümlerini kullanmaya devam edebilirsiniz. Küme ölçümlerinden memnun edilemeyen Ganglia ölçümlerine bağlı bir iş akışınız varsa Azure Databricks hesap ekibinize başvurun. Bkz . İşlem ölçümlerini görüntüleme.

Spark 3.4.0 yayınlandı

Apache Spark 3.4.0 genel kullanıma sunuldu. Bkz . Spark Sürüm 3.4.0.

Sorgu planlaması ve yürütme arasında bir dosya değiştirilirse Photon bir hata döndürür

Sorgu planlaması ve yürütme arasında bir dosya güncelleştirilirse foton sorguları artık bir hata döndürür. Bu değişiklik öncesinde, Sorgu planlama ve yürütme arasında değişiklik süresi değişse bile Photon bir dosyayı okur ve bu da öngörülemeyen sonuçlara yol açabilir.

Tahmine Dayalı G/Ç için yeni özellikler

Foton artık kullanarak SATIRSAY ve ARALIK modları için kayan çerçeveleri {ROWS | RANGE} BETWEEN offset_start { PRECEDING | FOLLOWING } AND offset_stop { PRECEDING | FOLLOWING }destekler.

Tahmine Dayalı G/Ç özellikleri için genişletilmiş destek

Şemanız özel olarak skaler sütunlar içerdiğinde CSV, AVRO, DataFrame önbelleğe alma veri kaynakları için foton genişletilmiş desteği. Ayrıca haritalar, yapılar ve diziler gibi iç içe türler için destek genişletilir.

Başka bir Databricks çalışma alanına bağlanmak için Databricks bağlayıcısını kullanma

Azure Databricks bağlayıcısı, başka bir çalışma alanında yapılandırılan işlem kaynaklarına bağlanmanızı ve sonuçları geçerli Azure Databricks çalışma alanınıza döndürmenizi sağlar. Azure Databricks JDBC sürücüsü artık Databricks Runtime'a eklenmiştir. Bkz . Başka bir Databricks çalışma alanına bağlanmak için Databricks bağlayıcısını kullanma.

Unity Kataloğu'nda paylaşılan kümeyle Yapılandırılmış Akış için ek Kafka seçenekleri

Artık paylaşılan erişim kümelerinde Yapılandırılmış Akış kullanırken, Ayarları ve kafak.ssl.keystore.location Kafka sertifikalarını Unity Kataloğu tarafından yönetilen dış konumlarda depolamak için kullanabilirsinizkakfa.ssl.truststore.location. DBFS kökünde konumları kullanamazsınız.

Yapılandırılmış Akış ile Delta tablosu değişikliklerini atlama

Artık , MERGEve DELETE işlemleri için Delta tablosuna veri değiştirme işlemelerini yoksaymak için UPDATEkullanabilirsinizskipChangeCommits. Bu, artık kullanım dışı olan öğesinin yerini alır ignoreChanges. Bkz. Güncelleştirmeleri ve silmeleri yoksayma.

Delta tabloları için CREATE TABLE LIKE özelliği

CREATE TABLE LIKE artık Delta tabloları kullanılırken destekleniyor.

Dosya bloğu başlangıcını ve uzunluğunu belirten yeni meta veri sütunu alanları

Artık ve sütunuyla _metadata giriş dosyaları için aşağıdaki meta veri bilgilerini alabilirsiniz: file_block_start ve file_block_length. Daha fazla bilgi için bkz . Dosya meta verileri sütunu.

Yeni H3 jeo-uzamsal işlevleri

Yeni h3_coverash3 ve h3_coverash3string ifadeleri, Foton etkinleştirildiğinde jeo-uzamsal işleme için kullanılabilir. Bkz. H3 jeo-uzamsal işlevler.

Yeni SQL yerleşik işlevleri

Aşağıdaki işlevler eklendi:

%sql Python not defterlerinde

Python not defterlerindeki boş %sql olmayan tüm sonuçlara artık veya IPython'un çıkış önbelleğe alma sistemi kullanılarak _sqldf erişilebilir. Bu, Python'da DataFrame sonucunun kullanımını basitleştirir. Bu, önceki DBR sürümlerinde, daha önce _sqldf olduğu gibi her zaman yeniden atanmamış olan bir davranış değişikliğidir.

_sqldfhücre paralel SQL hücre yürütmesi kullanılarak yürütüldüyse, hücre sonucuna yeniden atanmamış %sql demektir.

%pip Python otomatik olarak yeniden başlatılmıyor

VirtualEnv'i değiştiren Python not defterleri içindeki komutları çalıştırdıktan %pip sonra Databricks artık Python işlemini otomatik olarak yeniden başlatmaz. Python işlemini yeniden başlatmak için öğesini çağırın dbutils.library.restartPython(). Bu değişiklikle, %pip Databricks'te komutlar Jupyter Notebook'lara benzer şekilde davranır ve ve %sh pip komutları ile !pip tutarlıdır. Databricks veya %sh pipyerine !pip önerir%pip.

Küme kapsamlı Python kitaplıkları kök olmayan bir kullanıcı kullanılarak yüklenir

Kitaplıklar artık kitaplık yüklemelerinden sorumlu olan kök olmayan bir kullanıcı kullanılarak yüklenir. Başlatma betiklerinde pip yükleme davranışını yapılandırmak istiyorsanız ,[genel düzey dosyasını https://pip.pypa.io/en/stable/topics/configuration/#configuration-files) kullanın.

Hata düzeltmeleri

  • Komutlarda %sh aşağıdaki düzeltmeler yapılmıştır:
    • UTF-8 karakter içermeyen çıkış artık desteklenmektedir.
    • Komut iptal edildiğinde alt işlemler artık kesintiye uğrar.

Kitaplık yükseltmeleri

  • Yükseltilen Python kitaplıkları:
    • asttokens from 2.0.5 to 2.2.1
    • 22.3.0 ile 22.6.0 arasından siyah
    • boto3 1.21.32 ile 1.24.28
    • 1.24.32 ile 1.27.28 arasında botocore
    • 2021.10.8 ile 2022.9.14
    • cffi 1.15.0 ile 1.15.1 arasındaki
    • 3.4.8 ile 37.0.1 arasında şifreleme
    • Cython 0.29.28 ile 0.29.32 arasında
    • 1.2.16 ile 1.2.18 arası dbus-python
    • 0,11 ile 0,12 arası docstring-to-markdown
    • 0.8.3'ten 1.2.0'a yürütme
    • 1.0.0 ile 1.0.2 arası modellere genel bakış
    • fastjsonschema 2.16.2 ile 2.16.3
    • 3.9.0 ile 3.10.7 arasında dosya kilidi
    • ipykernel 6.15.3 ile 6.17.1
    • 8.5.0 ile 8.10.0 arasında ipython
    • iş kolu 1.1.1 ile 1.2.0
    • 4.4.0 ile 4.16.0 arasındaki jsonschema
    • 6.1.12 ile 7.3.4 arası jupyter-client
    • Kiwisolver 1.3.2 ile 1.4.2
    • matplotlib 3.5.1 ile 3.5.2
    • matplotlib-inline 0.1.2 ile 0.1.6 arası
    • 5.3.0 ile 5.5.0 arasında nbformat
    • 6.4.8 ile 6.4.12 arasında not defteri
    • pandas from 1.4.2 to 1.4.4
    • Yastık 9.0.1 ile 9.2.0
    • pip 21.2.4 ile 22.2.2
    • platformdirs from 2.6.2 to 2.5.2
    • çizim 5.6.0 ile 5.9.0
    • 0.13.1 ile 0.14.1 arası prometheus-client
    • 3.0.20 ile 3.0.36 arası prompt-toolkit
    • psutil 5.8.0 ile 5.9.0
    • 2.5.0 ile 3.0.1 arasında pflakes
    • PyGObject 3.36.0 ile 3.42.1 arasında
    • 3.0.4 ile 3.0.9 arasında pyparsing
    • 1.1.283 ile 1.1.294 arasında pyright
    • python-lsp-server 1.6.0 ile 1.7.1 arası
    • pytz from 2021.3 to 2022.1
    • pyzmq 22.3.0 ile 23.2.0 arasında
    • 2.27.1'den 2.28.1'e istekler
    • halat 0.22.0 ile 1.7.0
    • s3transfer 0.5.0 ile 0.6.0
    • 1.0.2 ile 1.1.1 arası scikit-learn
    • scipy from 1.7.3 to 1.9.1
    • 61.2.0 ile 63.4.1 için kurulum araçları
    • 5.10 ile 5.11 arasında ssh-import-id
    • 0.2.0 ile 0.6.2 arasında yığın verileri
    • testpath from 0.5.0 to 0.6.0
    • tomli 1.2.2 ile 2.0.1
    • 5.1.0 ile 5.4.0 arasındaki ujson
    • 1.26.9'dan 1.26.11'e urllib3
    • virtualenv 20.8.0 ile 20.16.3
    • 1.0.4 ile 1.0.2
    • tekerlek 0.37.0 ile 0.37.1
  • Yükseltilen R kitaplıkları:
    • 10.0.0 ile 10.0.1'den 10.0.1'e kadar olan ok
    • bit 4.0.4 ile 4.0.5
    • süpürge 1.0.1 ile 1.0.3
    • bslib 0.4.1 ile 0.4.2
    • chron from 2.3-58 to 2.3-59
    • cli 3.4.1 ile 3.6.0
    • renk alanı 2.0-3 ile 2.1-0 arası
    • curl from 4.3.3 to 5.0.0
    • data.table from 1.14.4 to 1.14.6
    • dbplyr 2.2.1 ile 2.3.0
    • özet 0.6.30 ile 0.6.31
    • 1.0.10 ile 1.1.0 aralığındaki dplyr
    • e1071 1.7-12 ile 1.7-13 arası
    • 0,18'den 0,20'ye kadar değerlendirme
    • 1.0.3 ile 1.0.4 arası fansi
    • fontawesome from 0.4.0 to 0.5.0
    • 0.5.2 ile 1.0.0 için forcats
    • fs 1.5.2 ile 1.6.1
    • gelecek 1.29.0 ile 1.31.0
    • 1.2.1'den 1.3.0'a kadar gargara
    • 1.9.1'den 1.9.2'ye kadar gert
    • 4.1-4 ile 4.1-6 arası glmnet
    • 0.16.1 ile 0.16.2 genelleri
    • 1.0.0 ile 1.0.1
    • 0,9 ile 0,10 arasında daha yüksek
    • htmltools from 0.5.3 to 0.5.4
    • htmlwidgets from 1.5.4 to 1.6.1
    • httpuv 1.6.6 ile 1.6.8
    • 0.2.6 ile 0.2.7 arasında isoband
    • 1.8.3 ile 1.8.4 arasındaki jsonlite
    • 1,40'tan 1,42'ye kadar örgü örme
    • lav 1.7.0 ile 1.7.1
    • 0.8.0 ile 0.9.0 için dinleyici
    • 1.9.0 ile 1.9.1 lubridat
    • markdown 1,3 ile 1,5
    • modelleyici 0.1.9 ile 0.1.10
    • openssl 2.0.4 ile 2.0.5
    • paralel olarak 1.32.1 ile 1.34.0
    • pkgbuild 1.3.1 ile 1.4.0
    • pkgdown 2.0.6 ile 2.0.7
    • pkgload 1.3.1 ile 1.3.2
    • plyr 1.8.7 ile 1.8.8
    • ilerleme 0.11.0 ile 0.13.0
    • purrr from 0.3.5 to 1.0.1
    • 1.2.4'ten 1.2.5'e kadar olan ragg
    • Rcpp 1.0.9 ile 1.0.10
    • readxl 1.4.1 ile 1.4.2
    • 1.0.3 ila 1.0.4 yemek tarifleri
    • 2,18 ile 2,20 arasında rmarkdown
    • RODBC 1.3-19 ile 1.3-20 arası
    • roxygen2 7.2.1 ile 7.2.3
    • 2.2.18 ile 2.2.20 arasında RSQLite
    • sass from 0.4.2 to 0.4.5
    • parlak 1.7.3 ile 1.7.4
    • 0.1.7 ile 0.1.7-1 arası kaynak araçları
    • sparklyr 1.7.8 ile 1.7.9
    • SparkR 3.3.2 ile 3.4.0
    • 7.3-11 ile 7.3-15 arası uzamsal
    • stringi 1.7.8 ile 1.7.12
    • dizeleyici 1.4.1 ile 1.5.0
    • 3.4-0 ile 3.5-3 arası hayatta kalma
    • 3.1.5 ile 3.1.6
    • 1.2.1 ile 1.3.0
    • 0.1.1 ile 0.2.0 arasında zaman değişimi
    • timeDate from 4021.106 to 4022.108
    • tinytex 0,42'den 0,44'e
    • utf8 1.2.2 ile 1.2.3
    • 0.5.0 ile 0.5.2 arasında vctr'lar
    • 1.6.0 ile 1.6.1 arasında vroom
    • çizgi 0,4 ile 0,4,1
    • 0,34 ile 0,37 xfun
    • yaml 2.3.6 ile 2.3.7
  • Yükseltilen Java kitaplıkları:
    • com.amazonaws.aws-java-sdk-autoscaling from 1.12.189 to 1.12.390
    • com.amazonaws.aws-java-sdk-cloudformation 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-cloudfront 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-cloudhsm 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-cloudsearch 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-cloudtrail 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-cloudwatch 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-cloudwatchmetrics from 1.12.189 to 1.12.390
    • com.amazonaws.aws-java-sdk-codedeploy from 1.12.189 to 1.12.390
    • com.amazonaws.aws-java-sdk-cognitoidentity 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-cognitosync 1.12.189 ile 1.12.390 arasında
    • com.amazonaws.aws-java-sdk-config 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-core 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-datapipeline 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-directconnect from 1.12.189 to 1.12.390
    • com.amazonaws.aws-java-sdk-directory 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-dynamodb 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-ec2 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-ecs 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-efs 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-elasticache 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-elasticbeanstalk 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-elasticloadbalancing from 1.12.189 to 1.12.390
    • com.amazonaws.aws-java-sdk-elastictranscoder 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-emr 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-glacier 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-glue 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-iam 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-importexport 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-kinesis 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-kms 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-lambda 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-logs 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-machinelearning from 1.12.189 to 1.12.390
    • com.amazonaws.aws-java-sdk-opsworks 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-rds 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-redshift 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-route53 from 1.12.189 to 1.12.390
    • com.amazonaws.aws-java-sdk-s3 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-ses 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-simpledb 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-simpleworkflow 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-sns 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-sqs 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-ssm 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-storagegateway 1.12.189 ile 1.12.390 arası
    • com.amazonaws.aws-java-sdk-sts 1.12.189 ile 1.12.390 arasında
    • com.amazonaws.aws-java-sdk-support from 1.12.189 to 1.12.390
    • com.amazonaws.aws-java-sdk-workspaces 1.12.189 ile 1.12.390 arası
    • com.amazonaws.jmespath-java 1.12.189 ile 1.12.390 arası
    • com.fasterxml.jackson.core.jackson-annotations from 2.13.4 to 2.14.2
    • com.fasterxml.jackson.core.jackson-core 2.13.4 ile 2.14.2 arası
    • com.fasterxml.jackson.core.jackson-databind from 2.13.4.2 to 2.14.2
    • com.fasterxml.jackson.dataformat.jackson-dataformat-cbor 2.13.4 ile 2.14.2 arasında
    • com.fasterxml.jackson.datatype.jackson-datatype-joda 2.13.4 ile 2.14.2 arası
    • com.fasterxml.jackson.module.jackson-module-paranamer from 2.13.4 to 2.14.2
    • com.fasterxml.jackson.module.jackson-module-scala_2.12 from 2.13.4 to 2.14.2
    • com.github.luben.zstd-jni 1.5.2-1 ile 1.5.2-5 arası
    • com.google.code.gson.gson 2.8.6 ile 2.8.9 arasındaki
    • com.google.crypto.tink.tink from 1.6.1 to 1.7.0
    • com.h2database.h2 2.0.204 ile 2.1.214 arasında
    • com.jcraft.jsch 0.1.50 ile 0.1.55
    • com.ning.compress-lzf 1.1 ile 1.1.2 arasında
    • commons-fileupload.commons-fileupload 1.3.3 ile 1.5 arası
    • dev.ludovic.netlib.arpack 2.2.1 ile 3.0.3 arasında
    • dev.ludovic.netlib.blas 2.2.1 ile 3.0.3 arasında
    • dev.ludovic.netlib.lapack 2.2.1 ile 3.0.3 arasında
    • io.dropwizard.metrics.metrics-core 4.1.1 ile 4.2.10 arası
    • 4.1.1 ile 4.2.10 arası io.dropwizard.metrics.metrics-graphite
    • io.dropwizard.metrics.metrics-healthchecks from 4.1.1 to 4.2.10
    • 4.1.1 ile 4.2.10 arası io.dropwizard.metrics.metrics-jetty9
    • 4.1.1 ile 4.2.10 arası io.dropwizard.metrics.metrics-jmx
    • 4.1.1 ile 4.2.10 arasındaki io.dropwizard.metrics.metrics-json
    • io.dropwizard.metrics.metrics-jvm 4.1.1 ile 4.2.10 arası
    • 4.1.1 ile 4.2.10 arası io.dropwizard.metrics.metrics-servlets
    • io.netty.netty-all 4.1.74.Final'den 4.1.87.Final'e
    • io.netty.netty-buffer 4.1.74.Final'den 4.1.87.Final'e
    • 4.1.74.Final'den 4.1.87.Final'e kadar io.netty.netty-codec
    • io.netty.netty-common from 4.1.74.Final to 4.1.87.Final
    • io.netty.netty-handler from 4.1.74.Final to 4.1.87.Final
    • io.netty.netty-resolver from 4.1.74.Final to 4.1.87.Final
    • io.netty.netty-transport from 4.1.74.Final to 4.1.87.Final
    • io.netty.netty-transport-classes-epoll from 4.1.74.Final to 4.1.87.Final
    • io.netty.netty-transport-classes-kqueue from 4.1.74.Final to 4.1.87.Final
    • io.netty.netty-transport-native-unix-common from 4.1.74.Final to 4.1.87.Final
    • 2.10.13 ile 2.12.1 arası joda-time.joda-time
    • net.razorvine.pickle 1.2 ile 1.3
    • org.antlr.antlr4-runtime 4.8 ile 4.9.3 arası
    • org.apache.ant.ant 1.9.2 ile 1.9.16
    • org.apache.ant.ant-jsch 1.9.2 ile 1.9.16 arası
    • org.apache.ant.ant-launcher 1.9.2 ile 1.9.16 arası
    • org.apache.arrow.arrow-format 7.0.0 ile 11.0.0 arası
    • org.apache.arrow.arrow-memory-core 7.0.0 ile 11.0.0 arası
    • org.apache.arrow.arrow-memory-netty 7.0.0 ile 11.0.0 arası
    • org.apache.arrow.arrow-vector 7.0.0 ile 11.0.0 arası
    • org.apache.avro.avro 1.11.0 ile 1.11.1
    • org.apache.avro.avro-ipc 1.11.0 ile 1.11.1 arası
    • org.apache.avro.avro-mapred from 1.11.0 to 1.11.1
    • org.apache.httpcomponents.httpclient 4.5.13 ile 4.5.14 arasında
    • org.apache.httpcomponents.httpcore 4.4.14 ile 4.4.16 arasında
    • org.apache.ivy.ivy.ivy 2.5.0 ile 2.5.1 arasında
    • 2.18.0 ile 2.19.0 arası org.apache.logging.log4j.log4j-1.2-api
    • 2.18.0 ile 2.19.0 arası org.apache.logging.log4j.log4j-api
    • 2.18.0 ile 2.19.0 arası org.apache.logging.log4j.log4j-core
    • org.apache.orc.orc-core 1.7.6 ile 1.8.2-shaded-protobuf
    • org.apache.orc.orc-mapreduce 1.7.6 ile 1.8.2-shaded-protobuf
    • org.apache.orc.orc-shims 1.7.6 ile 1.8.2 arası
    • org.apache.xbean.xbean-asm9-shaded from 4.20 to 4.22
    • org.apache.zookeeper.zookeeper 3.6.2 ile 3.6.3
    • org.apache.zookeeper.zookeeper-jute 3.6.2 ile 3.6.3 arası
    • org.eclipse.jetty.jetty-client from 9.4.46.v20220331 to 9.4.50.v20221201
    • org.eclipse.jetty.jetty-continuation from 9.4.46.v20220331 to 9.4.50.v20221201
    • org.eclipse.jetty.jetty-http from 9.4.46.v20220331 to 9.4.50.v20221201
    • org.eclipse.jetty.jetty-io 9.4.46.v20220331 - 9.4.50.v20221201
    • org.eclipse.jetty.jetty-jndi from 9.4.46.v20220331 to 9.4.50.v20221201
    • org.eclipse.jetty.jetty-plus from 9.4.46.v20220331 to 9.4.50.v20221201
    • org.eclipse.jetty.jetty-proxy from 9.4.46.v20220331 to 9.4.50.v20221201
    • org.eclipse.jetty.jetty-security from 9.4.46.v20220331 to 9.4.50.v20221201
    • org.eclipse.jetty.jetty-server from 9.4.46.v20220331 to 9.4.50.v20221201
    • org.eclipse.jetty.jetty-servlet from 9.4.46.v20220331 to 9.4.50.v20221201
    • org.eclipse.jetty.jetty-servlets from 9.4.46.v20220331 to 9.4.50.v20221201
    • org.eclipse.jetty.jetty-util from 9.4.46.v20220331 to 9.4.50.v20221201
    • org.eclipse.jetty.jetty-util-ajax from 9.4.46.v20220331 to 9.4.50.v20221201
    • org.eclipse.jetty.jetty-webapp from 9.4.46.v20220331 to 9.4.50.v20221201
    • org.eclipse.jetty.jetty-xml from 9.4.46.v20220331 to 9.4.50.v20221201
    • org.eclipse.jetty.websocket.websocket-api from 9.4.46.v20220331 to 9.4.50.v20221201
    • org.eclipse.jetty.websocket.websocket-client from 9.4.46.v20220331 to 9.4.50.v20221201
    • org.eclipse.jetty.websocket.websocket-common from 9.4.46.v20220331 to 9.4.50.v20221201
    • org.eclipse.jetty.websocket.websocket-server from 9.4.46.v20220331 to 9.4.50.v20221201
    • org.eclipse.jetty.websocket.websocket-servlet from 9.4.46.v20220331 to 9.4.50.v20221201
    • org.hibernate.validator.hibernate-validator 6.1.0.Final ile 6.1.7.Final arası
    • org.mlflow.mlflow-spark 2.1.1 ile 2.2.0 arası
    • org.postgresql.postgresql 42.3.3 ile 42.3.8
    • org.roaringbitmap.RoaringBitmap 0.9.25 ile 0.9.39 arasında
    • org.roaringbitmap.shims 0.9.25 ile 0.9.39 arasında
    • org.rocksdb.rocksdbjni 6.28.2 ile 7.8.3 arasında
    • org.scala-lang.scala-compiler_2.12- 2.12.14 - 2.12.15
    • org.scala-lang.scala-library_2.12- 2.12.14 - 2.12.15
    • org.scala-lang.scala-reflect_2.12- 2.12.14 - 2.12.15
    • org.scalanlp.breeze-macros_2.12 1.2'den 2.1.0'a
    • 1.2 ile 2.1.0 org.scalanlp.breeze_2.12
    • org.slf4j.jcl-over-slf4j from 1.7.36 to 2.0.6
    • org.slf4j.jul-to-slf4j from 1.7.36 to 2.0.6
    • org.slf4j.slf4j-api from 1.7.36 to 2.0.6
    • org.threeten.threeten-extra 1.5.0 ile 1.7.1 arası
    • org.wildfly.openssl.wildfly-openssl 1.0.7.Final ile 1.1.3.Final arası
    • org.yaml.snakeyaml 1.24 ile 1.33

Apache Spark

Databricks Runtime 13.0, Apache Spark 3.4.0'ı içerir.

Spark SQL

Özellikler

ANSI Uyumluluğu

  • ANSI SQL modu: Eşleme sütununa geçersiz erişimde her zaman null döndür (SPARK-40066)
  • Çift tırnaklı tanımlayıcıları destekleme (SPARK-40585)
  • ANSI SQL modu: Yuvarlama/Yuvarlama, tamsayı taşmasında hata döndürmelidir (SPARK-42045)
  • ANSI aralıklarına integral atama desteği (SPARK-40008)
  • ANSI aralıklarına ondalık atama desteği (SPARK-40014)
  • Yüzdebirlik işlevlerden daha geniş ANSI aralık türleri döndürme (SPARK-40151)
  • ANSI aralıklarını ondalıklara dönüştürme desteği (SPARK-39470)
  • ANSI modunda integrallere aralık atama desteği (SPARK-39451)
  • Hata sınıfları için SQLSTATE kullanımını sağlamlaştırma (SPARK-41994)

İşlevler

  • FROM yan tümcesinde tablo değerli oluşturucu işlevlerini destekleme (SPARK-41594)
  • ANSI Toplama İşlevini Destekleme: REGR_SXY (SPARK-37681)
  • ANSI Toplama İşlevini Destekleme: REGR_R2 (SPARK-37641)
  • ANSI Toplama İşlevini Destekleme: REGR_SXX (SPARK-37672)
  • ANSI Toplama İşlevini Destekleme: REGR_SYY (SPARK-37702)
  • ANSI Toplama İşlevini Destekleme: REGR_SLOPE (SPARK-39230)
  • ANSI Toplama İşlevini Destekleme: REGR_INTERCEPT (SPARK-37623)
  • ANSI toplama işlevini pencere işlevi olarak PERCENTILE_CONT destekleme (SPARK-38219)
  • ANSI Toplama İşlevini Destekleme: PERCENTILE_DISC (SPARK-37691)
  • Destek SPLIT_PART işlevi (SPARK-38063)
  • Destek TRY_AVG işlevi (SPARK-38589)
  • Destek TRY_TO_BINARY işlevi (SPARK-38590)
  • yeni belirtimlere göre TO_NUMBER ve TRY_TO_NUMBER SQL işlevlerini destekleme (SPARK-38796)
  • ANSI genel değer belirtimini ve işlevini destekleme - KULLANICI (SPARK-39138)
  • Ondalık değerleri dize olarak biçimlendirmek için TO_CHAR ve TRY_TO_CHAR işlevlerini destekleme (SPARK-28516)
  • Destek ANY_VALUE toplama işlevi (SPARK-39213)
  • Destek EQUAL_NUL işlevi (SPARK-39305)
  • Toplama işlevi MEDIAN'ı (SPARK-39320) destekleme
  • Destek REGEXP_COUNT işlevi (SPARK-39618)
  • Destek REGEXP_INSTR işlevi (SPARK-39744)
  • Destek REGEXP_SUBSTR işlevi (SPARK-39695)
  • UNPIVOT işlevini destekleme (SPARK-39876)
  • Destek TRY_TO_TIMESTAMP işlevi (SPARK-39795)
  • Yerleşik işlev olarak url kodlama/kod çözme desteği ve URL ile ilgili işlevleri düzenleme (SPARK-39741)
  • Toplama işlevi MODE'unu (SPARK-39808) destekleme
  • GET işlevini destekleme (SPARK-40109)
  • İşlev diğer adları ekleme: UZUNLUK, DATEPART, DATEADD, DATE_DIFF, CURDATE (SPARK-40352)
  • TO_BINARY işlevini geliştirme (SPARK-40112)
  • Destek CURRENT_SCHEMA (SPARK-41323)
  • Yerleşik işlev MASK'i (SPARK-40687) veri maskeleme desteği
  • Yüksek sipariş işlevini destekleme: ARRAY_COMPACT (SPARK-41235)
  • Destek ARRAY_APPEND işlevi (SPARK-41232)
  • Destek ARRAY_INSERT işlevi (SPARK-41234)
  • Destek LUHN_CHECK işlevi (SPARK-42191)
  • Destek ARRAY_SORT(sütun, karşılaştırıcı) (SPARK-39925)

Veri Kaynakları

  • DS v2'de Destek Sütunu İstatistikleri (SPARK-41378)
  • DS v2'de Bölümlenmiş Birleştirmeyi (SPJ) Depolama (SPARK-37375)
  • DS v2'de satır düzeyi işlemler (SPARK-35801)
  • DS v2 Tarama arabiriminde SupportsReportOrdering karışımı ekleme (SPARK-38647)
  • CSV şema çıkarımı için TARİh türünü çıkar (SPARK-39469)
  • DS v2 özel ölçüm API'sinde (SPARK-39635) sürücü ölçümlerini destekleme
  • Dağıtım ve sıralama, DS v2 işlevini yazılı olarak destekler (SPARK-39607)
  • Sözlük filtresinden (SPARK-39002) yararlanabilmemiz için StringEndsWith/Contains desteği Parquet'e gönderme desteği
  • Spark Parquet vektörleştirilmiş okuyucuda UDT desteği (SPARK-39086)
  • METADATA sütununu Parquet dosyaları için satır dizinlerini destekleyecek şekilde genişletme (SPARK-37980)
  • Parquet FIXED_LEN_BYTE_ARRAY türünü okuma desteği (SPARK-41096)
  • Filtreleme koşullarının sırasını iyileştirme (SPARK-40045)
  • MSSQL JDBC (SPARK-37259) ile CTE ve geçici tablo sorgularını destekleme
  • Veri Kaynağı seçeneklerinde ignoreCorruptFiles ve ignoreMissingFiles desteği (SPARK-38767)
  • WriteFiles'a v1 yazma özelliğini çekme (SPARK-41407)
  • Dış veri dosyalarını kapsayacak şekilde okuma tarafı karakter doldurma ekleme (SPARK-40697)

Sorgu İyileştirme

Kod Oluşturma ve Sorgu Yürütme

  • Paralel olarak çalışan BroadcastNestedLoopJoinExec içinde defaultJoin yapın (SPARK-40487)
  • HiveGenericUDF için Codegen Desteği (SPARK-42051)
  • SinglePartition'ta karışıklığı tanıtma (SPARK-41986)
  • DPP'nin budama tarafında Union (SPARK-39217) olduğunu destekler

Diğer Önemli Değişiklikler

  • Otomatik Bölüm İstatistikleri Koleksiyonunu Destekleme (SPARK-38573)
  • Thrift Sunucusu'nda hata iletilerini biçimlendirme (SPARK-40098)
  • Önbelleğe alma için plan normalleştirmesi yapmak için uzantı API'sini ekleme (SPARK-41183)
  • Fiziksel türleri tanıtarak Spark türlerini yeniden düzenleme (SPARK-41226)
  • OneOf alan desteği ve özyineleme denetimleri (SPARK-41396)
  • Sütun çözümleme mantığını merkezileştirme (SPARK-41405)
  • Plan değişikliği doğrulamasını geliştirme (SPARK-42081)
  • SparkPath'i tür güvenliği için tanıtma (SPARK-41970)
  • Veri Kümesi API'sinde geçici görünüm oluştururken db_name.view_name için Özel Durum Oluşturma (SPARK-41090)
  • Mask işlevinin bağımsız değişkeninin varsayılan değerini -1 yerine NULL (SPARK-42070) olarak değiştirin

Spark Core

Yetkisini alma

  • Geçirilen verileri karıştırma (SPARK-41469) durumunda yetkisi alınmış yürütücüde gereksiz görev yeniden çalıştırmanın kaybolmasından kaçının
  • Yetkisi alınmış yürütücüden kaynaklanan aşama getirme hatasını yoksay (SPARK-40481)
  • spark.storage.demission'i etkinleştirin. (rdd|shuffle) Blocks.enabled varsayılan olarak (SPARK-40198)
  • ESS devre dışı bırakıldığında YARN yetkisini alma desteği ekleme (SPARK-30835)

Scheduler

  • Aşama zamanlamanın yerel küme modunu (SPARK-41949) desteklemesini sağlama
  • Dinamik ayırma devre dışı bırakıldığında tek başına küme için destek aşaması düzeyinde görev kaynak profili (SPARK-39853)
  • Driver'ın ExecutorExitCode (SPARK-39957) almasını etkinleştirmek için onDisconnected gecikmesi
  • Aşama görev ölçümleri aracılığıyla tahmini geliştirme (SPARK-32170)
  • Tek başına küme için aşama düzeyinde kaynak zamanlama desteği ekleme (SPARK-39062)
  • LaunchTask iletilerinin gönderilememesinden kaynaklanan Aşama hatalarını önlemek için LaunchTask işlemini geliştirin (SPARK-39955)

Shuffle

  • Anında İletme Tabanlı Karıştırma istemci tarafı okuma ölçümleri ekleme (SPARK-36620)
  • Gönderme tabanlı karıştırma için sunucu tarafı ölçümlerini karıştırma (SPARK-33573)
  • MergedShuffleCleaner'ın veritabanı kapanmadan önce kapatılmış olduğundan emin olun (SPARK-40186)
  • Karışık hizmet durum deposu için RocksDB desteği ekleme (SPARK-38888)
  • Uzak/dış karıştırma durumunu DB olarak depolamak için kullanılan LevelDB'yi kapsülleme (SPARK-38909)
  • Spark.dynamicAllocation.shuffleTracking.enabled öğesini varsayılan olarak etkinleştirme (SPARK-3984)
  • Yeniden başlatmayı korumak için nm düzeyinde db'de durum depolamak için anında iletme tabanlı karıştırma hizmetini etkinleştirme (SPARK-33236)
  • Yayımlanan yürütücüler için karıştırma hizmetini kullanarak karıştırma bloklarını kaldırma (SPARK-37618)

Diğer Önemli Değişiklikler

  • Yalnızca IPv6 ortamını destekleme (SPARK-39457)
  • Spark.kryo.unsafe'i varsayılan olarak etkinleştirme (SPARK-42137)
  • Küme modunda ara sunucu kullanıcısıyla rastgele özel sınıf yolu izin verme (SPARK-41958)
  • Yürütücü kaybolduysa BlockManager yeniden kaydından kaçının (SPARK-41360)
  • Tek bir görev sonucunun 2 GB'a sığması gereken sınırlamayı kaldırın (SPARK-40622)
  • Kullanım dışı spark.akka.* yapılandırmalarının desteğini kaldırın (SPARK-40401)
  • Varsayılan günlüğü stderr olarak değiştirerek log4j davranışıyla tutarlı hale (SPARK-40406)
  • Sonuç boyutunu hesaplarken DirectTaskResult meta verilerini dışlama (SPARK-40261)
  • take() davranışında ilk bölüm numarasını özelleştirmeye izin ver (SPARK-40211)
  • Executor.updateDependencies() (SPARK-40235) içinde eşitlenmek yerine kesilebilir kilidi kullanın
  • Görev hatası her zaman görev hatası dinleyicilerini tetiklemelidir (SPARK-40106)
  • İzlemeyi veya yoklamayı seçmeli olarak devre dışı bırakma özelliğini ekleme (SPARK-36462)
  • Seri durumdan çıkarılmamış yayın ilişkilerini sürücüde önbelleğe alma (SPARK-39983)
  • TaskMemoryManager ile UnsafeExternalSorter.SpillableIterator (SPARK-39283) arasındaki kilitlenme düzeltildi
  • Bir aşamadaki sayı bölümlerini TaskContext(SPARK-38679) ile kullanıma sunma
  • Bellek ek yükü faktörünü yapılandırılabilir hale getirme (SPARK-38194)
  • ShellBasedGroupsMappingProvider'da bash -c kullanmaktan kaçının (SPARK-38992)

Yapılandırılmış Akış

Ana Özellikler

  • Zaman Uyumsuz İlerleme İzleme (SPARK-39591)
  • Yapılandırılmış Akışta Python Rastgele Durum Bilgisi İşleme (SPARK-40434)
  • Yapılandırılmış Akışta Protobuf Desteği (SPARK-40653)
  • Durum bilgisi olan işleçlerin zincirini desteklemek için geç kayıt filtrelemeyi düzeltme (SPARK-40925)

Diğer Önemli Değişiklikler

  • Hadoop'un Durdurulabilir arabirimini (SPARK-40039) temel alan akış denetim noktası dosya yöneticisine giriş
  • Trigger.Once ve Promote Trigger.AvailableNow'ı kullanımdan kaldırın (SPARK-39805)
  • Katalog tablosunun bilgilerini akış sorgusundaki mantıksal plana sunma (SPARK-39564)
  • Akış havuzlarından ölçüm toplama desteği (SPARK-38564)
  • DStream API'sini kullanımdan kaldırma (SPARK-42075)
  • Kafka uzaklığı getirme yapılandırmasının varsayılan değerini ters çevirme (SPARK-40844)
  • PySpark'ta foreachBatch havuzu için kullanıcı işlevinde DataFrame'de kopyalanmış spark oturumu sağlama (SPARK-41379)

Spark Bağlan

Python İstemcisi

Scala İstemcisi

PySpark

Spark'ta Pandas API'si

Diğer Önemli Değişiklikler

  • Önemli geliştirmeler
    • PySpark kullanıcı tanımlı işlevleri (SPARK-40281) için bellek profili oluşturucu sağlama
    • Katalog API'sini 3 katmanlı ad alanıyla (SPARK-39235) uyumlu hale getirme
    • PySpark'ta NumPy giriş desteği (SPARK-39405)
    • PySpark hata geliştirmeleri (SPARK-41597)
  • Başlıca özellikler

MLLIB

SparkR

Canlı Kullanıcı Arabirimi ve Geçmiş Sunucusu Hizmeti

  • Büyük uygulamalar için daha iyi Spark kullanıcı arabirimi ölçeklenebilirliği ve Sürücü kararlılığı (SPARK-41053)
  • Varsayılan olarak spark.history.store.hybridStore.diskBackend için RocksDB kullanma (SPARK-42277)
  • Kök yürütme altında iç içe yürütmeleri gruplandırma (SPARK-41752)
  • Ortam sekmesinde ölçüm özelliklerini gösterme (SPARK-39110)
  • StagePage giriş boyutu/kayıtları sıfırdan büyük kayıtlar olduğunda gösterilmiyor düzeltmesi (SPARK-34777)
  • Json4s yerine Jackson kullanarak olay günlüğü JsonProtocol performansını geliştirme (SPARK-39489)
  • spark.history.fs.update.batchSize (SPARK-39225) desteği

Derleme

Bakım güncelleştirmeleri

Bkz . Databricks Runtime 13.0 bakım güncelleştirmeleri.

Sistem ortamı

  • İşletim Sistemi: Ubuntu 22.04.2 LTS
  • Java: Zulu 8.68.0.21-CA-linux64
  • Scala: 2.12.15
  • Python: 3.10.6
  • R: 4.2.2
  • Delta Gölü: 2.3.0

Yüklü Python kitaplıkları

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
appdirs 1.4.4 argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0
asttokens 2.2.1 attrs 21.4.0 geri arama 0.2.0
beautifulsoup4 4.11.1 Siyah 22.6.0 Çamaşır suyu 4.1.0
yanıp sönen 1.4 boto3 1.24.28 botocore 1.27.28
sertifikalı 2022.9.14 cffi 1.15.1 chardet 4.0.0
charset-normalizer 2.0.4 tıklama 8.0.4 Şifreleme 37.0.1
Cycler 0.11.0 Cython 0.29.32 dbus-python 1.2.18
hata ayıklama 1.5.1 Dekoratör 5.1.1 defusedxml 0.7.1
daistlib 0.3.6 docstring-to-markdown 0,12 Entrypoints 0.4
Yürütme 1.2.0 modellere genel bakış 1.0.2 fastjsonschema 2.16.3
dosya kilidi 3.10.7 fonttools 4.25.0 googleapis-common-protos 1.56.4
grpcio 1.48.1 grpcio-status 1.48.1 httplib2 0.20.2
ıdna 3.3 importlib-metadata 4.6.4 ipykernel 6.17.1
ipython 8.10.0 ipython-genutils 0.2.0 ipywidgets 7.7.2
Jedi 0.18.1 Jeepney 0.7.1 Jinja2 2.11.3
jmespath 0.10.0 joblib 1.2.0 jsonschema 4.16.0
jupyter-client 7.3.4 jupyter_core 4.11.2 jupyterlab-pygments 0.1.2
jupyterlab pencere öğeleri 1.0.0 Anahtarlık 23.5.0 kiwisolver 1.4.2
başlatma çubuğu 1.10.16 lazr.restfulclient 0.14.4 lazr.uri 1.0.6
İşaretlemeyi Kasa 2.0.1 matplotlib 3.5.2 matplotlib-inline 0.1.6
Mccabe 0.7.0 yanlış 0.8.4 more-itertools 8.10.0
mypy uzantıları 0.4.3 nbclient 0.5.13 nbconvert 6.4.4
nbformat 5.5.0 nest-asyncio 1.5.5 nodeenv 1.7.0
not defteri 6.4.12 numpy 1.21.5 oauthlib 3.2.0
Ambalaj 21.3 pandas 1.4.4 pandocfilters 1.5.0
parso 0.8.3 pathspec 0.9.0 Patsy 0.5.2
pexpect 4.8.0 pickleshare 0.7.5 Yastık 9.2.0
Pip 22.2.2 platformdirs 2.5.2 çizim 5.9.0
takılmış 1.0.0 prometheus-client 0.14.1 prompt-toolkit 3.0.36
protobuf 3.19.4 psutil 5.9.0 psycopg2 2.9.3
ptyprocess 0.7.0 saf değerlendirme 0.2.2 serçe 7.0.0
pycparser 2.21 pyflakes 3.0.1 Pygments 2.11.2
PyGObject 3.42.1 PyJWT 2.3.0 pyodbc 4.0.32
pyparsing 3.0.9 pyright 1.1.294 pirsistent 0.18.0
python-dateutil 2.8.2 python-lsp-jsonrpc 1.0.0 python-lsp-server 1.7.1
pytoolconfig 1.2.2 pytz 2022.1 pyzmq 23.2.0
istekler 2.28.1 Ip 1.7.0 s3transfer 0.6.0
scikit-learn 1.1.1 scipy 1.9.1 Sinan 0.11.2
Gizli dizi Depolama 3.3.1 Send2Trash 1.8.0 kurulum araçları 63.4.1
Altı 1.16.0 soupsieve 2.3.1 ssh-import-id 5.11
stack-data 0.6.2 statsmodeller 0.13.2 Azim 8.0.1
terminado 0.13.1 test yolu 0.6.0 threadpoolctl 2.2.0
tokenize-rt 4.2.1 tomli 2.0.1 Kasırga 6.1
traitlets 5.1.1 ujson 5.4.0 katılımsız yükseltmeler 0,1
urllib3 1.26.11 virtualenv 20.16.3 wadllib 1.3.6
wcwidth 0.2.5 webencodings 0.5.1 whatthepatch 1.0.2
Tekerlek 0.37.1 widgetsnbextension 3.6.1 yapf 0.31.0
zipp 1.0.0

Yüklü R kitaplıkları

R kitaplıkları 2023-02-10'da Microsoft CRAN anlık görüntüsünden yüklenir.

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
oku seçin 10.0.1 askpass 1.1 assertthat 0.2.1
Backports 1.4.1 temel 4.2.2 base64enc 0.1-3
bit 4.0.5 bit64 4.0.5 blob 1.2.3
başlatma 1.3-28 Brew 1.0-8 Brio 1.1.3
Süpürge 1.0.3 bslib 0.4.2 önbellek 1.0.6
çağıran 3.7.3 şapka işareti 6.0-93 cellranger 1.1.0
chron 2.3-59 class 7.3-21 cli 3.6.0
küçük resim 0.8.0 saat 0.6.1 cluster 2.1.4
codetools 0.2-19 renk alanı 2.1-0 commonmark 1.8.1
derleyicisi 4.2.2 config 0.3.1 cpp11 0.4.3
Crayon 1.5.2 kimlik bilgileri 1.3.2 Curl 5.0.0
data.table 1.14.6 veri kümeleri 4.2.2 DBİ 1.1.3
dbplyr 2.3.0 Desc 1.4.2 geliştirici araçları 2.4.5
diffobj 0.3.5 Özet 0.6.31 aşağı aydınlatma 0.4.2
dplyr 1.1.0 dtplyr 1.2.2 e1071 1.7-13
üç nokta 0.3.2 değerlendir 0,20 fansi 1.0.4
farver 2.1.1 fastmap 1.1.0 fontawesome 0.5.0
forcats 1.0.0 foreach 1.5.2 Yabancı 0.8-82
Forge 0.2.0 Fs 1.6.1 Gelecek 1.31.0
future.apply 1.10.0 Gargara 1.3.0 Generics 0.1.3
gert 1.9.2 ggplot2 3.4.0 gh 1.3.1
gitcreds 0.1.2 glmnet 4.1-6 Globals 0.16.2
Tutkal 1.6.2 googledrive 2.0.0 googlesheets4 1.0.1
Gower 1.0.1 grafikler 4.2.2 grDevices 4.2.2
Kılavuz 4.2.2 gridExtra 2.3 gsubfn 0.7
gtable 0.3.1 sabit hat 1.2.0 Haven 2.5.1
daha yüksek 0.10 Hms 1.1.2 htmltools 0.5.4
htmlwidgets 1.6.1 httpuv 1.6.8 httr 1.4.4
Kimlik 1.0.1 ını 0.3.1 ipred 0.9-13
isoband 0.2.7 Yineleyicilerde 1.0.14 jquerylib 0.1.4
jsonlite 1.8.4 KernSmooth 2.23-20 örgü örme 1.42
Etiketleme 0.4.2 Sonra 1.3.0 Kafes 0.20-45
Lav 1.7.1 yaşam döngüsü 1.0.3 dinleyici 0.9.0
lubridate 1.9.1 magrittr 2.0.3 markdown 1.5
MASS 7.3-58.2 Matris 1.5-1 not defteri 2.0.1
yöntemler 4.2.2 mgcv 1.8-41 Mıme 0,12
miniUI 0.1.1.1 ModelMetrics 1.2.2.2 modelleyici 0.1.10
munsell 0.5.0 nlme 3.1-162 nnet 7.3-18
numDeriv 2016.8-1.1 openssl 2.0.5 parallel 4.2.2
paralel olarak 1.34.0 Ayağı 1.8.1 pkgbuild 1.4.0
pkgconfig 2.0.3 pkgdown 2.0.7 pkgload 1.3.2
plogr 0.2.0 plyr 1.8.8 Övgü 1.0.0
prettyunits 1.1.1 Yordam 1.18.0 processx 3.8.0
prodlim 2019.11.13 profvis 0.3.7 ilerleme 1.2.2
ilerleme durumu 0.13.0 Söz 1.2.0.1 Proto 1.0.0
Proxy 0.4-27 Ps 1.7.2 purrr 1.0.1
r2d3 0.2.6 R6 2.5.1 ragg 1.2.5
randomForest 4.7-1.1 rappdirs 0.3.3 rcmdcheck 1.4.0
RColorBrewer 1.1-3 Rcpp 1.0.10 RcppEigen 0.3.3.9.3
readr 2.1.3 readxl 1.4.2 yemek tarifleri 1.0.4
Rövanş 1.0.1 rematch2 2.1.2 Kumanda 2.4.2
reprex 2.0.2 yeniden şekillendirme2 1.4.4 rlang 1.0.6
rmarkdown 2.20 RODBC 1.3-20 roxygen2 7.2.3
rpart 4.1.19 rprojroot 2.0.3 Rserve 1.8-12
RSQLite 2.2.20 rstudioapi 0,14 ters çevirmeler 2.1.2
rvest 1.0.3 Sass 0.4.5 Terazi 1.2.1
seçici 0.4-2 sessioninfo 1.2.2 Şekil 1.4.6
Parlak 1.7.4 sourcetools 0.1.7-1 sparklyr 1.7.9
SparkR 3.4.0 Kayma 7.3-15 Splines 4.2.2
sqldf 0.4-11 KAREM 2021.1 Istatistik 4.2.2
istatistikler4 4.2.2 stringi 1.7.12 dizeleyici 1.5.0
Hayatta kalma 3.5-3 sys 3.4.1 systemfonts 1.0.4
tcltk 4.2.2 test edin 3.1.6 metin şekillendirme 0.3.6
Türk 3.1.8 derleyici 1.3.0 tidyselect 1.2.0
tidyverse 1.3.2 zaman değişimi 0.2.0 timeDate 4022.108
tinytex 0.44 araçlar 4.2.2 tzdb 0.3.0
urlchecker 1.0.1 usethis 2.1.6 utf8 1.2.3
Yardımcılar 4.2.2 uuid 1.1-0 vctr'lar 0.5.2
viridisLite 0.4.1 Vroom 1.6.1 Waldo 0.4.0
Bıyık 0.4.1 withr 2.5.0 xfun 0.37
xml2 1.3.3 xopen 1.0.0 xtable 1.8-4
yaml 2.3.7 Zip 2.2.2

Yüklü Java ve Scala kitaplıkları (Scala 2.12 küme sürümü)

Grup Kimliği Yapıt Kimliği Sürüm
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.12.390
com.amazonaws aws-java-sdk-cloudformation 1.12.390
com.amazonaws aws-java-sdk-cloudfront 1.12.390
com.amazonaws aws-java-sdk-cloudhsm 1.12.390
com.amazonaws aws-java-sdk-cloudsearch 1.12.390
com.amazonaws aws-java-sdk-cloudtrail 1.12.390
com.amazonaws aws-java-sdk-cloudwatch 1.12.390
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.390
com.amazonaws aws-java-sdk-codedeploy 1.12.390
com.amazonaws aws-java-sdk-cognitoidentity 1.12.390
com.amazonaws aws-java-sdk-cognitosync 1.12.390
com.amazonaws aws-java-sdk-config 1.12.390
com.amazonaws aws-java-sdk-core 1.12.390
com.amazonaws aws-java-sdk-datapipeline 1.12.390
com.amazonaws aws-java-sdk-directconnect 1.12.390
com.amazonaws aws-java-sdk-directory 1.12.390
com.amazonaws aws-java-sdk-dynamodb 1.12.390
com.amazonaws aws-java-sdk-ec2 1.12.390
com.amazonaws aws-java-sdk-ecs 1.12.390
com.amazonaws aws-java-sdk-efs 1.12.390
com.amazonaws aws-java-sdk-elasticache 1.12.390
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.390
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.390
com.amazonaws aws-java-sdk-elastictranscoder 1.12.390
com.amazonaws aws-java-sdk-emr 1.12.390
com.amazonaws aws-java-sdk-glacier 1.12.390
com.amazonaws aws-java-sdk-glue 1.12.390
com.amazonaws aws-java-sdk-iam 1.12.390
com.amazonaws aws-java-sdk-importexport 1.12.390
com.amazonaws aws-java-sdk-kinesis 1.12.390
com.amazonaws aws-java-sdk-kms 1.12.390
com.amazonaws aws-java-sdk-lambda 1.12.390
com.amazonaws aws-java-sdk-logs 1.12.390
com.amazonaws aws-java-sdk-machinelearning 1.12.390
com.amazonaws aws-java-sdk-opsworks 1.12.390
com.amazonaws aws-java-sdk-rds 1.12.390
com.amazonaws aws-java-sdk-redshift 1.12.390
com.amazonaws aws-java-sdk-route53 1.12.390
com.amazonaws aws-java-sdk-s3 1.12.390
com.amazonaws aws-java-sdk-ses 1.12.390
com.amazonaws aws-java-sdk-simpledb 1.12.390
com.amazonaws aws-java-sdk-simpleworkflow 1.12.390
com.amazonaws aws-java-sdk-sns 1.12.390
com.amazonaws aws-java-sdk-sqs 1.12.390
com.amazonaws aws-java-sdk-ssm 1.12.390
com.amazonaws aws-java-sdk-storagegateway 1.12.390
com.amazonaws aws-java-sdk-sts 1.12.390
com.amazonaws aws-java-sdk-support 1.12.390
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.390
com.amazonaws jmespath-java 1.12.390
com.clearspring.analytics akış 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo gölgeli 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml Classmate 1.3.4
com.fasterxml.jackson.core jackson-annotations 2.14.2
com.fasterxml.jackson.core jackson-core 2.14.2
com.fasterxml.jackson.core jackson-databind 2.14.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.14.2
com.fasterxml.jackson.datatype jackson-datatype-joda 2.14.2
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.13.4
com.fasterxml.jackson.module jackson-module-paranamer 2.14.2
com.fasterxml.jackson.module jackson-module-scala_2.12 2.14.2
com.github.ben-manes.caffeine Kafein 2.3.4
com.github.fommil jniloader 1.1
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java 1.1-natives
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java 1.1-natives
com.github.fommil.netlib netlib-native_ref-linux-x86_64 1.1-natives
com.github.fommil.netlib netlib-native_system-linux-x86_64 1.1-natives
com.github.luben zstd-jni 1.5.2-5
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.8.9
com.google.crypto.tink Tink 1.7.0
com.google.flatbuffers flatbuffers-java 1.12.0
com.google.guava Guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 2.1.214
com.helger Profiler 1.1.1
com.jcraft jsch 0.1.55
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.ning compress-lzf 1.1.2
com.sun.mail javax.mail 1.5.2
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.uber h3 3.7.0
com.univocity univocity-ayrıştırıcıları 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.5.0
commons-codec commons-codec 1,15
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.5
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.11.0
commons-lang commons-lang 2,6
commons-logging commons-logging 1.1.3
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 3.0.3
dev.ludovic.netlib Blas 3.0.3
dev.ludovic.netlib lapack 3.0.3
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0.21
io.delta delta-sharing-spark_2.12 0.6.3
io.dropwizard.metrics metrics-core 4.2.10
io.dropwizard.metrics metrics-graphite 4.2.10
io.dropwizard.metrics metrics-healthchecks 4.2.10
io.dropwizard.metrics metrics-jetty9 4.2.10
io.dropwizard.metrics metrics-jmx 4.2.10
io.dropwizard.metrics metrics-json 4.2.10
io.dropwizard.metrics metrics-jvm 4.2.10
io.dropwizard.metrics metrics-servlets 4.2.10
io.netty netty-all 4.1.87.Final
io.netty netty-buffer 4.1.87.Final
io.netty netty-codec 4.1.87.Final
io.netty netty-codec-http 4.1.87.Final
io.netty netty-codec-http2 4.1.87.Final
io.netty netty-codec-socks 4.1.87.Final
io.netty netty-common 4.1.87.Final
io.netty netty-handler 4.1.87.Final
io.netty netty-handler-proxy 4.1.87.Final
io.netty netty-resolver 4.1.87.Final
io.netty netty-transport 4.1.87.Final
io.netty netty-transport-classes-epoll 4.1.87.Final
io.netty netty-transport-classes-kqueue 4.1.87.Final
io.netty netty-transport-native-epoll 4.1.87.Final
io.netty netty-transport-native-epoll 4.1.87.Final-linux-aarch_64
io.netty netty-transport-native-epoll 4.1.87.Final-linux-x86_64
io.netty netty-transport-native-kqueue 4.1.87.Final-osx-aarch_64
io.netty netty-transport-native-kqueue 4.1.87.Final-osx-x86_64
io.netty netty-transport-native-unix-common 4.1.87.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx Toplayıcı 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation etkinleştirme 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction transaction-api 1.1
javax.xml.bind jaxb-api 2.2.11
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.12.1
net.java.dev.jna Jna 5.8.0
net.razorvine Turşu 1.3
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv süper csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.13.22
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.9.3
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.9.16
org.apache.ant ant-jsch 1.9.16
org.apache.ant ant-launcher 1.9.16
org.apache.arrow ok biçimi 11.0.0
org.apache.arrow ok-bellek çekirdeği 11.0.0
org.apache.arrow ok-bellek-netty 11.0.0
org.apache.arrow ok-vektör 11.0.0
org.apache.avro avro 1.11.1
org.apache.avro avro-ipc 1.11.1
org.apache.avro avro eşlemeli 1.11.1
org.apache.commons commons-collections4 4.4
org.apache.commons commons-compress 1.21
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.6.1
org.apache.commons commons-text 1.10.0
org.apache.curator curator-client 2.13.0
org.apache.curator küratör çerçevesi 2.13.0
org.apache.curator curator-recipes 2.13.0
org.apache.datasketches datasketches-java 3.1.0
org.apache.datasketches datasketches-memory 2.0.0
org.apache.derby Derby 10.14.2.0
org.apache.hadoop hadoop-client-runtime 3.3.4
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive hive-shims 2.3.9
org.apache.hive hive-storage-api 2.8.1
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.httpcomponents httpclient 4.5.14
org.apache.httpcomponents httpcore 4.4.16
org.apache.ivy sarmaşık 2.5.1
org.apache.logging.log4j log4j-1.2-api 2.19.0
org.apache.logging.log4j log4j-api 2.19.0
org.apache.logging.log4j log4j-core 2.19.0
org.apache.logging.log4j log4j-slf4j2-impl 2.19.0
org.apache.mesos mesos 1.11.0-shaded-protobuf
org.apache.orc orc-core 1.8.2 gölgeli-protobuf
org.apache.orc orc-mapreduce 1.8.2 gölgeli-protobuf
org.apache.orc orc-shims 1.8.2
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm9 gölgeli 4.22
org.apache.yetus hedef kitle ek açıklamaları 0.13.0
org.apache.zookeeper zookeeper 3.6.3
org.apache.zookeeper zookeeper-jute 3.6.3
org.checkerframework dama-qual 3.5.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-derleyici 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.50.v20221201
org.eclipse.jetty jetty-continuation 9.4.50.v20221201
org.eclipse.jetty jetty-http 9.4.50.v20221201
org.eclipse.jetty jetty-io 9.4.50.v20221201
org.eclipse.jetty jetty-jndi 9.4.50.v20221201
org.eclipse.jetty jetty-plus 9.4.50.v20221201
org.eclipse.jetty jetty-proxy 9.4.50.v20221201
org.eclipse.jetty jetty-security 9.4.50.v20221201
org.eclipse.jetty jetty-server 9.4.50.v20221201
org.eclipse.jetty jetty-servlet 9.4.50.v20221201
org.eclipse.jetty jetty-servlets 9.4.50.v20221201
org.eclipse.jetty jetty-util 9.4.50.v20221201
org.eclipse.jetty jetty-util-ajax 9.4.50.v20221201
org.eclipse.jetty jetty-webapp 9.4.50.v20221201
org.eclipse.jetty jetty-xml 9.4.50.v20221201
org.eclipse.jetty.websocket websocket-api 9.4.50.v20221201
org.eclipse.jetty.websocket websocket-client 9.4.50.v20221201
org.eclipse.jetty.websocket websocket-common 9.4.50.v20221201
org.eclipse.jetty.websocket websocket-server 9.4.50.v20221201
org.eclipse.jetty.websocket websocket-servlet 9.4.50.v20221201
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-bulucu 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.36
org.glassfish.jersey.containers jersey-container-servlet-core 2.36
org.glassfish.jersey.core jersey-client 2.36
org.glassfish.jersey.core jersey-common 2.36
org.glassfish.jersey.core jersey-server 2.36
org.glassfish.jersey.inject jersey-hk2 2.36
org.hibernate.validator hibernate-validator 6.1.7.Final
org.javassist javassist 3.25.0-GA
org.jboss.logging jboss günlüğü 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains Ek açıklama -ları 17.0.0
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.8.0
org.mariadb.jdbc mariadb-java-client 2.7.4
org.mlflow mlflow-spark 2.2.0
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.3.8
org.roaringbitmap RoaringBitmap 0.9.39
org.roaringbitmap dolgular 0.9.39
org.rocksdb rocksdbjni 7.8.3
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.15
org.scala-lang scala-library_2.12 2.12.15
org.scala-lang scala-reflect_2.12 2.12.15
org.scala-lang.modules scala-collection-compat_2.12 2.4.3
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt test arabirimi 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp breeze-macros_2.12 2.1.0
org.scalanlp breeze_2.12 2.1.0
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 2.0.6
org.slf4j jul-to-slf4j 2.0.6
org.slf4j slf4j-api 2.0.6
org.threeten threeten-extra 1.7.1
org.tukaani Xz 1.9
org.typelevel algebra_2.12 2.0.1
org.typelevel cats-kernel_2.12 2.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.1.3.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.8.4
org.yaml snakeyaml 1,33
Oro Oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.cryptools AmazonCorrettoCryptoProvider 1.6.1-linux-x86_64
software.amazon.ion ion-java 1.0.2
Stax stax-api 1.0.1