Databricks Runtime 14.2

  • Makale

Aşağıdaki sürüm notları, Apache Spark 3.5.0 tarafından desteklenen Databricks Runtime 14.2 hakkında bilgi sağlar.

Databricks bu görüntüleri Kasım 2023'te yayımladı.

Yeni özellikler ve geliştirmeler

CACHE SELECT artık yoksayılıyor

SQL komutu CACHE SELECT artık geliştirilmiş bir önbelleğe alma algoritmasına göre yoksayılır. Bkz. Azure Databricks'te önbelleğe alma ile performansı iyileştirme.

DML komutlarında bozuk dosya işleme düzeltildi

DML komutları DELETE, UPDATEve MERGE INTO artık ve okuma seçeneklerine ignoreCorruptFilesignoreMissingFilessaygı duymaz. Tabloda okunamayan bir dosyayla karşılaşıldığında, bu seçenekler belirtilmiş olsa bile bu komutlar artık başarısız olur.

Artık paylaşılan kümelerde from_avroSchema Registry ile , to_avro, from_protobufve to_protobuf Python işlevlerini kullanabilirsiniz.

foreachBatch ve StreamingListener destek

Artık ve API'lerini paylaşılan kümelerde Yapılandırılmış Akış ile kullanabilirsiniz foreachBatch()StreamingListener . Bkz . Azure Databricks'te rastgele veri havuzlarına yazmak için foreachBatch kullanma ve Yapılandırılmış Akış sorgularını izleme.

Satır düzeyi eşzamanlılık Genel Kullanılabilir ve varsayılan olarak açıktır

Satır düzeyi eşzamanlılık, satır düzeyindeki değişiklikleri algılayarak eşzamanlı yazma işlemleri arasındaki çakışmaları azaltır. Satır düzeyi eşzamanlılık yalnızca, sıvı kümeleme içeren tabloları içeren bölümleme olmayan tablolarda desteklenir. Silme vektörleri etkinleştirilmiş Delta tablolarında satır düzeyi eşzamanlılık varsayılan olarak etkindir. Bkz . Satır düzeyi eşzamanlılık ile yazma çakışmaları.

Delta Paylaşımı: Alıcılar, silme vektörleriyle paylaşılan tablolarda toplu iş, CDF ve akış sorguları gerçekleştirebilir (Genel Önizleme)

Delta Sharing alıcıları artık silme vektörleri kullanan paylaşılan tablolarda toplu iş, CDF ve akış sorguları gerçekleştirebilir. Databricks Runtime 14.1'de yalnızca toplu sorgular gerçekleştirebilirler. Bkz . Bir paylaşıma silme vektörleri veya sütun eşlemesi olan tablolar ekleme, Silme vektörleri veya sütun eşlemesi etkin tabloları okuma ve Silme vektörleri veya sütun eşlemesi etkinleştirilmiş tabloları okuma.

Unity Kataloğu dış tabloları için sığ kopya (Genel Önizleme)

Artık Unity Kataloğu dış tablolarında sığ kopya kullanabilirsiniz. Bkz . Unity Kataloğu tabloları için basit kopya.

Yeni disk önbelleğe alma atama algoritması

Spark zamanlayıcı artık yeni bir disk önbelleğe alma algoritması kullanıyor. Algoritma, hem başlangıçta hem de küme ölçeklendirme olaylarından sonra daha hızlı atama ile düğümler arasında disk kullanımını ve bölüm atamasını geliştirir. Daha yapışkan önbellek ataması çalıştırmalar arasında tutarlılığı artırır ve yeniden dengeleme işlemleri sırasında taşınan verileri azaltır.

from_avro şema kayıt defteri bağlayıcısı ile şema evrimi için destek ekler

Artık değişen kayıtlar algılandığında işlem hatlarınızın yeniden başlatılmasını etkinleştirebilirsiniz. Daha önce, bağlayıcıda şema evrimi yaşanırsa from_avro , yeni sütunlar döndürür null. Bkz . Akış Avro verilerini okuma ve yazma.

Daha hızlı çok iş parçacıklı istatistik koleksiyonu

DeltaYA DÖNÜŞTÜR veya Iceberg ve Parquet tablolarından kopyalama çalıştırılırken küçük kümelerde istatistik toplama 10 kata kadar daha hızlıdır. Bkz . Delta Lake'e Dönüştürme ve Parquet ve Buzdağı Tablolarını Kopyalama.

DeltaSource'ta Delta dosyalarında aşağı gönderme filtreleri

Daha iyi kullanım için Delta tablolarındaki bölüm filtreleri akış sorguları artık hız sınırlamadan önce Delta'ya gönderiliyor.

Paylaşılan kümelerde Scala skaler kullanıcı tanımlı işlevler desteği (Genel Önizleme)

Artık Paylaşılan erişim moduyla yapılandırılmış Unity Kataloğu özellikli kümelerde Scala skaler kullanıcı tanımlı işlevlerini kullanabilirsiniz. Bkz . Kullanıcı tanımlı skaler işlevler - Scala.

Kitaplık yükseltmeleri

  • Yükseltilen Python kitaplıkları:
    • fastjsonschema 2.18.0 ile 2.19.0
    • 3.12.3 ile 3.12.4 arasında dosya kilidi
    • 1.60.0 ile 1.61.0 arası googleapis-common-protos
  • Yükseltilen R kitaplıkları:
  • Yükseltilen Java kitaplıkları:

Apache Spark

Databricks Runtime 14.2, Apache Spark 3.5.0'ı içerir. Bu sürüm, Databricks Runtime 14.1'de yer alan tüm Spark düzeltmeleri ve iyileştirmelerinin yanı sıra Spark'ta yapılan aşağıdaki ek hata düzeltmelerini ve iyileştirmeleri içerir:

  • [SPARK-45592] [DBRRM-624] "[SC-146977][SQL] InMemoryTableScanExec ile AQE'de doğruluk sorunu"
  • [SPARK-45524] [DBRRM-625] "[SC-146319][PYTHON][SQL] İlk destek f...
  • [SPARK-45433] [DBRRM-621] "[SC-145163][SQL] CSV/JSON şema çıkarımlarını düzeltme...
  • [SPARK-45592] [SC-146977] [SQL] InMemoryTableScanExec ile AQE'de doğruluk sorunu
  • [SPARK-45354] Revert "[SC-143991][SQL] Resolve functions bottom-up"
  • [SPARK-45680] [YALNIZCA TEST] [SASP-2347] [BAĞLAN] Testleri düzeltme
  • [SPARK-45680] [BAĞLAN] Sürüm oturumu
  • [SPARK-43380] [SC-146726] [ES-897115] [SQL] Avro okumada yavaşlama düzeltilir
  • [SPARK-45649] [SC-146742] [SQL] için hazırlama çerçevesini birleştirme OffsetWindowFunctionFrame
  • [SPARK-40820] [SC-146727] [PYTHON] [SQL] Json'dan StructType Oluşturma
  • [SPARK-45620] [SC-146225] [PYTHON] Python UDTF ile ilgili kullanıcıya yönelik API'leri camelCase kullanacak şekilde düzeltme
  • [SPARK-45727] [SC-146978] [SS] Filigran yayma benzetimindeki kullanılmayan haritayı kaldırma
  • [SPARK-45723] [SC-146890] [PYTHON] [BAĞLAN] Katalog yöntemleri pandas dönüştürmeyi önler
  • [SPARK-45574] [SC-146106] [SQL] Tür oluşturma için kısaltma olarak :: söz dizimi ekleyin
  • [SPARK-45670] [SC-146725] [CORE] [3.5] SparkSubmit, K8'lerde dağıtım yaparken desteklemiyor --total-executor-cores
  • [SPARK-45661] [SC-146594] [SQL] [PYTHON] StructType, MapType ve ArrayType içinde toNullable ekleme
  • [SPARK-45524] [SC-146319] [PYTHON] [SQL] Python veri kaynağı okuma API'si için ilk destek
  • [SPARK-45542] [SC-145892] [CORE] şununla değiştir setSafeMode(HdfsConstants.SafeModeAction, boolean)setSafeMode(SafeModeAction, boolean)
  • [SPARK-45652] [SC-146641] [SQL] SPJ: Dinamik filtrelemeden sonra boş giriş bölümlerini işleme
  • [SPARK-45454] [SC-144846] [SQL] Tablonun varsayılan sahibini current_user olarak ayarlayın
  • [SPARK-45554] [SC-146875] [PYTHON] için esnek parametre ekleme assertSchemaEqual
  • [SPARK-45242] [SC-143410] [SQL] CollectMetrics'i sembolik olarak doğrulamak için DataFrame Kimliğini kullanma
  • [SPARK-45674] [SC-146862] [BAĞLAN] [PYTHON] Spark Bağlan'da JVM'ye bağımlı öznitelikler için hata iletisini geliştirin.
  • [SPARK-45646] [SC-146276] [SQL] Hive 2.0'ın öncesinde sabit kodlama süresi değişkenlerini kaldırma
  • [SPARK-43380] [SC-146726] [ES-897115] [SQL] Avro okumada yavaşlama düzeltilir
  • [SPARK-45545] [SC-146484] [CORE] SparkTransportConf oluşturduğumuz her yerde SSLOptions'ı geçirme
  • [SPARK-45641] [SC-146260] [UI] Uygulamanın başlangıç zamanını AllJobsPage'de görüntüleme
  • [SPARK-40154] [SC-146491] [Python] [Docs] Dataframe.cache docstring'de doğru depolama düzeyi
  • [SPARK-45626] [SC-146259] [SQL] _LEGACY_ERROR_TEMP_1055 REQUIRES_SINGLE_PART_NAMESPACE dönüştürme
  • [SPARK-45507] [SC-145900] [SQL] COUNT toplamalarıyla iç içe bağıntılı skaler alt sorgular için doğruluk düzeltmesi
  • [SPARK-45619] [SC-146226] [BAĞLAN] [PYTHON] Gözlemlenen ölçümleri Gözlem nesnesine uygulama
  • [SPARK-45588] [SC-145909] [PROTOBUF] [BAĞLAN] [KÜÇÜK] StreamingForeachBatchHelper için Scaladoc iyileştirmesi
  • [SPARK-45616] [SC-146120] [CORE] ThreadLocals veya SparkSession yaymayan ParVector'ı kullanmaktan kaçının
  • [SPARK-45604] [SC-146105] [SQL] INT64 üzerinde LogicalType denetimi ekleme -> Parquet Vectorized Reader'da DateTime dönüştürme
  • [SPARK-44649] [SC-145891] [SQL] Çalışma Zamanı Filtresi eşdeğer oluşturma yan ifadelerini geçirmeyi destekler
  • [SPARK-41674] [SC-128408] [SQL] Çalışma zamanı filtresi, filtre oluşturma tarafı olarak çok düzeyli karıştırma birleştirme tarafını desteklemelidir
  • [SPARK-45547] [SC-146228] [ML] Yerleşik işlevle Vektörleri Doğrulama
  • [SPARK-45558] [SC-145890] [SS] Durum bilgisi olan akış işleci için meta veri dosyası ekleme
  • [SPARK-45618] [SC-146252] [CORE] BaseErrorHandler'ı kaldırma
  • [SPARK-45638] [SC-146251] [SQL] [Avro] Ondalık dönüştürmenin test kapsamını geliştirme
  • [SPARK-44837] [SC-146020] [SQL] ALTER TABLE ALTER PARTITION sütununu değiştirme hata iletisi
  • [SPARK-45561] [SC-146264] [SQL] MySQLDialect'te TINYINT için uygun dönüştürmeler ekleme
  • [SPARK-45632] [SC-146255] [SQL] AQE'yi etkinleştirirken tablo önbelleği gereksiz ColumnarToRow'un önüne geçmelidir
  • [SPARK-45569] [SC-145932] [SQL] Hata _LEGACY_ERROR_TEMP_2152 adı atayın
  • [SPARK-44784] [SC-141015] [BAĞLAN] SBT testini hermetik hale getirin.
  • [SPARK-45452] [SC-144836] [SQL] API'yi kullanmayı FileSystem.listFiles geliştirme InMemoryFileIndex
  • [SPARK-44735] [SC-146186] [SQL] Eşleşmeyen satıra göre aynı ada sahip sütunlar eklerken uyarı iletisi ekleme
  • [SPARK-45351] [SC-144791] [CORE] Varsayılan değeri ROCKSDB olarak değiştirme spark.shuffle.service.db.backend
  • [SPARK-45553] [SC-145906] [PS] Kullanımdan kaldır assertPandasOnSparkEqual
  • [SPARK-45613] [SC-146022] [CORE] DeterministicLevel'i DeveloperApi Olarak Kullanıma Sunma
  • [SPARK-45549] [SC-145895] [CORE] 'de kullanılmayanları numExistingExecutors kaldırma CoarseGrainedSchedulerBackend
  • [SPARK-45609] [SC-146030] [BAĞLAN] SparkThrowable proto iletisine SqlState ekleme
  • [SPARK-45595] [SC-146037] hata iletisinde sqlstate'i kullanıma sunar
  • [SPARK-45628] [SC-146123] [ML] için geliştirme vector_to_array.mllib.linalg.SparseVector
  • [SPARK-45009] [SC-145884] [SQL] [İZLEYİP] AQE InSubquery testi için birleştirme koşullarında bağıntıyı kapatma
  • [SPARK-45576] [SC-145883] [CORE] ReloadingX509TrustManagerSuite'da gereksiz hata ayıklama günlüklerini kaldırma
  • [SPARK-45485] [SC-145719] [BAĞLAN] Kullanıcı aracısı geliştirmeleri: SPARK_CONNECT_USER_AGENT env değişkenlerini kullanın ve ortama özgü öznitelikler ekleyin
  • [SPARK-45508] [SC-145513] [CORE] Platform'un Java 9+ üzerinde Temizleyici'ye erişebilmesi için "–add-opens=java.base/jdk.internal.ref=ALL-UNNAMED" ekleyin
  • [SPARK-45595] "[SC-146037] SQLSTATE'i hata iletisinde kullanıma sunma"
  • [SPARK-45595] [SC-146037] Hata iletisinde SQLSTATE'i kullanıma sunma
  • [SPARK-45112] Revert "[SC-143259][SQL] UnresolvedFunction ba... kullan
  • [SPARK-45257] [SC-143411] [CORE] Varsayılan olarak etkinleştir spark.eventLog.compress
  • [SPARK-45586] [SC-145899] [SQL] Büyük ifade ağaçları içeren planlar için derleyici gecikme süresini azaltma
  • [SPARK-45517] [SC-145691] [BAĞLAN] [14.x] Hata çerçevesi parametrelerini desteklemek için daha fazla özel durum oluşturucuyu genişletin
  • [SPARK-45581] [SC-145896] SQLSTATE'i zorunlu hale getirin.
  • [SPARK-45427] [SC-145590] [CORE] SSLOptions ve SparkTransportConf'a RPC SSL ayarları ekleme
  • [SPARK-45261] [SC-143357] [CORE] Codec olarak işlemek none için düzeltme EventLogFileWriters
  • [SPARK-45582] [SC-145897] [SS] Çıkış modu akış toplama içinde işleme çağrıldıktan sonra depo örneğinin kullanılmadığından emin olun
  • [SPARK-45562] [SC-145720] [SC-144650] [SQL] XML: 'rowTag' öğesini gerekli bir seçenek yapın
  • [SPARK-45392] [SC-144362] [CORE] [SQL] [SS] şununla değiştir Class.newInstance()Class.getDeclaredConstructor().newInstance()
  • [SPARK-45433] [SC-145163] [SQL] Zaman damgaları belirtilen timestampFormat ile eşleşmediğinde CSV/JSON şema çıkarımı düzeltildi
  • [SPARK-45458] [SC-145011] [SQL] Bit düzeyindeExpressions'da IllegalArgumentException'ı SparkIllegalArgumentException'a Dönüştürme
  • [SPARK-45564] [SC-145735] [SQL] 'BloomFilterAggregate' ifadesiyle 'DataFrameStatFunctions.bloomFilter' öğesini basitleştirin
  • [SPARK-45566] [SC-145777] [PS] Spark üzerinde Pandas API'leri için Pandas benzeri test yardımcı programlarını destekleme
  • [SPARK-45498] [SC-145509] [CORE] İzleme: Eski aşamadan görev tamamlanmasını yoksay...
  • [SPARK-45483] [SC-145152] [BAĞLAN] Connect.functions içindeki işlev gruplarını düzeltme
  • [SPARK-45577] [SC-145781] [PYTHON] UserDefinedPythonTableFunctionAnalyzeRunner'ın adlandırılmış bağımsız değişkenlerden katlanmış değerleri geçirmesini düzeltme
  • [SPARK-45009] [SC-138223] [İZLEYİP] AetherSQLQuerySuite için birleştirme koşullarında bağıntıyı kapatma
  • [SPARK-45415] [SC-145344] RocksDB statestore'da "fallocate" öğesinin seçmeli olarak devre dışı bırakılmasına izin ver
  • [SPARK-45500] [SC-145134] [CORE] [WEBUI] MasterPage'de anormal olarak tamamlanmış sürücülerin sayısını gösterme
  • [SPARK-44120] [SC-144349] [PYTHON] Python 3.12 desteği
  • [SPARK-45439] [SC-145589] [SQL] [UI] LiveStageMetrics.accumIdsToMetricType'ın bellek kullanımını azaltma
  • [SPARK-45565] [SC-145717] [UI] Aşama ayrıntılarındaki görev listesi için gereksiz JSON.stringify ve JSON.parse döngüsü
  • [SPARK-45567] [SC-145718] [BAĞLAN] org.apache.spark.sql.connect.execution.ExecuteGrpcResponseSender#run içindeyse yedekliyi kaldırın
  • [SPARK-45112] [SC-143259] [SQL] SQL Veri Kümesi işlevlerinde UnresolvedFunction tabanlı çözümleme kullanma
  • [SPARK-45486] [SASP-2457] [SC-145612] [BAĞLAN] add_artifact isteği bir kez etkili hale getirme
  • [SPARK-44913] [SC-144326] [SQL] DS V2, sihirli yöntemi olan V2 UDF'nin aşağı gönderimi destekler
  • [SPARK-45538] [SC-145635] [PYTHON] [BAĞLAN]pyspark connect overwrite_partitions hatası
  • [SPARK-45491] [SC-145622] Eksik SQLSTATES 2/2'yi ekleme
  • [SPARK-45009] [SC-145620] [SC-138223] [SQL] Birleştirme koşulunda koşul alt sorgularını düzeltme
  • [SPARK-45377] [SC-144377] [CORE] NettyLogger'da InputStream İşle
  • [SPARK-45248] [SC-143759] [CORE] Spark ui sunucusu için zaman aşımını ayarlama
  • [SPARK-44594] [SC-145611] [SS] Kafka bağlayıcısında yedekli yöntem parametresini kaldırma
  • [SPARK-45539] [SC-145621] [SS] Ekleme modunda akış toplama sorguları için filigran tanımının gerekli olduğunu belirtmek için onay ve günlük ekleme
  • [SPARK-44262] [SC-145639] [SQL] JdbcDialect'e ve getInsertStatement ekleme dropTable
  • [SPARK-45516] [SC-145480] [BAĞLAN] SparkThrowable proto iletisine QueryContext ekleme
  • [SPARK-45310] [SC-145127] [CORE] Devre dışı bırakma geçişi sırasında rapor karıştırma bloğu durumu karıştırma hizmetine uygun olmalıdır
  • [SPARK-45521] [SC-145487] [ML] içinde nnz'nin yeniden hesaplanmasından kaçının VectorAssembler
  • [SPARK-45418] [SC-145485] [SQL] [PYTHON] [BAĞLAN] current_database() sütun diğer adını current_schema() olarak değiştirme
  • [SPARK-45116] [SC-145142] [SQL] JdbcDialect parametresi için açıklama ekleme createTable
  • [SPARK-45495] [SC-145529] [çekirdek] Dinamik ayırma devre dışı bırakıldığında k8s kümesi için destek aşaması düzeyi görev kaynak profili
  • [SPARK-45487] [SC-145559] SQLSTATEs ve geçici hataları düzeltme
  • [SPARK-45505] [SC-145550] [PYTHON] Yeniden kullanılabilir hale getirmek için analyzeInPython'u yeniden düzenleme
  • [SPARK-45132] [SC-145425] [SQL] İşlev çağırma için TANıMLAYıCı düzelt
  • [SPARK-45213] [SC-145020] [SQL] Hata _LEGACY_ERROR_TEMP_2151 adı atayın
  • [SPARK-45416] [SC-145126] [BAĞLAN] Ok sonuçlarının tutarlılığını denetleme
  • [SPARK-45163] [SC-143386] [SQL] UNSUPPORTED_VIEW_OPERATION Birleştir & UNSUPPORTED_TABLE_OPERATION ve bazı sorunları düzelt
  • [SPARK-45421] [SC-144814] [SQL] InlineCTE üzerinde Catch AnalysisException
  • [SPARK-43664] [SC-145404] [BAĞLAN] [PS] Spark Bağlan'da Pandas-on-Spark nesnesi için özel durum ps.sql oluşturma.
  • [SPARK-45402] [SC-145371] [SQL] [PYTHON] Önceki 'analiz' sonucunu kullanmak için 'değerlendirme' ve 'sonlandırma' yöntemleri için UDTF API'sini ekleyin
  • [SPARK-36112] [SC-67885] [SQL] DecorrelateInnerQuery çerçevesi kullanılarak bağıntılı EXISTS ve IN alt sorgularını destekleme
  • [SPARK-45383] [SC-144929] [SQL] Mevcut olmayan tabloyla zaman yolculuğu için hata iletisini düzeltme
  • [SPARK-43254] [SC-143318] [SQL] Hata _LEGACY_ERROR_TEMP_2018 bir ad atayın
  • [SPARK-45204] [SC-145167] [BAĞLAN] Spark Bağlan Planner'a isteğe bağlı ExecuteHolder ekleme
  • [SPARK-45451] [SC-145144] [SQL] Veri kümesi önbelleğinin varsayılan depolama düzeyini yapılandırılabilir hale getirme
  • [SPARK-45192] [SC-143194] [UI] Graphviz edge için süresi geçmiş çizgiinterpolate parametresi düzelt
  • [SPARK-45467] [SC-145146] [CORE] şununla değiştir Proxy.getProxyClass()Proxy.newProxyInstance().getClass
  • [SPARK-45397] [SC-145139] [ML] [BAĞLAN] Dizi derleyicisi özellik transformatörü ekleme
  • [SPARK-44855] [SC-145226] [BAĞLAN] ExecuteResponseObserver'a ExecuteGrpcResponseSender eklemeye yönelik küçük ayarlamalar
  • [SPARK-45398] [SC-144796] [SQL] İfadenin Like sonuna sql() ekleme ESCAPE
  • [SPARK-45494] [SC-145129] [CORE] [PYTHON] PythonWorkerUtils için bayt dizisini okumak/yazmak için yardımcı işlevleri tanıtma
  • [SPARK-45464] [SC-145125] [CORE] Ağ ipliği dağıtım derlemesi düzelt
  • [SPARK-45461] [SC-144851] [CORE] [SQL] [MLLIB] Depolama Level için eşleyici tanıtma
  • [SPARK-45450] [SC-145009] [PYTHON] PEP8'e göre içeri aktarmaları düzeltme: pyspark.pandas ve pyspark (çekirdek)
  • [SPARK-45475] [SC-145018] [SQL] JdbcUtils içinde RDD.foreachPartition yerine DataFrame.foreachPartition kullanır
  • [SPARK-45271] [SC-143778] [SQL] QueryCompilationErrors'da _LEGACY_ERROR_TEMP_1113 TABLE_OPERATION birleştirin ve kullanılmayan bazı yöntemleri silin
  • [SPARK-45449] [SC-145013] [SQL] JDBC Tablosuyla Önbellek GeçersizLeştirme Sorunu
  • [SPARK-45473] [SC-145017] [SQL] RoundBase için yanlış hata iletisi düzeltilir
  • [SPARK-43299] [SC-145022] [SS] [BAĞLAN] Scala İstemcisinde StreamingQueryException'ı Dönüştürme
  • [SPARK-45474] [SC-145014] [CORE] [WEBUI] MasterPage JSON API'sinde üst düzey filtrelemeyi destekleme
  • [SPARK-45205] [SC-145012] [SQL] Birden çok işin tetiklenmesinden kaçınmak için yineleyici yöntemlerini geçersiz kılmak için CommandResultExec.
  • [SPARK-45472] [SC-145004] [SS] RocksDB State Store'un denetim noktası yolunun varlığını yeniden denetlemesi gerekmez
  • [SPARK-45470] [SC-145010] [SQL] Hive orc sıkıştırma türünün dize değerini yapıştırmaktan kaçının
  • [SPARK-45448] [SC-144829] [PYTHON] PEP8'e göre içeri aktarmaları düzeltme: pyspark.testing, pyspark.mllib, pyspark.resource ve pyspark.streaming
  • [SPARK-45446] [SC-144828] [PYTHON] PEP8'e göre içeri aktarmaları düzeltme: pyspark.errors ve pyspark.ml
  • [SPARK-45239] [SC-144832] [BAĞLAN] Varsayılan spark.connect.jvmStacktrace.maxSize değerini azaltın
  • [SPARK-45436] [SC-144831] [PYTHON] [BAĞLAN] DataFrame yöntemleri aynı oturumu denetle
  • [SPARK-45413] [SC-144847] [CORE] Drop LevelDB desteği hazırlama için uyarı ekleme
  • [SPARK-45462] [SC-144848] [CORE] [WEBUI] Göster DurationApplicationPage
  • [SPARK-44527] [SC-144855] [SQL] maxRows değeri 0 ise ScalarSubquery değerini null ile değiştirin
  • [SPARK-45401] [SC-144854] [PYTHON] UDTF arabirimine yeni bir yöntem cleanup ekleme
  • [SPARK-43704] [SC-144849] [BAĞLAN] [PS] Için destek MultiIndexto_series()
  • [SPARK-45424] [SC-144888] [SQL] Yalnızca ön ek eşleşmesi olduğunda TimestampFormatter isteğe bağlı ayrıştırma sonuçları döndüren düzeltme
  • [SPARK-45441] [SC-144833] [PYTHON] PythonWorkerUtils için daha fazla yardımcı işlev tanıtın
  • [SPARK-45412] [SC-144803] [PYTHON] [BAĞLAN] 'da planı ve oturumu doğrulama DataFrame.__init__
  • [SPARK-45408] [SC-144810] [CORE] TransportConf'a RPC SSL ayarları ekleme
  • [SPARK-45432] [SC-144818] [CORE] Kullanım dışı bırakılan Hadoop-2 LocatedFileStatus oluşturucuyu kaldırma
  • [SPARK-45434] [SC-144819] [ML] [BAĞLAN] LogisticRegression eğitim etiketlerini denetler
  • [SPARK-45420] [SC-144808] [SQL] [PYTHON] [BAĞLAN] PySpark'a DataType.fromDDL ekleme
  • [SPARK-45406] [SC-144793] [PYTHON] [BAĞLAN] DataFrame oluşturucusundan silme schema
  • [SPARK-45404] [SC-144799] [CORE] Destek AWS_ENDPOINT_URL env değişkeni
  • [SPARK-43620] [SC-144792] [BAĞLAN] [PS] Pandas API'lerinin düzeltilmesi desteklenmeyen özelliklere bağlıdır
  • [SPARK-45354] [SC-143991] [SQL] İşlevleri alttan yukarı çözümleme
  • [SPARK-45394] [SASP-1480] [SC-144712] [PYTHON] [BAĞLAN] Yapıt API'sine yeniden denemeler ekleyin. Hata işlemeyi geliştirin ([SPARK-45093] izlemesi).
  • [SPARK-45120] [SC-142780] [SPARK-45150] [UI] v3'ten v7(v7.8.5) sürümüne d3'e yükseltme ve kullanıcı arabiriminde API değişikliklerini uygulama
  • [SPARK-44838] [SC-143983] [SQL] raise_error iyileştirmesi
  • [SPARK-45312] [SC-143754] [SQL] [UI] Yürütme sayfasında plan svg'sini görüntüleme/gizleme desteği iki durumlu düğmesi
  • [SPARK-45378] [SC-144448] [CORE] ManagedBuffer'a convertToNettyForSsl ekleme
  • [SPARK-44762] [SC-144338] [BAĞLAN] [CORE] Spark için Doc Bağlan.addJobTag ve Bağlan SparkSession.addTag
  • [SPARK-45383] Çözümlenmemiş RelationTimeTravel'ı düzgün bir şekilde işleme
  • [SPARK-45347] [SC-144512] [SQL] [BAĞLAN] FetchErrorDetailsResponse'a SparkThrowable ekleme
  • [SPARK-45012] [SC-141512] [SQL] CheckAnalysis, AnalysisException'da inlined plan oluşturmalı
  • [SPARK-45359] [SC-144336] [PYTHON] [BAĞLAN] DataFrame.{columns, colRegex, explain} plan geçersiz olduğunda özel durumlar tetiklemelidir
  • [SPARK-45227] [SC-144233] [CORE] CoarseGrainedExecutorBackend ile küçük bir iş parçacığı güvenliği sorunu düzeltildi
  • [SPARK-45266] [SC-144171] [PYTHON] Tablo bağımsız değişkenleri kullanıldığında yanal birleştirmeyi geciktirmek için ResolveFunctions çözümleyicisi kuralını yeniden düzenleyin
  • [SPARK-45266] "[SC-144171][PYTHON] Tablo bağımsız değişkenleri kullanıldığında yan yana birleştirmeyi geciktirmek için ResolveFunctions çözümleyici kuralını yeniden düzenleyin"
  • [SPARK-45371] [SC-144389] [BAĞLAN] Spark Bağlan Scala İstemcisi'nde gölgelendirme sorunlarını düzeltme
  • [SPARK-45057] [SC-144214] [CORE] keepReadLock yanlış olduğunda okuma kilidi almaktan kaçının
  • [SPARK-45385] [SC-144357] [SQL] Kullanımdan kaldır spark.sql.parser.escapedStringLiterals
  • [SPARK-45340] [SC-143917] [SQL] SQL yapılandırmasını kaldırma spark.sql.hive.verifyPartitionPath
  • [SPARK-45266] [SC-144171] [PYTHON] Tablo bağımsız değişkenleri kullanıldığında yanal birleştirmeyi geciktirmek için ResolveFunctions çözümleyicisi kuralını yeniden düzenleyin
  • [SPARK-45362] [SC-144198] [PYTHON] Python UDTF 'eval' yöntemi tarafından tüketilmeden önce PARTITION BY ifadelerini yansıtma
  • [SPARK-45346] [SC-143925] [SQL] Şema birleştirildiğinde parquet şema çıkarımı büyük/küçük harfe duyarlı bayrağı dikkate almalıdır
  • [SPARK-45341] [SC-143933] [CORE] Java 17 ile başarıyla çalıştırabilmek sbt doc için KVStore.java açıklamalarındaki başlık düzeyini düzeltin
  • [SPARK-45334] [SC-143914] [SQL] ParquetSchemaConverter'da yanıltıcı açıklamayı kaldırma
  • [SPARK-45337] [SC-143932] [CORE] Scala 2.12 denetimini kaldırmak için yeniden düzenleme AbstractCommandBuilder#getScalaVersion
  • [SPARK-45329] [SC-143918] [PYTHON] [BAĞLAN] DataFrame yöntemleri pandas dönüştürmeyi atlar
  • [SPARK-43662] [SC-143923] [PS] [BAĞLAN] Spark Bağlan'da destek merge_asof
  • [SPARK-44126] [SC-143751] [CORE] Hedef yürütücü kullanımdan kaldırıldığında karıştırma geçiş hatası sayısı artmamalıdır
  • [SPARK-44550] [SC-119768] [SQL] ANSI altında için null IN (empty list) doğruluk düzeltmelerini etkinleştirme
  • [SPARK-45316] [SC-143783] [CORE] [SQL] ve'e ignoreCorruptFiles/ignoreMissingFilesHadoopRDD yeni parametreler ekleme NewHadoopRDD
  • [SPARK-45093] [SC-143414] [BAĞLAN] [PYTHON] addArtifacts sorgusu için hata raporlama
  • [SPARK-44756] [SC-143787] [CORE] RetryingBlockTransferor yeniden denemeyi başlatamadığında yürütücü kilitleniyor
  • [SPARK-45333] [SC-143768] [CORE] spark.eventLog.buffer.kb ile ilgili bir birim hatasını düzeltme
  • [SPARK-45317] [SC-143750] [SQL] [BAĞLAN] Özel durumların yığın izlemelerinde null dosya adını işleme
  • [SPARK-45191] [SC-143407] [SQL] InMemoryTableScanExec simpleStringWithNodeId sütunlu bilgiler ekler
  • [SPARK-45235] [SC-143314] [BAĞLAN] [PYTHON] Eşleme ve dizi parametrelerini destekleme ölçütü: sql()
  • [SPARK-45138] [SC-143309] [SS] DFS'ye denetim noktası oluşturma işlemi başarısız olduğunda yeni bir hata sınıfı tanımlayın ve bunu uygulayın
  • [SPARK-45297] [SC-143644] [SQL] SPARK-31827'ye eklenen tarih biçimlendirici için geçici çözümü kaldırma
  • [SPARK-44345] [SC-143593] [CORE] unknown shuffle map output Karıştırma geçişi etkinse WARN'a düşük günlük düzeyi
  • [SPARK-44463] [SC-143251] [SS] [BAĞLAN] Python çalışanlarının Bağlan hata işlemeyi geliştirme
  • [SPARK-45207] [SC-143603] [SQL] [BAĞLAN] Scala İstemcisi için Hata Zenginleştirmesi Uygulama
  • [SPARK-45240] [SC-143602] [SQL] [BAĞLAN] Python İstemcisi için Hata Zenginleştirmesi Uygulama
  • [SPARK-45216] [SC-143288] [SQL] Belirlenemeyen dengeli Veri Kümesi API'lerini düzeltme
  • [SPARK-45251] [SC-143419] [BAĞLAN] FetchErrorDetails için client_type alanı ekleme
  • [SPARK-45137] [SC-143001] [BAĞLAN] Parametreli olarak eşleme/dizi parametrelerini destekleme sql()
  • [SPARK-45224] [SC-143257] [PYTHON] w/ map ve dizi örneklerini parametresi olarak ekleme sql()
  • [SPARK-44622] [SC-143205] [SQL] [BAĞLAN] FetchErrorDetails RPC Uygulama
  • [SPARK-45178] [SC-136089] Sarmalayıcı kullanmak yerine desteklenmeyen kaynaklarla Trigger.AvailableNow için tek bir toplu iş yürütmeye geri dönüş
  • [SPARK-44823] [14.x] [SC-142979] [PYTHON] Siyahı 23.9.1'e güncelleştirme ve düzeltme denetimi
  • [SPARK-45078] [SC-142954] [SQL] ImplicitCastInputTypes'ın çalışmaması sorununu düzeltme array_insert
  • [SPARK-44579] [SC-138428] [SQL] SQLExecution'da İptalDe Destek Kesintisi
  • [SPARK-45252] [SC-143371] [CORE] Başarıyla yürütülmek sbt doc için açıklamalardaki büyüktür/küçüktür simgelerinden kaçış
  • [SPARK-45189] [SC-142973] [SQL] TableIdentifier'dan UnresolvedRelation oluşturma işlemi katalog alanını içermelidir
  • [SPARK-45229] [SC-143254] [CORE] [UI] MasterPage'de GÖNDERİLEN durumunda bekleyen sürücülerin sayısını göster
  • [SPARK-43453] "[SC-143135][PS] için concatne zaman axis=1 olduğunu namesMultiIndex yoksay"

Databricks ODBC/JDBC sürücü desteği

Databricks, son 2 yılda yayımlanan ODBC/JDBC sürücülerini destekler. Lütfen son yayınlanan sürücüleri indirin ve yükseltin (ODBC'yi indirin, JDBC'yi indirin).

Sistem ortamı

  • İşletim Sistemi: Ubuntu 22.04.3 LTS
  • Java: Zulu 8.72.0.17-CA-linux64
  • Scala: 2.12.15
  • Python: 3.10.12
  • R: 4.3.1
  • Delta Gölü: 3.0.0

Yüklü Python kitaplıkları

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
anyio 3.5.0 argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0
asttokens 2.0.5 attrs 22.1.0 geri arama 0.2.0
beautifulsoup4 4.11.1 Siyah 22.6.0 Çamaşır suyu 4.1.0
yanıp sönen 1.4 boto3 1.24.28 botocore 1.27.96
sertifikalı 2022.12.7 cffi 1.15.1 chardet 4.0.0
charset-normalizer 2.0.4 tıklama 8.0.4 Comm 0.1.2
konturlu 1.0.5 Şifreleme 39.0.1 Cycler 0.11.0
Cython 0.29.32 databricks-sdk 0.1.6 dbus-python 1.2.18
hata ayıklama 1.6.7 Dekoratör 5.1.1 defusedxml 0.7.1
daistlib 0.3.7 docstring-to-markdown 0,11 Entrypoints 0.4
Yürütme 0.8.3 modellere genel bakış 1.1.1 fastjsonschema 2.19.0
dosya kilidi 3.12.4 fonttools 4.25.0 googleapis-common-protos 1.61.0
grpcio 1.48.2 grpcio-status 1.48.1 httplib2 0.20.2
ıdna 3.4 importlib-metadata 4.6.4 ipykernel 6.25.0
ipython 8.14.0 ipython-genutils 0.2.0 ipywidgets 7.7.2
Jedi 0.18.1 Jeepney 0.7.1 Jinja2 3.1.2
jmespath 0.10.0 joblib 1.2.0 jsonschema 4.17.3
jupyter-client 7.3.4 jupyter-server 1.23.4 jupyter_core 5.2.0
jupyterlab-pygments 0.1.2 jupyterlab pencere öğeleri 1.0.0 Anahtarlık 23.5.0
kiwisolver 1.4.4 başlatma çubuğu 1.10.16 lazr.restfulclient 0.14.4
lazr.uri 1.0.6 lxml 4.9.1 İşaretlemeyi Kasa 2.1.1
matplotlib 3.7.0 matplotlib-inline 0.1.6 Mccabe 0.7.0
yanlış 0.8.4 more-itertools 8.10.0 mypy uzantıları 0.4.3
nbclassic 0.5.2 nbclient 0.5.13 nbconvert 6.5.4
nbformat 5.7.0 nest-asyncio 1.5.6 nodeenv 1.8.0
not defteri 6.5.2 notebook_shim 0.2.2 numpy 1.23.5
oauthlib 3.2.0 Ambalaj 22.0 pandas 1.5.3
pandocfilters 1.5.0 parso 0.8.3 pathspec 0.10.3
Patsy 0.5.3 pexpect 4.8.0 pickleshare 0.7.5
Yastık 9.4.0 Pip 22.3.1 platformdirs 2.5.2
çizim 5.9.0 takılmış 1.0.0 prometheus-client 0.14.1
prompt-toolkit 3.0.36 protobuf 4.24.0 psutil 5.9.0
psycopg2 2.9.3 ptyprocess 0.7.0 saf değerlendirme 0.2.2
serçe 8.0.0 pyarrow düzeltmesi 0.4 pycparser 2.21
pydantic 1.10.6 pyflakes 3.1.0 Pygments 2.11.2
PyGObject 3.42.1 PyJWT 2.3.0 pyodbc 4.0.32
pyparsing 3.0.9 pyright 1.1.294 pirsistent 0.18.0
python-dateutil 2.8.2 python-lsp-jsonrpc 1.1.1 python-lsp-server 1.8.0
pytoolconfig 1.2.5 pytz 2022.7 pyzmq 23.2.0
istekler 2.28.1 Ip 1.7.0 s3transfer 0.6.2
scikit-learn 1.1.1 scipy 1.10.0 Sinan 0.12.2
Gizli dizi Depolama 3.3.1 Send2Trash 1.8.0 kurulum araçları 65.6.3
Altı 1.16.0 sniffio 1.2.0 soupsieve 2.3.2.post1
ssh-import-id 5.11 stack-data 0.2.0 statsmodeller 0.13.5
Azim 8.1.0 terminado 0.17.1 threadpoolctl 2.2.0
tinycss2 1.2.1 tokenize-rt 4.2.1 tomli 2.0.1
Kasırga 6.1 traitlets 5.7.1 typing_extensions 4.4.0
ujson 5.4.0 katılımsız yükseltmeler 0,1 urllib3 1.26.14
virtualenv 20.16.7 wadllib 1.3.6 wcwidth 0.2.5
webencodings 0.5.1 websocket-client 0.58.0 whatthepatch 1.0.2
Tekerlek 0.38.4 widgetsnbextension 3.6.1 yapf 0.33.0
zipp 1.0.0

Yüklü R kitaplıkları

R kitaplıkları, 2023-02-10'da Posit Paket Yöneticisi CRAN anlık görüntüsünden yüklenir.

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
oku seçin 12.0.1 askpass 1.1 assertthat 0.2.1
Backports 1.4.1 temel 4.3.1 base64enc 0.1-3
bit 4.0.5 bit64 4.0.5 blob 1.2.4
başlatma 1.3-28 Brew 1.0-8 Brio 1.1.3
Süpürge 1.0.5 bslib 0.5.0 önbellek 1.0.8
çağıran 3.7.3 şapka işareti 6.0-94 cellranger 1.1.0
chron 2.3-61 class 7.3-22 cli 3.6.1
küçük resim 0.8.0 saat 0.7.0 cluster 2.1.4
codetools 0.2-19 renk alanı 2.1-0 commonmark 1.9.0
derleyicisi 4.3.1 config 0.3.1 Çakışan 1.2.0
cpp11 0.4.4 Crayon 1.5.2 kimlik bilgileri 1.3.2
Curl 5.0.1 data.table 1.14.8 veri kümeleri 4.3.1
DBİ 1.1.3 dbplyr 2.3.3 Desc 1.4.2
geliştirici araçları 2.4.5 Diyagram 1.6.5 diffobj 0.3.5
Özet 0.6.33 aşağı aydınlatma 0.4.3 dplyr 1.1.2
dtplyr 1.3.1 e1071 1.7-13 üç nokta 0.3.2
değerlendir 0.21 fansi 1.0.4 farver 2.1.1
fastmap 1.1.1 fontawesome 0.5.1 forcats 1.0.0
foreach 1.5.2 Yabancı 0.8-82 Forge 0.2.0
Fs 1.6.2 Gelecek 1.33.0 future.apply 1.11.0
Gargara 1.5.1 Generics 0.1.3 gert 1.9.2
ggplot2 3.4.2 gh 1.4.0 gitcreds 0.1.2
glmnet 4.1-7 Globals 0.16.2 Tutkal 1.6.2
googledrive 2.1.1 googlesheets4 1.1.1 Gower 1.0.1
grafikler 4.3.1 grDevices 4.3.1 Kılavuz 4.3.1
gridExtra 2.3 gsubfn 0.7 gtable 0.3.3
sabit hat 1.3.0 Haven 2.5.3 daha yüksek 0.10
Hms 1.1.3 htmltools 0.5.5 htmlwidgets 1.6.2
httpuv 1.6.11 httr 1.4.6 httr2 0.2.3
Kimlik 1.0.1 ını 0.3.1 ipred 0.9-14
isoband 0.2.7 Yineleyicilerde 1.0.14 jquerylib 0.1.4
jsonlite 1.8.7 KernSmooth 2.23-21 örgü örme 1,43
Etiketleme 0.4.2 Sonra 1.3.1 Kafes 0.21-8
Lav 1.7.2.1 yaşam döngüsü 1.0.3 dinleyici 0.9.0
lubridate 1.9.2 magrittr 2.0.3 markdown 1.7
MASS 7.3-60 Matris 1.5-4.1 not defteri 2.0.1
yöntemler 4.3.1 mgcv 1.8-42 Mıme 0,12
miniUI 0.1.1.1 ModelMetrics 1.2.2.2 modelleyici 0.1.11
munsell 0.5.0 nlme 3.1-162 nnet 7.3-19
numDeriv 2016.8-1.1 openssl 2.0.6 parallel 4.3.1
paralel olarak 1.36.0 Ayağı 1.9.0 pkgbuild 1.4.2
pkgconfig 2.0.3 pkgdown 2.0.7 pkgload 1.3.2.1
plogr 0.2.0 plyr 1.8.8 Övgü 1.0.0
prettyunits 1.1.1 Yordam 1.18.4 processx 3.8.2
prodlim 2023.03.31 profvis 0.3.8 ilerleme 1.2.2
ilerleme durumu 0.13.0 Söz 1.2.0.1 Proto 1.0.0
Proxy 0.4-27 Ps 1.7.5 purrr 1.0.1
r2d3 0.2.6 R6 2.5.1 ragg 1.2.5
randomForest 4.7-1.1 rappdirs 0.3.3 rcmdcheck 1.4.0
RColorBrewer 1.1-3 Rcpp 1.0.11 RcppEigen 0.3.3.9.3
readr 2.1.4 readxl 1.4.3 yemek tarifleri 1.0.6
Rövanş 1.0.1 rematch2 2.1.2 Kumanda 2.4.2
reprex 2.0.2 yeniden şekillendirme2 1.4.4 rlang 1.1.1
rmarkdown 2.23 RODBC 1.3-20 roxygen2 7.2.3
rpart 4.1.19 rprojroot 2.0.3 Rserve 1.8-11
RSQLite 2.3.1 rstudioapi 0.15.0 ters çevirmeler 2.1.2
rvest 1.0.3 Sass 0.4.6 Terazi 1.2.1
seçici 0.4-2 sessioninfo 1.2.2 Şekil 1.4.6
Parlak 1.7.4.1 sourcetools 0.1.7-1 sparklyr 1.8.1
Kayma 7.3-15 Splines 4.3.1 sqldf 0.4-11
KAREM 2021.1 Istatistik 4.3.1 istatistikler4 4.3.1
stringi 1.7.12 dizeleyici 1.5.0 Hayatta kalma 3.5-5
sys 3.4.2 systemfonts 1.0.4 tcltk 4.3.1
test edin 3.1.10 metin şekillendirme 0.3.6 Türk 3.2.1
derleyici 1.3.0 tidyselect 1.2.0 tidyverse 2.0.0
zaman değişimi 0.2.0 timeDate 4022.108 tinytex 0,45
araçlar 4.3.1 tzdb 0.4.0 urlchecker 1.0.1
usethis 2.2.2 utf8 1.2.3 Yardımcılar 4.3.1
uuid 1.1-0 vctr'lar 0.6.3 viridisLite 0.4.2
Vroom 1.6.3 Waldo 0.5.1 Bıyık 0.4.1
withr 2.5.0 xfun 0,39 xml2 1.3.5
xopen 1.0.0 xtable 1.8-4 yaml 2.3.7
Zip 2.3.0

Yüklü Java ve Scala kitaplıkları (Scala 2.12 küme sürümü)

Grup Kimliği Yapıt Kimliği Sürüm
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.12.390
com.amazonaws aws-java-sdk-cloudformation 1.12.390
com.amazonaws aws-java-sdk-cloudfront 1.12.390
com.amazonaws aws-java-sdk-cloudhsm 1.12.390
com.amazonaws aws-java-sdk-cloudsearch 1.12.390
com.amazonaws aws-java-sdk-cloudtrail 1.12.390
com.amazonaws aws-java-sdk-cloudwatch 1.12.390
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.390
com.amazonaws aws-java-sdk-codedeploy 1.12.390
com.amazonaws aws-java-sdk-cognitoidentity 1.12.390
com.amazonaws aws-java-sdk-cognitosync 1.12.390
com.amazonaws aws-java-sdk-config 1.12.390
com.amazonaws aws-java-sdk-core 1.12.390
com.amazonaws aws-java-sdk-datapipeline 1.12.390
com.amazonaws aws-java-sdk-directconnect 1.12.390
com.amazonaws aws-java-sdk-directory 1.12.390
com.amazonaws aws-java-sdk-dynamodb 1.12.390
com.amazonaws aws-java-sdk-ec2 1.12.390
com.amazonaws aws-java-sdk-ecs 1.12.390
com.amazonaws aws-java-sdk-efs 1.12.390
com.amazonaws aws-java-sdk-elasticache 1.12.390
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.390
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.390
com.amazonaws aws-java-sdk-elastictranscoder 1.12.390
com.amazonaws aws-java-sdk-emr 1.12.390
com.amazonaws aws-java-sdk-glacier 1.12.390
com.amazonaws aws-java-sdk-glue 1.12.390
com.amazonaws aws-java-sdk-iam 1.12.390
com.amazonaws aws-java-sdk-importexport 1.12.390
com.amazonaws aws-java-sdk-kinesis 1.12.390
com.amazonaws aws-java-sdk-kms 1.12.390
com.amazonaws aws-java-sdk-lambda 1.12.390
com.amazonaws aws-java-sdk-logs 1.12.390
com.amazonaws aws-java-sdk-machinelearning 1.12.390
com.amazonaws aws-java-sdk-opsworks 1.12.390
com.amazonaws aws-java-sdk-rds 1.12.390
com.amazonaws aws-java-sdk-redshift 1.12.390
com.amazonaws aws-java-sdk-route53 1.12.390
com.amazonaws aws-java-sdk-s3 1.12.390
com.amazonaws aws-java-sdk-ses 1.12.390
com.amazonaws aws-java-sdk-simpledb 1.12.390
com.amazonaws aws-java-sdk-simpleworkflow 1.12.390
com.amazonaws aws-java-sdk-sns 1.12.390
com.amazonaws aws-java-sdk-sqs 1.12.390
com.amazonaws aws-java-sdk-ssm 1.12.390
com.amazonaws aws-java-sdk-storagegateway 1.12.390
com.amazonaws aws-java-sdk-sts 1.12.390
com.amazonaws aws-java-sdk-support 1.12.390
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.390
com.amazonaws jmespath-java 1.12.390
com.clearspring.analytics akış 2.9.6
com.databricks Rserve 1.8-3
com.databricks databricks-sdk-java 0.7.0
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo gölgeli 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml Classmate 1.3.4
com.fasterxml.jackson.core jackson-annotations 2.15.2
com.fasterxml.jackson.core jackson-core 2.15.2
com.fasterxml.jackson.core jackson-databind 2.15.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.15.2
com.fasterxml.jackson.datatype jackson-datatype-joda 2.15.2
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.15.1
com.fasterxml.jackson.module jackson-module-paranamer 2.15.2
com.fasterxml.jackson.module jackson-module-scala_2.12 2.15.2
com.github.ben-manes.caffeine Kafein 2.9.3
com.github.fommil jniloader 1.1
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java 1.1-natives
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java 1.1-natives
com.github.fommil.netlib netlib-native_ref-linux-x86_64 1.1-natives
com.github.fommil.netlib netlib-native_system-linux-x86_64 1.1-natives
com.github.luben zstd-jni 1.5.5-4
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.10.1
com.google.crypto.tink Tink 1.9.0
com.google.errorprone error_prone_annotations 2.10.0
com.google.flatbuffers flatbuffers-java 1.12.0
com.google.guava Guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.helger Profiler 1.1.1
com.jcraft jsch 0.1.55
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.microsoft.sqlserver mssql-jdbc 11.2.2.jre8
com.ning compress-lzf 1.1.2
com.sun.mail javax.mail 1.5.2
com.sun.xml.bind jaxb-core 2.2.11
com.sun.xml.bind jaxb-impl 2.2.11
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.uber h3 3.7.3
com.univocity univocity-ayrıştırıcıları 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.5.0
commons-codec commons-codec 1.16.0
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.5
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.13.0
commons-lang commons-lang 2,6
commons-logging commons-logging 1.1.3
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 3.0.3
dev.ludovic.netlib Blas 3.0.3
dev.ludovic.netlib lapack 3.0.3
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0.25
io.delta delta-sharing-client_2.12 1.0.2
io.dropwizard.metrics metrics-annotation 4.2.19
io.dropwizard.metrics metrics-core 4.2.19
io.dropwizard.metrics metrics-graphite 4.2.19
io.dropwizard.metrics metrics-healthchecks 4.2.19
io.dropwizard.metrics metrics-jetty9 4.2.19
io.dropwizard.metrics metrics-jmx 4.2.19
io.dropwizard.metrics metrics-json 4.2.19
io.dropwizard.metrics metrics-jvm 4.2.19
io.dropwizard.metrics metrics-servlets 4.2.19
io.netty netty-all 4.1.96.Final
io.netty netty-buffer 4.1.96.Final
io.netty netty-codec 4.1.96.Final
io.netty netty-codec-http 4.1.96.Final
io.netty netty-codec-http2 4.1.96.Final
io.netty netty-codec-socks 4.1.96.Final
io.netty netty-common 4.1.96.Final
io.netty netty-handler 4.1.96.Final
io.netty netty-handler-proxy 4.1.96.Final
io.netty netty-resolver 4.1.96.Final
io.netty netty-tcnative-boringssl-static 2.0.61.Final-linux-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-linux-x86_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-osx-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-osx-x86_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-windows-x86_64
io.netty netty-tcnative-classes 2.0.61.Final
io.netty netty-transport 4.1.96.Final
io.netty netty-transport-classes-epoll 4.1.96.Final
io.netty netty-transport-classes-kqueue 4.1.96.Final
io.netty netty-transport-native-epoll 4.1.96.Final
io.netty netty-transport-native-epoll 4.1.96.Final-linux-aarch_64
io.netty netty-transport-native-epoll 4.1.96.Final-linux-x86_64
io.netty netty-transport-native-kqueue 4.1.96.Final-osx-aarch_64
io.netty netty-transport-native-kqueue 4.1.96.Final-osx-x86_64
io.netty netty-transport-native-unix-common 4.1.96.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx Toplayıcı 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation etkinleştirme 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction transaction-api 1.1
javax.xml.bind jaxb-api 2.2.11
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.12.1
net.java.dev.jna Jna 5.8.0
net.razorvine Turşu 1.3
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv süper csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.9.3
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.9.16
org.apache.ant ant-jsch 1.9.16
org.apache.ant ant-launcher 1.9.16
org.apache.arrow ok biçimi 12.0.1
org.apache.arrow ok-bellek çekirdeği 12.0.1
org.apache.arrow ok-bellek-netty 12.0.1
org.apache.arrow ok-vektör 12.0.1
org.apache.avro avro 1.11.2
org.apache.avro avro-ipc 1.11.2
org.apache.avro avro eşlemeli 1.11.2
org.apache.commons commons-collections4 4.4
org.apache.commons commons-compress 1.23.0
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.6.1
org.apache.commons commons-text 1.10.0
org.apache.curator curator-client 2.13.0
org.apache.curator küratör çerçevesi 2.13.0
org.apache.curator curator-recipes 2.13.0
org.apache.datasketches datasketches-java 3.1.0
org.apache.datasketches datasketches-memory 2.0.0
org.apache.derby Derby 10.14.2.0
org.apache.hadoop hadoop-client-runtime 3.3.6
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive hive-shims 2.3.9
org.apache.hive hive-storage-api 2.8.1
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.httpcomponents httpclient 4.5.14
org.apache.httpcomponents httpcore 4.4.16
org.apache.ivy sarmaşık 2.5.1
org.apache.logging.log4j log4j-1.2-api 2.20.0
org.apache.logging.log4j log4j-api 2.20.0
org.apache.logging.log4j log4j-core 2.20.0
org.apache.logging.log4j log4j-slf4j2-impl 2.20.0
org.apache.mesos mesos 1.11.0-shaded-protobuf
org.apache.orc orc-core 1.9.1 gölgeli-protobuf
org.apache.orc orc-mapreduce 1.9.1 gölgeli-protobuf
org.apache.orc orc-shims 1.9.1
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.ws.xmlschema xmlschema-core 2.3.0
org.apache.xbean xbean-asm9 gölgeli 4.23
org.apache.yetus hedef kitle ek açıklamaları 0.13.0
org.apache.zookeeper zookeeper 3.6.3
org.apache.zookeeper zookeeper-jute 3.6.3
org.checkerframework dama-qual 3.31.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-derleyici 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.52.v20230823
org.eclipse.jetty jetty-continuation 9.4.52.v20230823
org.eclipse.jetty jetty-http 9.4.52.v20230823
org.eclipse.jetty jetty-io 9.4.52.v20230823
org.eclipse.jetty jetty-jndi 9.4.52.v20230823
org.eclipse.jetty jetty-plus 9.4.52.v20230823
org.eclipse.jetty jetty-proxy 9.4.52.v20230823
org.eclipse.jetty jetty-security 9.4.52.v20230823
org.eclipse.jetty jetty-server 9.4.52.v20230823
org.eclipse.jetty jetty-servlet 9.4.52.v20230823
org.eclipse.jetty jetty-servlets 9.4.52.v20230823
org.eclipse.jetty jetty-util 9.4.52.v20230823
org.eclipse.jetty jetty-util-ajax 9.4.52.v20230823
org.eclipse.jetty jetty-webapp 9.4.52.v20230823
org.eclipse.jetty jetty-xml 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-api 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-client 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-common 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-server 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-servlet 9.4.52.v20230823
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-bulucu 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.40
org.glassfish.jersey.containers jersey-container-servlet-core 2.40
org.glassfish.jersey.core jersey-client 2.40
org.glassfish.jersey.core jersey-common 2.40
org.glassfish.jersey.core jersey-server 2.40
org.glassfish.jersey.inject jersey-hk2 2.40
org.hibernate.validator hibernate-validator 6.1.7.Final
org.ini4j ini4j 0.5.4
org.javassist javassist 3.29.2-GA
org.jboss.logging jboss günlüğü 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains Ek açıklama -ları 17.0.0
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.8.0
org.mariadb.jdbc mariadb-java-client 2.7.9
org.mlflow mlflow-spark 2.2.0
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.6.0
org.roaringbitmap RoaringBitmap 0.9.45
org.roaringbitmap dolgular 0.9.45
org.rocksdb rocksdbjni 8.3.2
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.15
org.scala-lang scala-library_2.12 2.12.15
org.scala-lang scala-reflect_2.12 2.12.15
org.scala-lang.modules scala-collection-compat_2.12 2.9.0
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt test arabirimi 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.2.15
org.scalanlp breeze-macros_2.12 2.1.0
org.scalanlp breeze_2.12 2.1.0
org.scalatest sca en son uyumlu 3.2.15
org.scalatest scalatest-core_2.12 3.2.15
org.scalatest scalatest-diagrams_2.12 3.2.15
org.scalatest scalatest-featurespec_2.12 3.2.15
org.scalatest scalatest-flatspec_2.12 3.2.15
org.scalatest scalatest-freespec_2.12 3.2.15
org.scalatest scalatest-funspec_2.12 3.2.15
org.scalatest scalatest-funsuite_2.12 3.2.15
org.scalatest scalatest-matchers-core_2.12 3.2.15
org.scalatest scalatest-mustmatchers_2.12 3.2.15
org.scalatest scalatest-propspec_2.12 3.2.15
org.scalatest scalatest-refspec_2.12 3.2.15
org.scalatest scalatest-shouldmatchers_2.12 3.2.15
org.scalatest scalatest-wordspec_2.12 3.2.15
org.scalatest scalatest_2.12 3.2.15
org.slf4j jcl-over-slf4j 2.0.7
org.slf4j jul-to-slf4j 2.0.7
org.slf4j slf4j-api 2.0.7
org.threeten threeten-extra 1.7.1
org.tukaani Xz 1.9
org.typelevel algebra_2.12 2.0.1
org.typelevel cats-kernel_2.12 2.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.1.3.Final
org.xerial sqlite-jdbc 3.42.0.0
org.xerial.snappy snappy-java 1.1.10.3
org.yaml snakeyaml 2.0
Oro Oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.cryptools AmazonCorrettoCryptoProvider 1.6.1-linux-x86_64
software.amazon.ion ion-java 1.0.2
Stax stax-api 1.0.1