Databricks Runtime 14.3 LTS

Aşağıdaki sürüm notları, Apache Spark 3.5.0 tarafından desteklenen Databricks Runtime 14.3 LTS hakkında bilgi sağlar.

Databricks bu görüntüleri Şubat 2024'te yayımladı.

Yeni özellikler ve geliştirmeler

Photon olmadan silme vektör MERGE iyileştirmeleri desteği

Silme vektörleri iyileştirmelerinden yararlanan işlemler için MERGE foton artık gerekli değildir. Bkz . Silme vektörleri nedir?.

Spark kataloğu API'leri artık paylaşılan erişim modunda tam olarak destekleniyor

Artık paylaşılan erişim moduyla yapılandırılmış işlemde hem Python hem de Scala'daki API'deki tüm işlevleri spark.catalog kullanabilirsiniz.

Delta UniForm genel kullanıma sunuldu

UniForm artık genel kullanıma sunulmuştur ve tablo özelliğini kullanır IcebergCompatV2 . Artık var olan tablolarda UniForm'un etkinleştirilmesini veya yükseltilebilmesini sağlayabilirsiniz. Bkz . Delta Tablolarını Iceberg istemcileriyle okumak için UniForm kullanma.

Yeni SQL işlevi EXECUTE IMMEDIATE

Artık SQL'de parametreli sorguları desteklemek için EXECUTE IMMEDIATE söz dizimini kullanabilirsiniz. Bkz. HEMEN YÜRÜTME.

Delta tabloları için istatistikleri atlayan verileri yeniden derleme

Artık veri atlama için kullanılan sütunları değiştirdikten sonra Delta günlüğünde depolanan istatistikleri yeniden derleyebilirsiniz. Bkz . Delta istatistik sütunlarını belirtme.

Durum bilgisi olan akış sorguları için sorgu durumu bilgileri

Artık Yapılandırılmış Akış durumu verilerini ve meta verilerini sorgulayabilirsiniz. Bkz . Yapılandırılmış Akış durumu bilgilerini okuma.

Paylaşılan kümelerde Kafka kimlik doğrulaması için Microsoft Entra Id (eski adıyla Azure Active Directory) kullanma

Artık paylaşılan erişim moduyla yapılandırılmış işlemde Microsoft Entra ID ile OAuth aracılığıyla Event Hubs hizmetlerinin kimliğini doğrulayabilirsiniz. Bkz. Microsoft Entra Id (eski adıyla Azure Active Directory) ve Azure Event Hubs ile Hizmet Sorumlusu kimlik doğrulaması.

Sorgu performansını geliştirmek için dosya ve bölüm ayıklama desteği eklendi

JOIN koşullarında null toleranslı eşitliğe dayanan bazı sorguları hızlandırmak için EqualNullSafe artık DynamicFilePruning JOIN'lerde işlecini destekliyoruzDynamicPartitionPruning.

SQL Oturumunda geçici değişkenleri bildirme

Bu sürüm, bir oturumda, sorgular içinden ayarlanabilen ve sonra başvurulabilen geçici değişkenleri bildirme özelliğini tanıtır. Bkz. Değişkenler.

Kullanılmayan özellikleri kaldırmak için Thriftserver güncelleştirmeleri

Thriftserver kodu, eski özelliklerin kodunu kaldıracak şekilde güncelleştirildi. Bu değişiklikler nedeniyle aşağıdaki yapılandırmalar artık desteklenmiyor:

  • Özelliği kullanılarak hive.aux.jars.path yapılandırılan Hive yardımcı JAR'leri artık bağlantılar için hive-thriftserver desteklenmemektedir.
  • Konumu özelliği veya HIVE_CONF_DIR ortam değişkeni kullanılarak hive.server2.global.init.file.location yapılandırılan Hive genel başlatma dosyası ().hiverc artık bağlantılar için hive-thriftserver desteklenmemektedir.

Unity Kataloğu birimlerinde truststore ve keystore dosyalarını kullanma

Artık Unity Kataloğu birimlerindeki truststore ve keystore dosyalarını kullanarak avro veya protokol arabellek verileri için Confluent Schema Registry'de kimlik doğrulaması yapabilirsiniz. Avro veya protokol arabellekleri belgelerine bakın.

Yerel XML dosya biçimi desteği (Genel Önizleme)

Yerel XML dosya biçimi desteği artık Genel Önizleme aşamasındadır. XML dosya biçimi desteği, xml verilerini toplu işleme veya akış için alma, sorgulama ve ayrıştırma işlemlerini etkinleştirir. Şema ve veri türlerini otomatik olarak çıkarıp geliştirebilir, gibi from_xmlSQL ifadelerini destekler ve XML belgeleri oluşturabilir. Dış jar'lar gerektirmez ve Otomatik Yükleyici, read_files, COPY INTOve Delta Live Tablolarıyla sorunsuz çalışır. Bkz. XML dosyalarını okuma ve yazma.

Cloudflare R2 depolama desteği (Genel Önizleme)

Artık Cloudflare R2'i Unity Kataloğu'nda kayıtlı veriler için bulut depolama alanı olarak kullanabilirsiniz. Cloudflare R2 öncelikli olarak, veriler bölgeler arasında geçiş yaparken bulut sağlayıcıları tarafından ücretlendirilen veri çıkış ücretlerinden kaçınmak istediğiniz Delta Paylaşımı kullanım durumlarına yöneliktir. R2 depolama, AWS S3, Azure Data Lake Storage 2. Nesil ve Google Cloud Depolama'da desteklenen tüm Databricks verilerini ve yapay zeka varlıklarını destekler. Bkz. Cloudflare R2 çoğaltmalarını kullanma veya depolamayı R2'ye geçirme ve Cloudflare R2'ye bağlanmak için depolama kimlik bilgisi oluşturma.

Paylaşılan erişimli Unity Kataloğu kümelerinde Spark ve dbutils çalışma alanı dosyalarına erişim desteği

Spark ve dbutils çalışma alanı dosyalarına okuma ve yazma erişimi artık paylaşılan erişim modunda Unity Kataloğu kümelerinde desteklenmektedir. Bkz . Çalışma alanı dosyalarıyla çalışma.

Paylaşılan erişimli Unity Kataloğu kümelerinde başlatma betikleri ve küme kitaplığı desteği

Küme ilkeleri kullanılarak yükleme de dahil olmak üzere paylaşılan erişim modundaki Unity Kataloğu kümelerine küme kapsamlı başlatma betiklerinin ve Python ve JAR kitaplıklarınınyüklenmesi genel kullanıma sunulmuştur. Databricks, Unity Kataloğu birimlerinden başlatma betiklerinin ve kitaplıklarının yüklenmesini önerir.

Kitaplık yükseltmeleri

  • Yükseltilen Python kitaplıkları:
    • 2.19.0 ile 2.19.1 arasındaki fastjsonschema
    • 3.12.4 ile 3.13.1 arasında dosya kilidi
    • 1.61.0 ile 1.62.0 arası googleapis-common-protos
    • paketleme 22.0 ile 23.2
  • Yükseltilen R kitaplıkları:
    • 0,8-82 ile 0,8-85 arası yabancı
    • nlme from 3.1-162 to 3.1-163
    • rpart from 4.1.19 to 4.1.21
  • Yükseltilen Java kitaplıkları:
    • 0.7.0 ile 0.13.0 arası com.databricks.databricks-sdk-java
    • org.apache.orc.orc-core 1.9.1-shaded-protobuf ile 1.9.2-shaded-protobuf
    • org.apache.orc.orc-mapreduce from 1.9.1-shaded-protobuf to 1.9.2-shaded-protobuf
    • org.apache.orc.orc-shims 1.9.1 ile 1.9.2 arası
    • 2.9.0 ile 2.11.0 arası org.scala-lang.modules.scala-collection-compat_2.12

Apache Spark

Databricks Runtime 14.3, Apache Spark 3.5.0'ı içerir. Bu sürüm, Databricks Runtime 14.2'deki tüm Spark düzeltmeleri ve iyileştirmelerinin yanı sıra Spark'ta yapılan aşağıdaki ek hata düzeltmelerini ve iyileştirmeleri içerir:

  • [SPARK-46541] [SC-153546] [SQL] [BAĞLAN] Kendi kendine birleştirmede belirsiz sütun başvurularını düzeltme
  • [SPARK-45433] "[SC-145163][SQL] CSV/JSON şema çıkarımlarını düzeltme...
  • [SPARK-46723] [14.3] [SASP-2792] [SC-153425] [BAĞLAN] [SCALA] addArtifact'i yeniden denenebilir hale getirme
  • [SPARK-46660] [SC-153391] [BAĞLAN] ReattachExecute, SessionHolder'ın güncelleştirme canlılığını istiyor
  • [SPARK-46670] [SC-153273] [PYTHON] [SQL] Statik ve çalışma zamanı Python Veri Kaynaklarını ayırarak DataSourceManager'ın kendi kendini kopyalayabilmesini sağlama
  • [SPARK-46720] [SC-153410] [SQL] [PYTHON] Python Veri Kaynağını diğer DSv2 yerleşik Veri Kaynaklarıyla uyumlu olacak şekilde yeniden düzenleme
  • [SPARK-46684] [SC-153275] [PYTHON] [BAĞLAN] Bağımsız değişkenleri düzgün geçirmek için CoGroup.applyInPandas/Arrow düzeltmesi
  • [SPARK-46667] [SC-153271] [SC-153263] [SQL] XML: Birden çok XML veri kaynağında hata oluşturma
  • [SPARK-46382] [SC-151881] [SQL] XML: Default ignoreSurroundingSpaces to true
  • [SPARK-46382] [SC-153178] [SQL] XML: Için belgeyi güncelleştirme ignoreSurroundingSpaces
  • [SPARK-45292] "[SC-151609][SQL][HIVE] IsolatedClientLoader'dan paylaşılan sınıflardan Guava'yi kaldırma"
  • [SPARK-45292] [SC-151609] [SQL] [HIVE] IsolatedClientLoader'dan paylaşılan sınıflardan Guava'nın kaldırılması
  • [SPARK-46311] [SC-150137] [CORE] Sırasında sürücülerin son durumunu günlüğe kaydetme Master.removeDriver
  • [SPARK-46413] [SC-151052] [PYTHON] Ok Python UDF'sinin returnType değerini doğrulama
  • [SPARK-46633] [WARMFIX] [SC-153092] [SQL] Avro okuyucusu sıfır uzunluklu blokları işleyecek şekilde düzeltilir
  • [SPARK-46537] [SC-151286] [SQL] NPE ve onayları komutlardan iç hatalara dönüştürme
  • [SPARK-46179] [SC-151678] [SQL] Postgres'den başlayarak diğer DBMS'lerle altın dosyalara karşı diğer DBMS'yi çalıştıran CrossDbmsQueryTestSuites ekleyin
  • [SPARK-44001] [SC-151413] [PROTOBUF] İyi bilinen sarmalayıcı türlerinin unwrapping protobuf'a izin vermek için seçenek ekleme
  • [SPARK-40876] [SC-151786] [SQL] Parquet okuyucularında daha büyük ölçekli ondalıklar için genişletme türü yükseltmesi
  • [SPARK-46605] [SC-151769] [BAĞLAN] Connect modülü desteğinde işlev yapma lit/typedLits.c.immutable.ArraySeq
  • [SPARK-46634] [SC-153005] [SQL] değişmez değer doğrulaması null alanlara detaya gitmemelidir
  • [SPARK-37039] [SC-153094] [PS] Eksik değerle düzgün çalışmak için düzeltme Series.astype
  • [SPARK-46312] [SC-150163] [CORE] Kullanım lower_camel_case alanı: store_types.proto
  • [SPARK-46630] [SC-153084] [SQL] XML: Yazma işleminde XML öğesi adını doğrulama
  • [SPARK-46627] [SC-152981] [SS] [UI] Akış kullanıcı arabiriminde zaman çizelgesi araç ipucu içeriğini düzeltme
  • [SPARK-46248] [SC-151774] [SQL] XML: ignoreCorruptFiles ve ignoreMissingFiles seçenekleri desteği
  • [SPARK-46386] [SC-150766] [PYTHON] Gözlem onaylarını geliştirme (pyspark.sql.gözlem)
  • [SPARK-46581] [SC-151789] [CORE] AccumulatorV2'de isZero ile ilgili açıklamayı güncelleştirme
  • [SPARK-46601] [SC-151785] [CORE] handleStatusMessage'daki günlük hatalarını düzeltme
  • [SPARK-46568] [SC-151685] [PYTHON] Python veri kaynağı seçeneklerini büyük/küçük harfe duyarlı olmayan bir sözlük yapma
  • [SPARK-46611] [SC-151783] [CORE] SimpleDateFormat yerine DateTimeFormatter yazarak ThreadLocal'ı kaldırma
  • [SPARK-46604] [SC-151768] [SQL] Destek olun Literal.applys.c.immuable.ArraySeq
  • [SPARK-46324] [SC-150223] [SQL] [PYTHON] pyspark.sql.functions.user ve session_user çıkış adını düzeltme
  • [SPARK-46621] [SC-151794] [PYTHON] Py4J tarafından yakalanan özel durumda Exception.getMessage'dan null değerini adresle
  • [SPARK-46598] [SC-151767] [SQL] OrcColumnarBatchReader eksik sütun için sütun vektörleri oluştururken bellek moduna saygı duymalıdır
  • [SPARK-46613] [SC-151778] [SQL] [PYTHON] Python Veri Kaynakları'nı arayamadığında günlük tam özel durumu
  • [SPARK-46559] [SC-151364] [MLLIB] export paket adının içindeki öğesini ters köşelerle sarmalama
  • [SPARK-46522] [SC-151784] [PYTHON] Ad çakışmalarıyla Python veri kaynağı kaydını engelleme
  • [SPARK-45580] [SC-149956] [SQL] İç içe alt sorguların varoluş birleşimine dönüştüğü durumu işleme
  • [SPARK-46609] [SC-151714] [SQL] BölümlemePreservingUnaryExecNode'da üstel patlamadan kaçının
  • [SPARK-46535] [SC-151288] [SQL] Sütun istatistikleri olmadan genişletilmiş bir sütun açıklandığında NPE düzeltildi
  • [SPARK-46599] [SC-147661] [SC-151770] [SQL] XML: Uyumluluk denetimi için TypeCoercion.findTightestCommonType kullanın
  • [SPARK-40876] [SC-151129] [SQL] Parquet okuyucularında tür yükseltmelerini genişletme
  • [SPARK-46179] [SC-151069] [SQL] SQLQueryTestSuite'ta kodu yeniden kullanılabilir işlevlere çekme
  • [SPARK-46586] [SC-151679] [SQL] Şu destekte olduğu gibi customCollectionCls desteks.c.immutable.ArraySeq:MapObjects
  • [SPARK-46585] [SC-151622] [CORE] metricPeaks içinde kullanmak mutable.ArraySeq.toSeq yerine doğrudan bir immutable.ArraySeq olarakExecutor
  • [SPARK-46488] [SC-151173] [SQL] Zaman damgası ayrıştırma sırasında trimTüm çağrı atlanıyor
  • [SPARK-46231] [SC-149724] [PYTHON] Kalan NotImplementedError tüm & TypeError değerini PySpark hata çerçevesine geçirme
  • [SPARK-46348] [SC-150281] [CORE] Destek spark.deploy.recoveryTimeout
  • [SPARK-46313] [SC-150164] [CORE] Günlük Spark HA kurtarma süresi
  • [SPARK-46358] [SC-150307] [BAĞLAN] Koşul denetimini basitleştirin ResponseValidator#verifyResponse
  • [SPARK-46380] [SC-151078] [SQL] Satır içi tablo ifadelerini değerlendirmeden önce geçerli saati/tarihi değiştirin.
  • [SPARK-46563] [SC-151441] [SQL] conf spark.sql.debug.maxToStringFields'i izlemeyen simpleString'i görüntüleyin
  • [SPARK-46101] [SC-149211] [CORE] [SQL] [MLLIB] [SS] [R] [CONNCT] [GRAPHX] (dize|dizi).size değerini (dize|dizi).length ile değiştirerek yığın derinliğini azaltın
  • [SPARK-46539] [SC-151469] [SQL] SELECT * EXCEPT(bir yapıdaki tüm alanlar) onay hatasına neden olur
  • [SPARK-46565] [SC-151414] [PYTHON] Python veri kaynakları için hata sınıflarını ve hata iletilerini iyileştirme
  • [SPARK-46576] [SC-151614] [SQL] Desteklenmeyen veri kaynağı kaydetme modu için hata iletilerini iyileştirme
  • [SPARK-46540] [SC-151355] [PYTHON] Python veri kaynağı okuma işlevinin Satır nesneleri adlı çıkışları olduğunda sütun adlarını dikkate al
  • [SPARK-46577] [SC-151448] [SQL] HiveMetastoreLazyInitializationSuite, hive'ın SessionState'ini sızdırıyor
  • [SPARK-44556] [SC-151562] [SQL] VectorizedReader etkinleştirildiğinde yeniden kullanma OrcTail
  • [SPARK-46587] [SC-151618] [SQL] XML: XSD büyük tamsayı dönüştürmeyi düzeltme
  • [SPARK-46382] [SC-151297] [SQL] XML: Öğeler arasında kesişen değerleri yakalama
  • [SPARK-46567] [SC-151447] [CORE] ReadAheadInputStream için ThreadLocal'ı kaldırma
  • [SPARK-45917] [SC-151269] [PYTHON] [SQL] Başlangıçta Python Veri Kaynağı'nın otomatik kaydı
  • [SPARK-28386] [SC-151014] [SQL] GROUP BY ve HAVING ile ORDER BY sütunları çözümlenemiyor
  • [SPARK-46524] [SC-151446] [SQL] Geçersiz kaydetme modu için hata iletilerini geliştirme
  • [SPARK-46294] [SC-150672] [SQL] init ile sıfır değerinin semantiğini temizleme
  • [SPARK-46301] [SC-150100] [CORE] Destek spark.worker.(initial|max)RegistrationRetries
  • [SPARK-46542] [SC-151324] [SQL] Her zaman doğru olduğundan öğesinin c>=0ExternalCatalogUtils#needsEscaping denetimini kaldırın
  • [SPARK-46553] [SC-151360] [PS] FutureWarning nesne dtype ile için interpolate
  • [SPARK-45914] [SC-151312] [PYTHON] Python veri kaynağı yazma için işleme ve durdurma API'sini destekleme
  • [SPARK-46543] [SC-151350] [PYTHON] [BAĞLAN] Boş alanlar için throw PySparkValueError yapma json_tuple
  • [SPARK-46520] [SC-151227] [PYTHON] Python veri kaynağı yazma için üzerine yazma modu desteği
  • [SPARK-46502] [SC-151235] [SQL] UnwrapCastInBinaryComparison'da destek zaman damgası türleri
  • [SPARK-46532] [SC-151279] [BAĞLAN] meta verilerinde ileti parametrelerini geçirme ErrorInfo
  • [SPARK-46397] Revert "[SC-151311][PYTHON][CONNECT] İşlevi sha2PySparkValueError geçersiz numBits"
  • [SPARK-46170] [SC-149472] [SQL] SparkSessionExtensions'a uyarlamalı sorgu planlayıcısı strateji kuralları ekleme desteği
  • [SPARK-46444] [SC-151195] [SQL] V2SessionCatalog#createTable tabloyu yüklememelidir
  • [SPARK-46397] [SC-151311] [PYTHON] [BAĞLAN] İşlev sha2 geçersiz olarak yükseltilmelidir PySparkValueErrornumBits
  • [SPARK-46145] [SC-149471] [SQL] spark.catalog.listTables tablo veya görünüm bulunamadığında özel durum oluşturmuyor
  • [SPARK-46272] [SC-151012] [SQL] DSv2 kaynaklarını kullanarak CTAS desteği
  • [SPARK-46480] [SC-151127] [CORE] [SQL] Tablo önbelleği görev girişiminde NPE düzeltilir
  • [SPARK-46100] [SC-149051] [CORE] [PYTHON] (dize|dizi).size değerini (dize|dizi).length ile değiştirerek yığın derinliğini azaltın
  • [SPARK-45795] [SC-150764] [SQL] DS V2, aşağı gönderme Modunu destekler
  • [SPARK-46485] [SC-151133] [SQL] V1Write gerekli olmadığında Sıralama eklememelidir
  • [SPARK-46468] [SC-151121] [SQL] Anahtarları gruplandırmadan Toplama ile EXISTS alt sorguları için COUNT hatasını işleme
  • [SPARK-46246] [SC-150927] [SQL] ANıNDA SQL desteği YÜRÜTME
  • [SPARK-46498] [SC-151199] [CORE] Kaldırılacak shuffleServiceEnabled yer o.a.spark.util.Utils#getConfiguredLocalDirs
  • [SPARK-46440] [SC-150807] [SQL] Yeniden temel yapılandırmalarını CORRECTED varsayılan olarak moda ayarlayın
  • [SPARK-45525] [SC-151120] [SQL] [PYTHON] DSv2 kullanılarak Python veri kaynağı yazma desteği
  • [SPARK-46505] [SC-151187] [BAĞLAN] içinde bayt eşiğini yapılandırılabilir hale getirme ProtoUtils.abbreviate
  • [SPARK-46447] [SC-151025] [SQL] SQL yapılandırmalarını yeniden başlatan eski tarih saatlerini kaldırma
  • [SPARK-46443] [SC-151123] [SQL] Ondalık duyarlık ve ölçek, H2 diyalekt tarafından belirlenir.
  • [SPARK-46384] [SC-150694] [SPARK-46404] [SS] [UI] Yapılandırılmış Akış Sayfasındaki İşlem Süresi Yığın Grafiğini Düzeltme
  • [SPARK-46207] [SC-151068] [SQL] DataFrameWriterV2'de MergeInto desteği
  • [SPARK-46452] [SC-151018] [SQL] Kayıtların yineleyicisini yazmak için DataWriter'a yeni bir API ekleme
  • [SPARK-46273] [SC-150313] [SQL] DSv2 kaynaklarını kullanarak INSERT INTO/OVERWRITE desteği
  • [SPARK-46344] [SC-150267] [CORE] Bir sürücü başarıyla mevcut olduğunda ancak ana sürücünün bağlantısı kesildiğinde düzgün bir şekilde uyarın
  • [SPARK-46284] [SC-149944] [PYTHON] [BAĞLAN] Python'a işlev ekleme session_user
  • [SPARK-46043] [SC-149786] [SQL] DSv2 kaynaklarını kullanarak tablo oluşturma desteği
  • [SPARK-46323] [SC-150191] [PYTHON] pyspark.sql.functions.now dosyasının çıkış adını düzeltin
  • [SPARK-46465] [SC-151059] [PYTHON] [BAĞLAN] PySpark'ta ekle Column.isNaN
  • [SPARK-46456] [SC-151050] [CORE] SparkContext kapatma engelini kaldırmak için Jetty sunucusu durdurma zaman aşımını ayarlamak için ekle spark.ui.jettyStopTimeout
  • [SPARK-43427] [SC-150356] [PROTOBUF] spark protobuf: işaretsiz tamsayı türlerine yukarı yayına izin ver
  • [SPARK-46399] [SC-151013] [14.x] [Çekirdek] Spark Dinleyicisi'nin kullanımı için Uygulama Sonu olayına çıkış durumu ekleme
  • [SPARK-46423] [SC-150752] [PYTHON] [SQL] DataSource.lookupDataSourceV2'de Python Veri Kaynağı örneğini oluşturma
  • [SPARK-46424] [SC-150765] [PYTHON] [SQL] Python Veri Kaynağı'nda Python ölçümlerini destekleme
  • [SPARK-46330] [SC-151015] HybridStore etkinleştirildiğinde Spark kullanıcı arabirimi bloklarının uzun süre yüklenmesi
  • [SPARK-46378] [SC-150397] [SQL] Toplamayı Project'e dönüştürdükten sonra sıralamayı kaldırmaya devam etme
  • [SPARK-45506] [SC-146959] [BAĞLAN] Spark'a sarmaşık URI desteği ekleme Bağlan addArtifact
  • [SPARK-45814] [SC-147871] [BAĞLAN] [SQL] Bellek sızıntısını önlemek için ArrowConverters.createEmptyArrowBatch çağrısı close() yapın
  • [SPARK-46427] [SC-150759] [PYTHON] [SQL] Python Veri Kaynağı'nın açıklamasını açıklama olarak güzel olacak şekilde değiştirin
  • [SPARK-45597] [SC-150730] [PYTHON] [SQL] SQL'de Python veri kaynağı kullanarak tablo oluşturma desteği (DSv2 exec)
  • [SPARK-46402] [SC-150700] [PYTHON] getMessageParameters ve getQueryContext desteği ekleme
  • [SPARK-46453] [SC-150897] [BAĞLAN] uygulamasından internalError() özel durum oluşturma SessionHolder
  • [SPARK-45758] [SC-147454] [SQL] Hadoop sıkıştırma codec'leri için eşleyici tanıtma
  • [SPARK-46213] [PYTHON] Hata çerçevesi için tanıtma PySparkImportError
  • [SPARK-46230] [SC-149960] [PYTHON] PySpark'a geçiş RetriesExceeded hatası
  • [SPARK-45035] [SC-145887] [SQL] Çok satırlı CSV/JSON ile ignoreCorruptFiles/ignoreMissingFiles hata bildirecek düzeltme
  • [SPARK-46289] [SC-150846] [SQL] Yorumlanmış modda UDF'leri sıralama desteği
  • [SPARK-46229] [SC-150798] [PYTHON] [BAĞLAN] Spark Bağlan'da groupBy ve cogroup'a applyInArrow ekleme
  • [SPARK-46420] [SC-150847] [SQL] SparkSQLCLIDriver'da kullanılmayan aktarımı kaldırma
  • [SPARK-46226] [PYTHON] Kalanların RuntimeError tümünü PySpark hata çerçevesine geçirme
  • [SPARK-45796] [SC-150613] [SQL] DESTEK MODE() IN GROUP (ORDER BY col)
  • [SPARK-40559] [SC-149686] [PYTHON] [14.X] groupBy ve cogroup'a applyInArrow ekleme
  • [SPARK-46069] [SC-149672] [SQL] Zaman damgası türünü tarih türüne kadar açma desteği
  • [SPARK-46406] [SC-150770] [SQL] Hata sınıfına ad atama _LEGACY_ERROR_TEMP_1023
  • [SPARK-46431] [SC-150782] [SS] Oturum yineleyicilerinde dönüştürme IllegalStateExceptioninternalError
  • [SPARK-45807] [SC-150751] [SQL] ViewCatalog API'sini geliştirme
  • [SPARK-46009] [SC-149771] [SQL] [BAĞLAN] PercentileCont ve PercentileDisc ayrıştırma kuralını functionCall ile birleştirin
  • [SPARK-46403] [SC-150756] [SQL] getBytesUnsafe yöntemiyle parquet ikili kodunu çözme
  • [SPARK-46389] [SC-150779] [CORE] Özel Durum oluştururken checkVersion örneği el ile kapatma RocksDB/LevelDB
  • [SPARK-46360] [SC-150376] [PYTHON] Yeni getMessage API ile hata iletisi hata ayıklamasını geliştirme
  • [SPARK-46233] [SC-149766] [PYTHON] Kalanların AttributeError tümünü PySpark hata çerçevesine geçirme
  • [SPARK-46394] [SC-150599] [SQL] True olarak ayarlandığında özel karakterler spark.sql.legacy.keepCommandOutputSchema içeren şemalardaki spark.catalog.listDatabases() sorunlarını düzeltme
  • [SPARK-45964] [SC-148484] [SQL] Katalizör paketi altındaki XML ve JSON paketinde özel SQL erişimcisini kaldırma
  • [SPARK-45856] [SC-148691] ArtifactManager'ı Spark Bağlan SparkSession'a taşıma (sql/core)
  • [SPARK-46409] [SC-150714] [BAĞLAN] spark-connect-scala-client başlatma betiğini düzeltme
  • [SPARK-46416] [SC-150699] [CORE] Ekle @tailrecHadoopFSUtils#shouldFilterOutPath
  • [SPARK-46115] [SC-149154] [SQL] içinde karakter kümelerini kısıtlama encode()
  • [SPARK-46253] [SC-150416] [PYTHON] MapInArrow kullanarak Python veri kaynağını okumayı planlama
  • [SPARK-46339] [SC-150266] [SS] Toplu iş numarası adına sahip dizin meta veri günlüğü olarak değerlendirilmemelidir
  • [SPARK-46353] [SC-150396] [CORE] Birim testi kapsamını geliştirmek RegisterWorker için yeniden düzenleme
  • [SPARK-45826] [SC-149061] [SQL] DataFrame sorgu bağlamında yığın izlemeleri için SQL yapılandırması ekleme
  • [SPARK-45649] [SC-150300] [SQL] OffsetWindowFunctionFrame için hazırlama çerçevesini birleştirme
  • [SPARK-46346] [SC-150282] [CORE] Bir çalışanı msg'den UNKNOWN msg'ye RegisterWorker güncelleştirmek için ALIVE Ana Şablonu düzeltme
  • [SPARK-46388] [SC-150496] [SQL] HiveAnalysis, query.resolved
  • [SPARK-46401] [SC-150609] [CORE] şunun yerine getCardinality() > 0 açık RoaringBitmap kullanın!isEmpty():RemoteBlockPushResolver
  • [SPARK-46393] [SC-150603] [SQL] JDBC tablo kataloğunda özel durumları sınıflandırma
  • [SPARK-45798] [SC-150513] [BAĞLAN] İzleme: SessionHolderInfo'ya serverSessionId ekleme
  • [SPARK-46153] [SC-146564] [SC-150508] [SQL] XML: TimestampNTZType desteği ekleme
  • [SPARK-46075] [SC-150393] [BAĞLAN] Spark Bağlan SessionManager geliştirmeleri
  • [SPARK-46357] [SC-150596] setConf'un yanlış belge kullanımını conf.set ile değiştirme
  • [SPARK-46202] [SC-150420] [BAĞLAN] Özel hedef dizinleri desteklemek için yeni ArtifactManager API'lerini kullanıma sunma
  • [SPARK-45824] [SC-147648] [SQL] içinde hata sınıfını zorlama ParseException
  • [SPARK-45845] [SC-148163] [SS] [UI] Akış kullanıcı arabirimine çıkarılan durum satırlarının sayısını ekleme
  • [SPARK-46316] [SC-150181] [CORE] Modülde core etkinleştir buf-lint-action
  • [SPARK-45816] [SC-147656] [SQL] Zaman damgasından tamsayılara dönüştürme sırasında taşma sırasında dönüş NULL
  • [SPARK-46333] [SC-150263] [SQL] katalizörde ile SparkException.internalError değiştir IllegalStateException
  • [SPARK-45762] [SC-148486] [CORE] Başlangıç sırasını değiştirerek kullanıcı jar'larında tanımlanan karıştırma yöneticilerini destekleme
  • [SPARK-46239] [SC-149752] [CORE] Bilgileri gizle Jetty
  • [SPARK-45886] [SC-148089] [SQL] DataFrame bağlamında çıkış tam yığın izlemesi callSite
  • [SPARK-46290] [SC-150059] [PYTHON] saveMode değerini DataSourceWriter için boole bayrağıyla değiştirme
  • [SPARK-45899] [SC-148097] [BAĞLAN] errorInfoToThrowable'da errorClass'ı ayarlama
  • [SPARK-45841] [SC-147657] [SQL] Yığın izlemesi kullanıma sunma ölçütü DataFrameQueryContext
  • [SPARK-45843] [SC-147721] [CORE] REST Gönderim API'sinde destek killall
  • [SPARK-46234] [SC-149711] [PYTHON] PySpark hata çerçevesi için tanıtma PySparkKeyError
  • [SPARK-45606] [SC-147655] [SQL] Çok katmanlı çalışma zamanı filtresinde yayın kısıtlamaları
  • [SPARK-45725] [SC-147006] [SQL] Varsayılan olmayan IN alt sorgu çalışma zamanı filtresini kaldırma
  • [SPARK-45694] [SC-147314] [SPARK-45695] [SQL] Kullanım dışı API kullanımını View.force temizleme ve ScalaNumberProxy.signum
  • [SPARK-45805] [SC-147488] [SQL] Daha genel hale getirme withOrigin
  • [SPARK-46292] [SC-150086] [CORE] [UI] MasterPage'de çalışanların özetini gösterme
  • [SPARK-45685] [SC-146881] [CORE] [SQL] Yerine kullanın LazyListStream
  • [SPARK-45888] [SC-149945] [SS] Durum (Meta Veri) Veri Kaynağına hata sınıfı çerçevesi uygulama
  • [SPARK-46261] [SC-150111] [BAĞLAN] DataFrame.withColumnsRenamed dikte/harita sıralamasını korumalıdır
  • [SPARK-46263] [SC-149933] [SQL] [SS] [ML] [MLLIB] [UI] SeqOps.view Temizleme ve ArrayOps.view dönüştürmeler
  • [SPARK-46029] [SC-149255] [SQL] Tek tırnak _ işaretinden ve % DS V2 anında iletme için kaçış
  • [SPARK-46275] [SC-150189] Protobuf: Seri durumdan çıkarma başarısız olduğunda izin verme modunda null döndürür.
  • [SPARK-46320] [SC-150187] [CORE] Destek spark.master.rest.host
  • [SPARK-46092] [SC-149658] [SQL] Taşan Parquet satır grubu filtrelerini aşağı itme
  • [SPARK-46300] [SC-150097] [PYTHON] [BAĞLAN] Sütunda küçük davranış eşleştirmeyi tam test kapsamıyla eşleştirme
  • [SPARK-46298] [SC-150092] [PYTHON] [BAĞLAN] Catalog.createExternalTable'ın kullanımdan kaldırma uyarısını, test çalışmalarını ve hatasını eşleştirin
  • [SPARK-45689] [SC-146898] [SPARK-45690] [SPARK-45691] [CORE] [SQL] ve türü kullanımıyla ilgili StringContext/StringOps/RightProjection/LeftProjection/Either kullanım dışı API kullanımını temizleyin BufferedIterator/CanBuildFrom/Traversable
  • [SPARK-33393] [SC-148407] [SQL] v2'de SHOW TABLE EXTENDED desteği
  • [SPARK-45737] [SC-147011] [SQL] 'de gereksizleri .toArray[InternalRow] kaldırma SparkPlan#executeTake
  • [SPARK-46249] [SC-149797] [SS] Arka plan işlemleriyle yarışı önlemek için RocksDB ölçümlerini almak için örnek kilidi gerektir
  • [SPARK-46260] [SC-149940] [PYTHON] [SQL] DataFrame.withColumnsRenamed dikte düzenine uygun olmalıdır
  • [SPARK-46274] [SC-150043] [SQL] Dönüştürmeden önce uzun geçerliliği denetlemek için ComputeStats() Aralık işlecini düzeltin
  • [SPARK-46040] [SC-149767] [SQL] [Python] Genel ifadeleri destekleyecek şekilde sütunları bölümleme/sıralama için 'analiz' için UDTF API'sini güncelleştirin
  • [SPARK-46287] [SC-149949] [PYTHON] [BAĞLAN] DataFrame.isEmpty tüm veri türleriyle çalışmalıdır
  • [SPARK-45678] [SC-146825] [CORE] TryOrFetchFailedException altında BufferReleasingInputStream.available/reset öğesini kapsar
  • [SPARK-45667] [SC-146716] [CORE] [SQL] [BAĞLAN] ile ilgili IterableOnceExtensionMethodskullanım dışı API kullanımını temizleyin.
  • [SPARK-43980] [SC-148992] [SQL] söz dizimine giriş select * except
  • [SPARK-46269] [SC-149816] [PS] Daha fazla NumPy uyumluluk işlevi testlerini etkinleştirme
  • [SPARK-45807] [SC-149851] [SQL] ViewCatalog'a createOrReplaceView(..) / replaceView(..) ekleyin
  • [SPARK-45742] [SC-147212] [CORE] [BAĞLAN] [MLLIB] [PYTHON] Scala Dizisi'nin içine kaydırılması için örtük bir işlev tanıtın immutable.ArraySeq.
  • [SPARK-46205] [SC-149655] [CORE] ile performansı geliştirme PersistenceEngineKryoSerializer
  • [SPARK-45746] [SC-149359] [Python] UDTF 'çözümle' veya 'değerlendirme' yöntemi yanlış değerler kabul ederse veya döndürüyorsa belirli hata iletileri döndür
  • [SPARK-46186] [SC-149707] [BAĞLAN] ExecuteThreadRunner başlamadan önce kesintiye uğradığında geçersiz durum geçişi düzeltildi
  • [SPARK-46262] [SC-149803] [PS] Pandas-on-Spark nesnesi için np.left_shift testi etkinleştirin.
  • [SPARK-45093] [SC-149679] [BAĞLAN] [PYTHON] AddArtifactHandler için hata işleme ve dönüştürmeyi düzgün bir şekilde destekleme
  • [SPARK-46188] [SC-149571] [Belge] [3.5] Spark belgesinin oluşturduğu tabloların CSS'sini düzeltme
  • [SPARK-45940] [SC-149549] [PYTHON] DataSourceReader arabirimine InputPartition ekleme
  • [SPARK-43393] [SC-148301] [SQL] Adres dizisi ifadesi taşma hatası.
  • [SPARK-46144] [SC-149466] [SQL] INSERT INTO başarısız ... Koşul alt sorgu içeriyorsa REPLACE deyimi
  • [SPARK-46118] [SC-149096] [SQL] [SS] [BAĞLAN] yerine SQLContext.conf kullanın SparkSession.sessionState.conf ve kullanım dışı olarak işaretleyin SQLContext.conf
  • [SPARK-45760] [SC-147550] [SQL] İfadelerin çoğaltılmasını önlemek için With ifadesi ekleme
  • [SPARK-43228] [SC-149670] [SQL] Birleştirme anahtarları, CoalesceBucketsInJoin içindeki PartitioningCollection ile de eşleşir
  • [SPARK-46223] [SC-149691] [PS] SparkPandasNotImplementedError'ı kullanılmayan kodu temizleyerek test edin
  • [SPARK-46119] [SC-149205] [SQL] için geçersiz kılma toString yöntemi UnresolvedAlias
  • [SPARK-46206] [SC-149674] [PS] SQL işlemcisi için daha dar bir kapsam özel durumu kullanma
  • [SPARK-46191] [SC-149565] [CORE] Mevcut dosya durumunda hata msg'sini iyileştirme FileSystemPersistenceEngine.persist
  • [SPARK-46036] [SC-149356] [SQL] hata sınıfını raise_error işlevinden kaldırma
  • [SPARK-46055] [SC-149254] [SQL] Katalog Veritabanı API'lerini yeniden yazma uygulaması
  • [SPARK-46152] [SC-149454] [SQL] XML: XML şeması çıkarımına DecimalType desteği ekleme
  • [SPARK-45943] [SC-149452] [SQL] DetermineTableStats'ı çözümleme kurallarına taşıma
  • [SPARK-45887] [SC-148994] [SQL] codegen ve non-codegen uygulamasını uyumlu hale getirme Encode
  • [SPARK-45022] [SC-147158] [SQL] Veri kümesi API'leri hataları için bağlam sağlama
  • [SPARK-45469] [SC-145135] [CORE] [SQL] [BAĞLAN] [PYTHON] şununla iterator değiştirtoIterator:IterableOnce
  • [SPARK-46141] [SC-149357] [SQL] spark.sql.legacy.ctePrecedencePolicy için varsayılan değeri DÜZELTİlDİ olarak değiştirin
  • [SPARK-45663] [SC-146617] [CORE] [MLLIB] şununla değiştir IterableOnceOps#aggregateIterableOnceOps#foldLeft
  • [SPARK-45660] [SC-146493] [SQL] ComputeCurrentTime kuralında Değişmez Değer nesnelerini yeniden kullanma
  • [SPARK-45803] [SC-147489] [CORE] Artık kullanılmayan öğesini kaldırma RpcAbortException
  • [SPARK-46148] [SC-149350] [PS] pyspark.pandas.mlflow.load_model test düzeltmesi (Python 3.12)
  • [SPARK-46110] [SC-149090] [PYTHON] Katalog, conf, connect, gözlem, pandas modüllerinde hata sınıflarını kullanma
  • [SPARK-45827] [SC-149203] [SQL] Codegen ve vektörleştirilmiş okuyucu devre dışı bırakılmış değişken düzeltmeleri
  • [SPARK-46080] "[SC-149012][PYTHON] Cloudpickle'i 3.0.0 sürümüne yükseltme"
  • [SPARK-45460] [SC-144852] [SQL] Şununla değiştir scala.collection.convert.ImplicitConversions : scala.jdk.CollectionConverters
  • [SPARK-46073] [SC-149019] [SQL] Belirli komutlar için UnresolvedNamespace özel çözünürlüğünü kaldırma
  • [SPARK-45600] [SC-148976] [PYTHON] Python veri kaynağı kaydı oturum düzeyini belirleme
  • [SPARK-46074] [SC-149063] [BAĞLAN] [SCALA] UDF hatasıyla ilgili hata iletisinde yetersiz ayrıntılar
  • [SPARK-46114] [SC-149076] [PYTHON] Hata çerçevesi için PySparkIndexError ekleme
  • [SPARK-46120] [SC-149083] [BAĞLAN] [PYTHON] Yardımcı işlevi kaldırma DataFrame.withPlan
  • [SPARK-45927] [SC-148660] [PYTHON] Python veri kaynağı için güncelleştirme yolu işleme
  • [SPARK-46062] [14.x] [SC-148991] [SQL] isStreaming bayrağını CTE tanımı ve başvurusu arasında eşitleme
  • [SPARK-45698] [SC-146736] [CORE] [SQL] [SS] ile ilgili kullanım dışı API kullanımını temizleme Buffer
  • [SPARK-46064] [SC-148984] [SQL] [SS] EliminateEventTimeWatermark'ı çözümleyiciye taşıyın ve yalnızca çözümlenen alt öğeyi etkili olacak şekilde değiştirin
  • [SPARK-45922] [SC-149038] [BAĞLAN] [CLIENT] Küçük yeniden denemeler yeniden düzenleme (birden çok ilkeyi izleme)
  • [SPARK-45851] [SC-148419] [BAĞLAN] [SCALA] Scala istemcisinde birden çok ilkeyi destekleme
  • [SPARK-45974] [SC-149062] [SQL] RowLevelOperationRuntimeGroupFiltering için scan.filterAttributes boş olmayan bir karar ekleme
  • [SPARK-46085] [SC-149049] [BAĞLAN] Scala Spark Bağlan istemcisinde Dataset.groupingSets
  • [SPARK-45136] [SC-146607] [BAĞLAN] Ammonite desteği ile ClosureCleaner'ı geliştirme
  • [SPARK-46084] [SC-149020] [PS] Kategorik tür için veri türü atama işlemini yeniden düzenleme.
  • [SPARK-46083] [SC-149018] [PYTHON] SparkNoSuchElementException'ı kurallı hata API'si yapma
  • [SPARK-46048] [SC-148982] [PYTHON] [BAĞLAN] Python Spark'ta DataFrame.groupingSets desteği Bağlan
  • [SPARK-46080] [SC-149012] [PYTHON] Cloudpickle'i 3.0.0 sürümüne yükseltme
  • [SPARK-46082] [SC-149015] [PYTHON] [BAĞLAN] Spark Bağlan ile Pandas İşlevleri API'sinde protobuf dize gösterimi düzeltilir
  • [SPARK-46065] [SC-148985] [PS] kullanmak create_mapiçin yeniden düzenleme.(DataFrame|Series).factorize()
  • [SPARK-46070] [SC-148993] [SQL] SparkDateTimeUtils.getZoneId dosyasındaki regex desenini sık erişimli döngünün dışında derleme
  • [SPARK-46063] [SC-148981] [PYTHON] [BAĞLAN] Sevimli, toplama, gruplandırma ve özet bağımsız değişken türleriyle ilgili hata iletilerini geliştirme
  • [SPARK-44442] [SC-144120] [MESOS] Mesos desteğini kaldırma
  • [SPARK-45555] [SC-147620] [PYTHON] Başarısız onay için hata ayıklanabilir bir nesne içerir
  • [SPARK-46048] [SC-148871] [PYTHON] [SQL] PySpark'ta DataFrame.groupingSets desteği
  • [SPARK-45768] [SC-147304] [SQL] [PYTHON] Sql'de Python yürütmesi için faulthandler'i çalışma zamanı yapılandırması yapma
  • [SPARK-45996] [SC-148586] [PYTHON] [BAĞLAN] Spark Bağlan için uygun bağımlılık gereksinimi iletilerini gösterme
  • [SPARK-45681] [SC-146893] [UI] Ui üzerinde tutarlı hata işleme için UIUtils.errorMessageCell'in js sürümünü kopyalama
  • [SPARK-45767] [SC-147225] [CORE] Silme TimeStampedHashMap ve UT
  • [SPARK-45696] [SC-148864] [CORE] Promise özelliğinde tryCompleteWith yönteminin kullanım dışı bırakıldığında düzeltilmesi
  • [SPARK-45503] [SC-146338] [SS] Set RocksDB Compression için Conf ekleme
  • [SPARK-45338] [SC-143934] [CORE] [SQL] Şununla değiştir scala.collection.JavaConverters : scala.jdk.CollectionConverters
  • [SPARK-44973] [SC-148804] [SQL] Düzeltme:ArrayIndexOutOfBoundsExceptionconv()
  • [SPARK-45912] [SC-144982] [SC-148467] [SQL] XSDToSchema API'sinin geliştirilmesi: Bulut depolama erişilebilirliği için HDFS API'sine geçiş
  • [SPARK-45819] [SC-147570] [CORE] REST Gönderim API'sinde destek clear
  • [SPARK-45552] [14.x] [SC-146874] [PS] Için esnek parametreler ekleme assertDataFrameEqual
  • [SPARK-45815] [SC-147877] [SQL] [Akış] [14.x] [CHERRY-PICK] Sütun eklemek _metadata için diğer Akış kaynakları için bir arabirim sağlayın
  • [SPARK-45929] [SC-148692] [SQL] Dataframe API'sinde gruplamaSets işlemi desteği
  • [SPARK-46012] [SC-148693] [CORE] Uygulama durumu dosyası eksikse EventLogFileReader sıralı günlükleri okumamalıdır
  • [SPARK-45965] [SC-148575] [SQL] DSv2 bölümleme ifadelerini functions.partitioning içine taşıma
  • [SPARK-45971] [SC-148541] [CORE] [SQL] öğesinin paket adını düzeltin SparkCollectionUtils : org.apache.spark.util
  • [SPARK-45688] [SC-147356] [SPARK-45693] [CORE] & Fix ile ilgili MapOps kullanım dışı API kullanımını temizleme method += in trait Growable is deprecated
  • [SPARK-45962] [SC-144645] [SC-148497] [SQL] XML yerine kaldır treatEmptyValuesAsNulls ve kullan nullValue seçeneği
  • [SPARK-45988] [SC-148580] [SPARK-45989] [PYTHON] Python 3.11+'da GenericAlias'ı işlemek list için typehints düzeltildi
  • [SPARK-45999] [SC-148595] [PS] Ayrılmış olarak PandasProduct kullanma cumprod
  • [SPARK-45986] [SC-148583] [ML] [PYTHON] Python 3.11'de düzeltme pyspark.ml.torch.tests.test_distributor
  • [SPARK-45994] [SC-148581] [PYTHON] Olarak değiştir description-filedescription_file
  • [SPARK-45575] [SC-146713] [SQL] Df okuma API'si için zaman yolculuğu seçeneklerini destekleme
  • [SPARK-45747] [SC-148404] [SS] Oturum penceresi toplama işleminin okuma durumunu işlemek için durum meta verilerinde ön ek anahtarı bilgilerini kullanma
  • [SPARK-45898] [SC-148213] [SQL] Çözümlenmemiş mantıksal planı kullanmak için katalog tablosu API'lerini yeniden yazma
  • [SPARK-45828] [SC-147663] [SQL] DSL'de kullanım dışı yöntemi kaldırma
  • [SPARK-45990] [SC-148576] [SPARK-45987] [PYTHON] [BAĞLAN] Desteklemek için 4.25.1 sürümüne yükseltin protobufPython 3.11
  • [SPARK-45911] [SC-148226] [CORE] TLS1.3'i RPC SSL için varsayılan yapma
  • [SPARK-45955] [SC-148429] [UI] Flamegraph ve iş parçacığı dökümü ayrıntıları için Desteği Daralt
  • [SPARK-45936] [SC-148392] [PS] Optimize Index.symmetric_difference
  • [SPARK-45389] [SC-144834] [SQL] [3.5] Bölüm meta verilerini alma konusunda MetaException eşleştirme kuralını düzeltme
  • [SPARK-45655] [SC-148085] [SQL] [SS] CollectMetrics'te AggregateFunctions içinde belirlenemeyen ifadelere izin ver
  • [SPARK-45946] [SC-148448] [SS] RocksDBSuite'da varsayılan karakter kümesini geçirmek için kullanım dışı FileUtils yazma özelliğinin kullanımı düzeltildi
  • [SPARK-45511] [SC-148285] [SS] Durum Veri Kaynağı - Okuyucu
  • [SPARK-45918] [SC-148293] [PS] Optimize MultiIndex.symmetric_difference
  • [SPARK-45813] [SC-148288] [BAĞLAN] [PYTHON] Komutlardan gözlemlenen ölçümleri döndürme
  • [SPARK-45867] [SC-147916] [CORE] Destek spark.worker.idPattern
  • [SPARK-45945] [SC-148418] [BAĞLAN] için yardımcı işlev ekleme parser
  • [SPARK-45930] [SC-148399] [SQL] MapInPandas/MapInArrow'da belirlenemeyen UDF'leri destekleme
  • [SPARK-45810] [SC-148356] [Python] Giriş tablosundan satır kullanmayı durdurmak için Python UDTF API'sini oluşturma
  • [SPARK-45731] [SC-147929] [SQL] Ayrıca komutla ANALYZE TABLE bölüm istatistiklerini güncelleştirin
  • [SPARK-45868] [SC-148355] [BAĞLAN] Vanilya spark ile aynı ayrıştırıcıyı kullandığınızdan emin spark.table olun
  • [SPARK-45882] [SC-148161] [SQL] BroadcastHashJoinExec yayma bölümlemesi CoalescedHashPartitioning'e göre olmalıdır
  • [SPARK-45710] [SC-147428] [SQL] Hata _LEGACY_ERROR_TEMP_21 ad atama[59,60,61,62]
  • [SPARK-45915] [SC-148306] [SQL] ondalık(x, 0) değerini içindeki IntegralType ile aynı şekilde değerlendirin PromoteStrings
  • [SPARK-45786] [SC-147552] [SQL] Hatalı Ondalık çarpma ve bölme sonuçlarını düzeltme
  • [SPARK-45871] [SC-148084] [BAĞLAN] Modüllerdeki ile .toBuffer ilgili iyileştirmeler koleksiyonu dönüştürmesi connect
  • [SPARK-45822] [SC-147546] [BAĞLAN] Spark Bağlan SessionManager durdurulmuş bir sparkcontext arayabilir
  • [SPARK-45913] [SC-148289] [PYTHON] İç öznitelikleri PySpark hatalarından özel hale getirin.
  • [SPARK-45827] [SC-148201] [SQL] Spark'ta Değişken veri türü ekleyin.
  • [SPARK-44886] [SC-147876] [SQL] CREATE/REPLACE TABLE için CLUSTER BY yan tümcesini tanıtma
  • [SPARK-45756] [SC-147959] [CORE] Destek spark.master.useAppNameAsAppId.enabled
  • [SPARK-45798] [SC-147956] [BAĞLAN] Sunucu tarafı oturum kimliğini onaylama
  • [SPARK-45896] [SC-148091] [SQL] Doğru beklenen türle oluşturma ValidateExternalType
  • [SPARK-45902] [SC-148123] [SQL] Kullanılmayan işlevi resolvePartitionColumnsDataSource
  • [SPARK-45909] [SC-148137] [SQL] Güvenli bir şekilde yukarı alabiliyorsa, yayınları kaldırın NumericTypeIsNotNull
  • [SPARK-42821] [SC-147715] [SQL] splitFiles yöntemlerinde kullanılmayan parametreleri kaldırma
  • [SPARK-45875] [SC-148088] [CORE] Modülden core kaldır MissingStageTableRowData
  • [SPARK-45783] [SC-148120] [PYTHON] [BAĞLAN] Spark Bağlan modu etkinleştirildiğinde ancak uzak URL ayarlanmadığında hata iletilerini iyileştirme
  • [SPARK-45804] [SC-147529] [UI] Alev grafiğini açmak/kapatmak için spark.ui.threadDump.flamegraphEnabled yapılandırması ekleme
  • [SPARK-45664] [SC-146878] [SQL] Ork sıkıştırma codec'leri için eşleyici tanıtma
  • [SPARK-45481] [SC-146715] [SQL] Parquet sıkıştırma codec'leri için eşleyici tanıtma
  • [SPARK-45752] [SC-148005] [SQL] Başvurulmamış CTE ilişkilerini denetleme kodunu basitleştirme
  • [SPARK-44752] [SC-146262] [SQL] XML: Spark Docs'ı güncelleştirme
  • [SPARK-45752] [SC-147869] [SQL] Başvurulmayan CTE'nin tümü CheckAnalysis0 tarafından denetlenmelidir
  • [SPARK-45842] [SC-147853] [SQL] Çözümleyici kullanmak için Katalog İşlevi API'lerini yeniden düzenleme
  • [SPARK-45639] [SC-147676] [SQL] [PYTHON] DataFrameReader'da Python veri kaynaklarını yükleme desteği
  • [SPARK-45592] [SC-146977] [SQL] InMemoryTableScanExec ile AQE'de doğruluk sorunu
  • [SPARK-45794] [SC-147646] [SS] Akış durumu meta veri bilgilerini sorgulamak için durum meta veri kaynağını tanıtın
  • [SPARK-45739] [SC-147059] [PYTHON] Hata işleyici için tek başına EOFException yerine IOException'i yakalama
  • [SPARK-45677] [SC-146700] Gözlem API'sinde daha iyi hata günlüğü
  • [SPARK-45544] [SC-146873] [CORE] SSL desteğini TransportContext ile tümleştirme
  • [SPARK-45654] [SC-147152] [PYTHON] Python veri kaynağı yazma API'sini ekleme
  • [SPARK-45771] [SC-147270] [CORE] Varsayılan olarak etkinleştir spark.eventLog.rolling.enabled
  • [SPARK-45713] [SC-146986] [PYTHON] Python veri kaynaklarını kaydetme desteği
  • [SPARK-45656] [SC-146488] [SQL] Farklı veri kümelerinde aynı ada sahip gözlemler adlandırıldığında gözlemi düzeltme
  • [SPARK-45808] [SC-147571] [BAĞLAN] [PYTHON] SQL Özel Durumları için daha iyi hata işleme
  • [SPARK-45774] [SC-147353] [CORE] [UI] Destek spark.master.ui.historyServerUrl : ApplicationPage
  • [SPARK-45776] [SC-147327] [CORE] SPARK-39553'te eklenen savunma MapOutputTrackerMaster#unregisterShuffle null denetimini kaldırma
  • [SPARK-45780] [SC-147410] [BAĞLAN] InheritableThread içindeki tüm Spark Bağlan istemci iş parçacıklarını yayma
  • [SPARK-45785] [SC-147419] [CORE] spark.deploy.appNumberModulo Uygulama numarasını döndürme desteği
  • [SPARK-45793] [SC-147456] [CORE] Yerleşik sıkıştırma codec'lerini geliştirme
  • [SPARK-45757] [SC-147282] [ML] Binarizer'da NNZ'nin yeniden hesaplanmasından kaçının
  • [SPARK-45209] [SC-146490] [CORE] [UI] Yürütücü İş Parçacığı Döküm Sayfası için Flame Graph Desteği
  • [SPARK-45777] [SC-147319] [CORE] Destek spark.test.appId : LocalSchedulerBackend
  • [SPARK-45523] [SC-146331] [PYTHON] Kısayollara sahip olmak için null denetimini yeniden düzenleme
  • [SPARK-45711] [SC-146854] [SQL] Avro sıkıştırma codec'leri için eşleyici tanıtma
  • [SPARK-45523] [SC-146077] [Python] UDTF null değer atanamayan herhangi bir sütun için None döndürürse yararlı hata iletisi döndür
  • [SPARK-45614] [SC-146729] [SQL] Hata _LEGACY_ERROR_TEMP_215 ad atama[6,7,8]
  • [SPARK-45755] [SC-147164] [SQL] Genel sınır uygulayarak iyileştirme Dataset.isEmpty()1
  • [SPARK-45569] [SC-145915] [SQL] Hata _LEGACY_ERROR_TEMP_2153 ad atayın
  • [SPARK-45749] [SC-147153] [CORE] [WEBUI] Sütunu düzgün sıralamak Duration için düzeltme Spark History Server
  • [SPARK-45754] [SC-147169] [CORE] Destek spark.deploy.appIdPattern
  • [SPARK-45707] [SC-146880] [SQL] ile basitleştirme DataFrameStatFunctions.countMinSketchCountMinSketchAgg
  • [SPARK-45753] [SC-147167] [CORE] Destek spark.deploy.driverIdPattern
  • [SPARK-45763] [SC-147177] [CORE] [UI] Sütunu yalnızca mevcut olduğunda gösterecek Resource şekilde geliştirin MasterPage
  • [SPARK-45112] [SC-143259] [SQL] SQL Veri Kümesi işlevlerinde UnresolvedFunction tabanlı çözümleme kullanma

Databricks ODBC/JDBC sürücü desteği

Databricks, son 2 yılda yayımlanan ODBC/JDBC sürücülerini destekler. Lütfen son yayınlanan sürücüleri indirin ve yükseltin (ODBC'yi indirin, JDBC'yi indirin).

Bakım güncelleştirmeleri

Bkz . Databricks Runtime 14.3 bakım güncelleştirmeleri. Bu, ilk sürümde açıklama satırı yapılır.

Sistem ortamı

  • İşletim Sistemi: Ubuntu 22.04.3 LTS
  • Java: Zulu 8.74.0.17-CA-linux64
  • Scala: 2.12.15
  • Python: 3.10.12
  • R: 4.3.1
  • Delta Gölü: 3.1.0

Yüklü Python kitaplıkları

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
anyio 3.5.0 argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0
asttokens 2.0.5 attrs 22.1.0 geri arama 0.2.0
beautifulsoup4 4.11.1 Siyah 22.6.0 Çamaşır suyu 4.1.0
yanıp sönen 1.4 boto3 1.24.28 botocore 1.27.96
sertifikalı 2022.12.7 cffi 1.15.1 chardet 4.0.0
charset-normalizer 2.0.4 tıklama 8.0.4 Comm 0.1.2
konturlu 1.0.5 Şifreleme 39.0.1 Cycler 0.11.0
Cython 0.29.32 databricks-sdk 0.1.6 dbus-python 1.2.18
hata ayıklama 1.6.7 Dekoratör 5.1.1 defusedxml 0.7.1
daistlib 0.3.7 docstring-to-markdown 0,11 Entrypoints 0.4
Yürütme 0.8.3 modellere genel bakış 1.1.1 fastjsonschema 2.19.1
dosya kilidi 3.13.1 fonttools 4.25.0 googleapis-common-protos 1.62.0
grpcio 1.48.2 grpcio-status 1.48.1 httplib2 0.20.2
ıdna 3.4 importlib-metadata 4.6.4 ipykernel 6.25.0
ipython 8.14.0 ipython-genutils 0.2.0 ipywidgets 7.7.2
Jedi 0.18.1 Jeepney 0.7.1 Jinja2 3.1.2
jmespath 0.10.0 joblib 1.2.0 jsonschema 4.17.3
jupyter-client 7.3.4 jupyter-server 1.23.4 jupyter_core 5.2.0
jupyterlab-pygments 0.1.2 jupyterlab pencere öğeleri 1.0.0 Anahtarlık 23.5.0
kiwisolver 1.4.4 başlatma çubuğu 1.10.16 lazr.restfulclient 0.14.4
lazr.uri 1.0.6 lxml 4.9.1 İşaretlemeyi Kasa 2.1.1
matplotlib 3.7.0 matplotlib-inline 0.1.6 Mccabe 0.7.0
yanlış 0.8.4 more-itertools 8.10.0 mypy uzantıları 0.4.3
nbclassic 0.5.2 nbclient 0.5.13 nbconvert 6.5.4
nbformat 5.7.0 nest-asyncio 1.5.6 nodeenv 1.8.0
not defteri 6.5.2 notebook_shim 0.2.2 numpy 1.23.5
oauthlib 3.2.0 Ambalaj 23,2 pandas 1.5.3
pandocfilters 1.5.0 parso 0.8.3 pathspec 0.10.3
Patsy 0.5.3 pexpect 4.8.0 pickleshare 0.7.5
Yastık 9.4.0 Pip 22.3.1 platformdirs 2.5.2
çizim 5.9.0 takılmış 1.0.0 prometheus-client 0.14.1
prompt-toolkit 3.0.36 protobuf 4.24.0 psutil 5.9.0
psycopg2 2.9.3 ptyprocess 0.7.0 saf değerlendirme 0.2.2
serçe 8.0.0 pyarrow düzeltmesi 0,5 pycparser 2.21
pydantic 1.10.6 pyflakes 3.1.0 Pygments 2.11.2
PyGObject 3.42.1 PyJWT 2.3.0 pyodbc 4.0.32
pyparsing 3.0.9 pyright 1.1.294 pirsistent 0.18.0
python-dateutil 2.8.2 python-lsp-jsonrpc 1.1.1 python-lsp-server 1.8.0
pytoolconfig 1.2.5 pytz 2022.7 pyzmq 23.2.0
istekler 2.28.1 Ip 1.7.0 s3transfer 0.6.2
scikit-learn 1.1.1 scipy 1.10.0 Sinan 0.12.2
Gizli dizi Depolama 3.3.1 Send2Trash 1.8.0 kurulum araçları 65.6.3
Altı 1.16.0 sniffio 1.2.0 soupsieve 2.3.2.post1
ssh-import-id 5.11 stack-data 0.2.0 statsmodeller 0.13.5
Azim 8.1.0 terminado 0.17.1 threadpoolctl 2.2.0
tinycss2 1.2.1 tokenize-rt 4.2.1 tomli 2.0.1
Kasırga 6.1 traitlets 5.7.1 typing_extensions 4.4.0
ujson 5.4.0 katılımsız yükseltmeler 0,1 urllib3 1.26.14
virtualenv 20.16.7 wadllib 1.3.6 wcwidth 0.2.5
webencodings 0.5.1 websocket-client 0.58.0 whatthepatch 1.0.2
Tekerlek 0.38.4 widgetsnbextension 3.6.1 yapf 0.33.0
zipp 1.0.0

Yüklü R kitaplıkları

R kitaplıkları, 2023-02-10'da Posit Paket Yöneticisi CRAN anlık görüntüsünden yüklenir.

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
oku seçin 12.0.1 askpass 1.1 assertthat 0.2.1
Backports 1.4.1 temel 4.3.1 base64enc 0.1-3
bit 4.0.5 bit64 4.0.5 blob 1.2.4
başlatma 1.3-28 Brew 1.0-8 Brio 1.1.3
Süpürge 1.0.5 bslib 0.5.0 önbellek 1.0.8
çağıran 3.7.3 şapka işareti 6.0-94 cellranger 1.1.0
chron 2.3-61 class 7.3-22 cli 3.6.1
küçük resim 0.8.0 saat 0.7.0 cluster 2.1.4
codetools 0.2-19 renk alanı 2.1-0 commonmark 1.9.0
derleyicisi 4.3.1 config 0.3.1 Çakışan 1.2.0
cpp11 0.4.4 Crayon 1.5.2 kimlik bilgileri 1.3.2
Curl 5.0.1 data.table 1.14.8 veri kümeleri 4.3.1
DBİ 1.1.3 dbplyr 2.3.3 Desc 1.4.2
geliştirici araçları 2.4.5 Diyagram 1.6.5 diffobj 0.3.5
Özet 0.6.33 aşağı aydınlatma 0.4.3 dplyr 1.1.2
dtplyr 1.3.1 e1071 1.7-13 üç nokta 0.3.2
değerlendir 0.21 fansi 1.0.4 farver 2.1.1
fastmap 1.1.1 fontawesome 0.5.1 forcats 1.0.0
foreach 1.5.2 Yabancı 0.8-85 Forge 0.2.0
Fs 1.6.2 Gelecek 1.33.0 future.apply 1.11.0
Gargara 1.5.1 Generics 0.1.3 gert 1.9.2
ggplot2 3.4.2 gh 1.4.0 gitcreds 0.1.2
glmnet 4.1-7 Globals 0.16.2 Tutkal 1.6.2
googledrive 2.1.1 googlesheets4 1.1.1 Gower 1.0.1
grafikler 4.3.1 grDevices 4.3.1 Kılavuz 4.3.1
gridExtra 2.3 gsubfn 0.7 gtable 0.3.3
sabit hat 1.3.0 Haven 2.5.3 daha yüksek 0.10
Hms 1.1.3 htmltools 0.5.5 htmlwidgets 1.6.2
httpuv 1.6.11 httr 1.4.6 httr2 0.2.3
Kimlik 1.0.1 ını 0.3.1 ipred 0.9-14
isoband 0.2.7 Yineleyicilerde 1.0.14 jquerylib 0.1.4
jsonlite 1.8.7 KernSmooth 2.23-21 örgü örme 1,43
Etiketleme 0.4.2 Sonra 1.3.1 Kafes 0.21-8
Lav 1.7.2.1 yaşam döngüsü 1.0.3 dinleyici 0.9.0
lubridate 1.9.2 magrittr 2.0.3 markdown 1.7
MASS 7.3-60 Matris 1.5-4.1 not defteri 2.0.1
yöntemler 4.3.1 mgcv 1.8-42 Mıme 0,12
miniUI 0.1.1.1 ModelMetrics 1.2.2.2 modelleyici 0.1.11
munsell 0.5.0 nlme 3.1-163 nnet 7.3-19
numDeriv 2016.8-1.1 openssl 2.0.6 parallel 4.3.1
paralel olarak 1.36.0 Ayağı 1.9.0 pkgbuild 1.4.2
pkgconfig 2.0.3 pkgdown 2.0.7 pkgload 1.3.2.1
plogr 0.2.0 plyr 1.8.8 Övgü 1.0.0
prettyunits 1.1.1 Yordam 1.18.4 processx 3.8.2
prodlim 2023.03.31 profvis 0.3.8 ilerleme 1.2.2
ilerleme durumu 0.13.0 Söz 1.2.0.1 Proto 1.0.0
Proxy 0.4-27 Ps 1.7.5 purrr 1.0.1
r2d3 0.2.6 R6 2.5.1 ragg 1.2.5
randomForest 4.7-1.1 rappdirs 0.3.3 rcmdcheck 1.4.0
RColorBrewer 1.1-3 Rcpp 1.0.11 RcppEigen 0.3.3.9.3
readr 2.1.4 readxl 1.4.3 yemek tarifleri 1.0.6
Rövanş 1.0.1 rematch2 2.1.2 Kumanda 2.4.2
reprex 2.0.2 yeniden şekillendirme2 1.4.4 rlang 1.1.1
rmarkdown 2.23 RODBC 1.3-20 roxygen2 7.2.3
rpart 4.1.21 rprojroot 2.0.3 Rserve 1.8-11
RSQLite 2.3.1 rstudioapi 0.15.0 ters çevirmeler 2.1.2
rvest 1.0.3 Sass 0.4.6 Terazi 1.2.1
seçici 0.4-2 sessioninfo 1.2.2 Şekil 1.4.6
Parlak 1.7.4.1 sourcetools 0.1.7-1 sparklyr 1.8.1
Kayma 7.3-15 Splines 4.3.1 sqldf 0.4-11
KAREM 2021.1 Istatistik 4.3.1 istatistikler4 4.3.1
stringi 1.7.12 dizeleyici 1.5.0 Hayatta kalma 3.5-5
sys 3.4.2 systemfonts 1.0.4 tcltk 4.3.1
test edin 3.1.10 metin şekillendirme 0.3.6 Türk 3.2.1
derleyici 1.3.0 tidyselect 1.2.0 tidyverse 2.0.0
zaman değişimi 0.2.0 timeDate 4022.108 tinytex 0,45
araçlar 4.3.1 tzdb 0.4.0 urlchecker 1.0.1
usethis 2.2.2 utf8 1.2.3 Yardımcılar 4.3.1
uuid 1.1-0 vctr'lar 0.6.3 viridisLite 0.4.2
Vroom 1.6.3 Waldo 0.5.1 Bıyık 0.4.1
withr 2.5.0 xfun 0,39 xml2 1.3.5
xopen 1.0.0 xtable 1.8-4 yaml 2.3.7
Zip 2.3.0

Yüklü Java ve Scala kitaplıkları (Scala 2.12 küme sürümü)

Grup Kimliği Yapıt Kimliği Sürüm
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.12.390
com.amazonaws aws-java-sdk-cloudformation 1.12.390
com.amazonaws aws-java-sdk-cloudfront 1.12.390
com.amazonaws aws-java-sdk-cloudhsm 1.12.390
com.amazonaws aws-java-sdk-cloudsearch 1.12.390
com.amazonaws aws-java-sdk-cloudtrail 1.12.390
com.amazonaws aws-java-sdk-cloudwatch 1.12.390
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.390
com.amazonaws aws-java-sdk-codedeploy 1.12.390
com.amazonaws aws-java-sdk-cognitoidentity 1.12.390
com.amazonaws aws-java-sdk-cognitosync 1.12.390
com.amazonaws aws-java-sdk-config 1.12.390
com.amazonaws aws-java-sdk-core 1.12.390
com.amazonaws aws-java-sdk-datapipeline 1.12.390
com.amazonaws aws-java-sdk-directconnect 1.12.390
com.amazonaws aws-java-sdk-directory 1.12.390
com.amazonaws aws-java-sdk-dynamodb 1.12.390
com.amazonaws aws-java-sdk-ec2 1.12.390
com.amazonaws aws-java-sdk-ecs 1.12.390
com.amazonaws aws-java-sdk-efs 1.12.390
com.amazonaws aws-java-sdk-elasticache 1.12.390
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.390
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.390
com.amazonaws aws-java-sdk-elastictranscoder 1.12.390
com.amazonaws aws-java-sdk-emr 1.12.390
com.amazonaws aws-java-sdk-glacier 1.12.390
com.amazonaws aws-java-sdk-glue 1.12.390
com.amazonaws aws-java-sdk-iam 1.12.390
com.amazonaws aws-java-sdk-importexport 1.12.390
com.amazonaws aws-java-sdk-kinesis 1.12.390
com.amazonaws aws-java-sdk-kms 1.12.390
com.amazonaws aws-java-sdk-lambda 1.12.390
com.amazonaws aws-java-sdk-logs 1.12.390
com.amazonaws aws-java-sdk-machinelearning 1.12.390
com.amazonaws aws-java-sdk-opsworks 1.12.390
com.amazonaws aws-java-sdk-rds 1.12.390
com.amazonaws aws-java-sdk-redshift 1.12.390
com.amazonaws aws-java-sdk-route53 1.12.390
com.amazonaws aws-java-sdk-s3 1.12.390
com.amazonaws aws-java-sdk-ses 1.12.390
com.amazonaws aws-java-sdk-simpledb 1.12.390
com.amazonaws aws-java-sdk-simpleworkflow 1.12.390
com.amazonaws aws-java-sdk-sns 1.12.390
com.amazonaws aws-java-sdk-sqs 1.12.390
com.amazonaws aws-java-sdk-ssm 1.12.390
com.amazonaws aws-java-sdk-storagegateway 1.12.390
com.amazonaws aws-java-sdk-sts 1.12.390
com.amazonaws aws-java-sdk-support 1.12.390
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.390
com.amazonaws jmespath-java 1.12.390
com.clearspring.analytics akış 2.9.6
com.databricks Rserve 1.8-3
com.databricks databricks-sdk-java 0.13.0
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo gölgeli 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml Classmate 1.3.4
com.fasterxml.jackson.core jackson-annotations 2.15.2
com.fasterxml.jackson.core jackson-core 2.15.2
com.fasterxml.jackson.core jackson-databind 2.15.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.15.2
com.fasterxml.jackson.dataformat jackson-dataformat-yaml 2.15.2
com.fasterxml.jackson.datatype jackson-datatype-joda 2.15.2
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.15.1
com.fasterxml.jackson.module jackson-module-paranamer 2.15.2
com.fasterxml.jackson.module jackson-module-scala_2.12 2.15.2
com.github.ben-manes.caffeine Kafein 2.9.3
com.github.fommil jniloader 1.1
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java 1.1-natives
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java 1.1-natives
com.github.fommil.netlib netlib-native_ref-linux-x86_64 1.1-natives
com.github.fommil.netlib netlib-native_system-linux-x86_64 1.1-natives
com.github.luben zstd-jni 1.5.5-4
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.10.1
com.google.crypto.tink Tink 1.9.0
com.google.errorprone error_prone_annotations 2.10.0
com.google.flatbuffers flatbuffers-java 1.12.0
com.google.guava Guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.helger Profiler 1.1.1
com.jcraft jsch 0.1.55
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.microsoft.sqlserver mssql-jdbc 11.2.2.jre8
com.ning compress-lzf 1.1.2
com.sun.mail javax.mail 1.5.2
com.sun.xml.bind jaxb-core 2.2.11
com.sun.xml.bind jaxb-impl 2.2.11
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.uber h3 3.7.3
com.univocity univocity-ayrıştırıcıları 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.5.0
commons-codec commons-codec 1.16.0
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.5
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.13.0
commons-lang commons-lang 2,6
commons-logging commons-logging 1.1.3
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 3.0.3
dev.ludovic.netlib Blas 3.0.3
dev.ludovic.netlib lapack 3.0.3
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0.25
io.delta delta-sharing-client_2.12 1.0.3
io.dropwizard.metrics metrics-annotation 4.2.19
io.dropwizard.metrics metrics-core 4.2.19
io.dropwizard.metrics metrics-graphite 4.2.19
io.dropwizard.metrics metrics-healthchecks 4.2.19
io.dropwizard.metrics metrics-jetty9 4.2.19
io.dropwizard.metrics metrics-jmx 4.2.19
io.dropwizard.metrics metrics-json 4.2.19
io.dropwizard.metrics metrics-jvm 4.2.19
io.dropwizard.metrics metrics-servlets 4.2.19
io.netty netty-all 4.1.96.Final
io.netty netty-buffer 4.1.96.Final
io.netty netty-codec 4.1.96.Final
io.netty netty-codec-http 4.1.96.Final
io.netty netty-codec-http2 4.1.96.Final
io.netty netty-codec-socks 4.1.96.Final
io.netty netty-common 4.1.96.Final
io.netty netty-handler 4.1.96.Final
io.netty netty-handler-proxy 4.1.96.Final
io.netty netty-resolver 4.1.96.Final
io.netty netty-tcnative-boringssl-static 2.0.61.Final-linux-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-linux-x86_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-osx-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-osx-x86_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-windows-x86_64
io.netty netty-tcnative-classes 2.0.61.Final
io.netty netty-transport 4.1.96.Final
io.netty netty-transport-classes-epoll 4.1.96.Final
io.netty netty-transport-classes-kqueue 4.1.96.Final
io.netty netty-transport-native-epoll 4.1.96.Final
io.netty netty-transport-native-epoll 4.1.96.Final-linux-aarch_64
io.netty netty-transport-native-epoll 4.1.96.Final-linux-x86_64
io.netty netty-transport-native-kqueue 4.1.96.Final-osx-aarch_64
io.netty netty-transport-native-kqueue 4.1.96.Final-osx-x86_64
io.netty netty-transport-native-unix-common 4.1.96.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx Toplayıcı 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation etkinleştirme 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction transaction-api 1.1
javax.xml.bind jaxb-api 2.2.11
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.12.1
net.java.dev.jna Jna 5.8.0
net.razorvine Turşu 1.3
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv süper csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.9.3
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.9.16
org.apache.ant ant-jsch 1.9.16
org.apache.ant ant-launcher 1.9.16
org.apache.arrow ok biçimi 12.0.1
org.apache.arrow ok-bellek çekirdeği 12.0.1
org.apache.arrow ok-bellek-netty 12.0.1
org.apache.arrow ok-vektör 12.0.1
org.apache.avro avro 1.11.2
org.apache.avro avro-ipc 1.11.2
org.apache.avro avro eşlemeli 1.11.2
org.apache.commons commons-collections4 4.4
org.apache.commons commons-compress 1.23.0
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.6.1
org.apache.commons commons-text 1.10.0
org.apache.curator curator-client 2.13.0
org.apache.curator küratör çerçevesi 2.13.0
org.apache.curator curator-recipes 2.13.0
org.apache.datasketches datasketches-java 3.1.0
org.apache.datasketches datasketches-memory 2.0.0
org.apache.derby Derby 10.14.2.0
org.apache.hadoop hadoop-client-runtime 3.3.6
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive hive-shims 2.3.9
org.apache.hive hive-storage-api 2.8.1
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.httpcomponents httpclient 4.5.14
org.apache.httpcomponents httpcore 4.4.16
org.apache.ivy sarmaşık 2.5.1
org.apache.logging.log4j log4j-1.2-api 2.20.0
org.apache.logging.log4j log4j-api 2.20.0
org.apache.logging.log4j log4j-core 2.20.0
org.apache.logging.log4j log4j-slf4j2-impl 2.20.0
org.apache.orc orc-core 1.9.2 gölgeli-protobuf
org.apache.orc orc-mapreduce 1.9.2 gölgeli-protobuf
org.apache.orc orc-shims 1.9.2
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.ws.xmlschema xmlschema-core 2.3.0
org.apache.xbean xbean-asm9 gölgeli 4.23
org.apache.yetus hedef kitle ek açıklamaları 0.13.0
org.apache.zookeeper zookeeper 3.6.3
org.apache.zookeeper zookeeper-jute 3.6.3
org.checkerframework dama-qual 3.31.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-derleyici 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.52.v20230823
org.eclipse.jetty jetty-continuation 9.4.52.v20230823
org.eclipse.jetty jetty-http 9.4.52.v20230823
org.eclipse.jetty jetty-io 9.4.52.v20230823
org.eclipse.jetty jetty-jndi 9.4.52.v20230823
org.eclipse.jetty jetty-plus 9.4.52.v20230823
org.eclipse.jetty jetty-proxy 9.4.52.v20230823
org.eclipse.jetty jetty-security 9.4.52.v20230823
org.eclipse.jetty jetty-server 9.4.52.v20230823
org.eclipse.jetty jetty-servlet 9.4.52.v20230823
org.eclipse.jetty jetty-servlets 9.4.52.v20230823
org.eclipse.jetty jetty-util 9.4.52.v20230823
org.eclipse.jetty jetty-util-ajax 9.4.52.v20230823
org.eclipse.jetty jetty-webapp 9.4.52.v20230823
org.eclipse.jetty jetty-xml 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-api 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-client 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-common 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-server 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-servlet 9.4.52.v20230823
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-bulucu 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.40
org.glassfish.jersey.containers jersey-container-servlet-core 2.40
org.glassfish.jersey.core jersey-client 2.40
org.glassfish.jersey.core jersey-common 2.40
org.glassfish.jersey.core jersey-server 2.40
org.glassfish.jersey.inject jersey-hk2 2.40
org.hibernate.validator hibernate-validator 6.1.7.Final
org.ini4j ini4j 0.5.4
org.javassist javassist 3.29.2-GA
org.jboss.logging jboss günlüğü 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains Ek açıklama -ları 17.0.0
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.8.0
org.mlflow mlflow-spark_2.12 2.9.1
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.6.0
org.roaringbitmap RoaringBitmap 0.9.45
org.roaringbitmap dolgular 0.9.45
org.rocksdb rocksdbjni 8.3.2
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.15
org.scala-lang scala-library_2.12 2.12.15
org.scala-lang scala-reflect_2.12 2.12.15
org.scala-lang.modules scala-collection-compat_2.12 2.11.0
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt test arabirimi 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.2.15
org.scalanlp breeze-macros_2.12 2.1.0
org.scalanlp breeze_2.12 2.1.0
org.scalatest sca en son uyumlu 3.2.15
org.scalatest scalatest-core_2.12 3.2.15
org.scalatest scalatest-diagrams_2.12 3.2.15
org.scalatest scalatest-featurespec_2.12 3.2.15
org.scalatest scalatest-flatspec_2.12 3.2.15
org.scalatest scalatest-freespec_2.12 3.2.15
org.scalatest scalatest-funspec_2.12 3.2.15
org.scalatest scalatest-funsuite_2.12 3.2.15
org.scalatest scalatest-matchers-core_2.12 3.2.15
org.scalatest scalatest-mustmatchers_2.12 3.2.15
org.scalatest scalatest-propspec_2.12 3.2.15
org.scalatest scalatest-refspec_2.12 3.2.15
org.scalatest scalatest-shouldmatchers_2.12 3.2.15
org.scalatest scalatest-wordspec_2.12 3.2.15
org.scalatest scalatest_2.12 3.2.15
org.slf4j jcl-over-slf4j 2.0.7
org.slf4j jul-to-slf4j 2.0.7
org.slf4j slf4j-api 2.0.7
org.slf4j slf4j-simple 1.7.25
org.threeten threeten-extra 1.7.1
org.tukaani Xz 1.9
org.typelevel algebra_2.12 2.0.1
org.typelevel cats-kernel_2.12 2.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.1.3.Final
org.xerial sqlite-jdbc 3.42.0.0
org.xerial.snappy snappy-java 1.1.10.3
org.yaml snakeyaml 2.0
Oro Oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.cryptools AmazonCorrettoCryptoProvider 1.6.1-linux-x86_64
software.amazon.ion ion-java 1.0.2
Stax stax-api 1.0.1