Databricks Runtime 14.3 LTS
Aşağıdaki sürüm notları, Apache Spark 3.5.0 tarafından desteklenen Databricks Runtime 14.3 LTS hakkında bilgi sağlar.
Databricks bu görüntüleri Şubat 2024'te yayımladı.
Yeni özellikler ve geliştirmeler
- Photon olmadan silme vektör
MERGE
iyileştirmeleri desteği - Spark kataloğu API'leri artık paylaşılan erişim modunda tam olarak destekleniyor
- Delta UniForm genel kullanıma sunuldu
- Yeni SQL işlevi EXECUTE IMMEDIATE
- Delta tabloları için istatistikleri atlayan verileri yeniden derleme
- Durum bilgisi olan akış sorguları için sorgu durumu bilgileri
- Paylaşılan kümelerde Kafka kimlik doğrulaması için Microsoft Entra Id (eski adıyla Azure Active Directory) kullanma
- Sorgu performansını geliştirmek için dosya ve bölüm ayıklama desteği eklendi
- SQL Oturumunda geçici değişkenleri bildirme
- Kullanılmayan özellikleri kaldırmak için Thriftserver güncelleştirmeleri
- Unity Kataloğu birimlerinde truststore ve keystore dosyalarını kullanma
- Yerel XML dosya biçimi desteği (Genel Önizleme)
- Cloudflare R2 depolama desteği (Genel Önizleme)
- Paylaşılan erişimli Unity Kataloğu kümelerinde Spark ve dbutils çalışma alanı dosyalarına erişim desteği
- Paylaşılan erişimli Unity Kataloğu kümelerinde başlatma betikleri ve küme kitaplığı desteği
Photon olmadan silme vektör MERGE
iyileştirmeleri desteği
Silme vektörleri iyileştirmelerinden yararlanan işlemler için MERGE
foton artık gerekli değildir. Bkz . Silme vektörleri nedir?.
Spark kataloğu API'leri artık paylaşılan erişim modunda tam olarak destekleniyor
Artık paylaşılan erişim moduyla yapılandırılmış işlemde hem Python hem de Scala'daki API'deki tüm işlevleri spark.catalog
kullanabilirsiniz.
Delta UniForm genel kullanıma sunuldu
UniForm artık genel kullanıma sunulmuştur ve tablo özelliğini kullanır IcebergCompatV2
. Artık var olan tablolarda UniForm'un etkinleştirilmesini veya yükseltilebilmesini sağlayabilirsiniz. Bkz . Delta Tablolarını Iceberg istemcileriyle okumak için UniForm kullanma.
Yeni SQL işlevi EXECUTE IMMEDIATE
Artık SQL'de parametreli sorguları desteklemek için EXECUTE IMMEDIATE söz dizimini kullanabilirsiniz. Bkz. HEMEN YÜRÜTME.
Delta tabloları için istatistikleri atlayan verileri yeniden derleme
Artık veri atlama için kullanılan sütunları değiştirdikten sonra Delta günlüğünde depolanan istatistikleri yeniden derleyebilirsiniz. Bkz . Delta istatistik sütunlarını belirtme.
Durum bilgisi olan akış sorguları için sorgu durumu bilgileri
Artık Yapılandırılmış Akış durumu verilerini ve meta verilerini sorgulayabilirsiniz. Bkz . Yapılandırılmış Akış durumu bilgilerini okuma.
Paylaşılan kümelerde Kafka kimlik doğrulaması için Microsoft Entra Id (eski adıyla Azure Active Directory) kullanma
Artık paylaşılan erişim moduyla yapılandırılmış işlemde Microsoft Entra ID ile OAuth aracılığıyla Event Hubs hizmetlerinin kimliğini doğrulayabilirsiniz. Bkz. Microsoft Entra Id (eski adıyla Azure Active Directory) ve Azure Event Hubs ile Hizmet Sorumlusu kimlik doğrulaması.
Sorgu performansını geliştirmek için dosya ve bölüm ayıklama desteği eklendi
JOIN koşullarında null toleranslı eşitliğe dayanan bazı sorguları hızlandırmak için EqualNullSafe
artık DynamicFilePruning
JOIN'lerde işlecini destekliyoruzDynamicPartitionPruning
.
SQL Oturumunda geçici değişkenleri bildirme
Bu sürüm, bir oturumda, sorgular içinden ayarlanabilen ve sonra başvurulabilen geçici değişkenleri bildirme özelliğini tanıtır. Bkz. Değişkenler.
Kullanılmayan özellikleri kaldırmak için Thriftserver güncelleştirmeleri
Thriftserver kodu, eski özelliklerin kodunu kaldıracak şekilde güncelleştirildi. Bu değişiklikler nedeniyle aşağıdaki yapılandırmalar artık desteklenmiyor:
- Özelliği kullanılarak
hive.aux.jars.path
yapılandırılan Hive yardımcı JAR'leri artık bağlantılar içinhive-thriftserver
desteklenmemektedir. - Konumu özelliği veya
HIVE_CONF_DIR
ortam değişkeni kullanılarakhive.server2.global.init.file.location
yapılandırılan Hive genel başlatma dosyası ().hiverc
artık bağlantılar içinhive-thriftserver
desteklenmemektedir.
Unity Kataloğu birimlerinde truststore ve keystore dosyalarını kullanma
Artık Unity Kataloğu birimlerindeki truststore ve keystore dosyalarını kullanarak avro veya protokol arabellek verileri için Confluent Schema Registry'de kimlik doğrulaması yapabilirsiniz. Avro veya protokol arabellekleri belgelerine bakın.
Yerel XML dosya biçimi desteği (Genel Önizleme)
Yerel XML dosya biçimi desteği artık Genel Önizleme aşamasındadır. XML dosya biçimi desteği, xml verilerini toplu işleme veya akış için alma, sorgulama ve ayrıştırma işlemlerini etkinleştirir. Şema ve veri türlerini otomatik olarak çıkarıp geliştirebilir, gibi from_xml
SQL ifadelerini destekler ve XML belgeleri oluşturabilir. Dış jar'lar gerektirmez ve Otomatik Yükleyici, read_files
, COPY INTO
ve Delta Live Tablolarıyla sorunsuz çalışır. Bkz. XML dosyalarını okuma ve yazma.
Cloudflare R2 depolama desteği (Genel Önizleme)
Artık Cloudflare R2'i Unity Kataloğu'nda kayıtlı veriler için bulut depolama alanı olarak kullanabilirsiniz. Cloudflare R2 öncelikli olarak, veriler bölgeler arasında geçiş yaparken bulut sağlayıcıları tarafından ücretlendirilen veri çıkış ücretlerinden kaçınmak istediğiniz Delta Paylaşımı kullanım durumlarına yöneliktir. R2 depolama, AWS S3, Azure Data Lake Storage 2. Nesil ve Google Cloud Depolama'da desteklenen tüm Databricks verilerini ve yapay zeka varlıklarını destekler. Bkz. Cloudflare R2 çoğaltmalarını kullanma veya depolamayı R2'ye geçirme ve Cloudflare R2'ye bağlanmak için depolama kimlik bilgisi oluşturma.
Paylaşılan erişimli Unity Kataloğu kümelerinde Spark ve dbutils çalışma alanı dosyalarına erişim desteği
Spark ve dbutils
çalışma alanı dosyalarına okuma ve yazma erişimi artık paylaşılan erişim modunda Unity Kataloğu kümelerinde desteklenmektedir. Bkz . Çalışma alanı dosyalarıyla çalışma.
Paylaşılan erişimli Unity Kataloğu kümelerinde başlatma betikleri ve küme kitaplığı desteği
Küme ilkeleri kullanılarak yükleme de dahil olmak üzere paylaşılan erişim modundaki Unity Kataloğu kümelerine küme kapsamlı başlatma betiklerinin ve Python ve JAR kitaplıklarınınyüklenmesi genel kullanıma sunulmuştur. Databricks, Unity Kataloğu birimlerinden başlatma betiklerinin ve kitaplıklarının yüklenmesini önerir.
Kitaplık yükseltmeleri
- Yükseltilen Python kitaplıkları:
- 2.19.0 ile 2.19.1 arasındaki fastjsonschema
- 3.12.4 ile 3.13.1 arasında dosya kilidi
- 1.61.0 ile 1.62.0 arası googleapis-common-protos
- paketleme 22.0 ile 23.2
- Yükseltilen R kitaplıkları:
- 0,8-82 ile 0,8-85 arası yabancı
- nlme from 3.1-162 to 3.1-163
- rpart from 4.1.19 to 4.1.21
- Yükseltilen Java kitaplıkları:
- 0.7.0 ile 0.13.0 arası com.databricks.databricks-sdk-java
- org.apache.orc.orc-core 1.9.1-shaded-protobuf ile 1.9.2-shaded-protobuf
- org.apache.orc.orc-mapreduce from 1.9.1-shaded-protobuf to 1.9.2-shaded-protobuf
- org.apache.orc.orc-shims 1.9.1 ile 1.9.2 arası
- 2.9.0 ile 2.11.0 arası org.scala-lang.modules.scala-collection-compat_2.12
Apache Spark
Databricks Runtime 14.3, Apache Spark 3.5.0'ı içerir. Bu sürüm, Databricks Runtime 14.2'deki tüm Spark düzeltmeleri ve iyileştirmelerinin yanı sıra Spark'ta yapılan aşağıdaki ek hata düzeltmelerini ve iyileştirmeleri içerir:
- [SPARK-46541] [SC-153546] [SQL] [BAĞLAN] Kendi kendine birleştirmede belirsiz sütun başvurularını düzeltme
- [SPARK-45433] "[SC-145163][SQL] CSV/JSON şema çıkarımlarını düzeltme...
- [SPARK-46723] [14.3] [SASP-2792] [SC-153425] [BAĞLAN] [SCALA] addArtifact'i yeniden denenebilir hale getirme
- [SPARK-46660] [SC-153391] [BAĞLAN] ReattachExecute, SessionHolder'ın güncelleştirme canlılığını istiyor
- [SPARK-46670] [SC-153273] [PYTHON] [SQL] Statik ve çalışma zamanı Python Veri Kaynaklarını ayırarak DataSourceManager'ın kendi kendini kopyalayabilmesini sağlama
- [SPARK-46720] [SC-153410] [SQL] [PYTHON] Python Veri Kaynağını diğer DSv2 yerleşik Veri Kaynaklarıyla uyumlu olacak şekilde yeniden düzenleme
- [SPARK-46684] [SC-153275] [PYTHON] [BAĞLAN] Bağımsız değişkenleri düzgün geçirmek için CoGroup.applyInPandas/Arrow düzeltmesi
- [SPARK-46667] [SC-153271] [SC-153263] [SQL] XML: Birden çok XML veri kaynağında hata oluşturma
- [SPARK-46382] [SC-151881] [SQL] XML: Default ignoreSurroundingSpaces to true
- [SPARK-46382] [SC-153178] [SQL] XML: Için belgeyi güncelleştirme
ignoreSurroundingSpaces
- [SPARK-45292] "[SC-151609][SQL][HIVE] IsolatedClientLoader'dan paylaşılan sınıflardan Guava'yi kaldırma"
- [SPARK-45292] [SC-151609] [SQL] [HIVE] IsolatedClientLoader'dan paylaşılan sınıflardan Guava'nın kaldırılması
- [SPARK-46311] [SC-150137] [CORE] Sırasında sürücülerin son durumunu günlüğe kaydetme
Master.removeDriver
- [SPARK-46413] [SC-151052] [PYTHON] Ok Python UDF'sinin returnType değerini doğrulama
- [SPARK-46633] [WARMFIX] [SC-153092] [SQL] Avro okuyucusu sıfır uzunluklu blokları işleyecek şekilde düzeltilir
- [SPARK-46537] [SC-151286] [SQL] NPE ve onayları komutlardan iç hatalara dönüştürme
- [SPARK-46179] [SC-151678] [SQL] Postgres'den başlayarak diğer DBMS'lerle altın dosyalara karşı diğer DBMS'yi çalıştıran CrossDbmsQueryTestSuites ekleyin
- [SPARK-44001] [SC-151413] [PROTOBUF] İyi bilinen sarmalayıcı türlerinin unwrapping protobuf'a izin vermek için seçenek ekleme
- [SPARK-40876] [SC-151786] [SQL] Parquet okuyucularında daha büyük ölçekli ondalıklar için genişletme türü yükseltmesi
- [SPARK-46605] [SC-151769] [BAĞLAN] Connect modülü desteğinde işlev yapma
lit/typedLit
s.c.immutable.ArraySeq
- [SPARK-46634] [SC-153005] [SQL] değişmez değer doğrulaması null alanlara detaya gitmemelidir
- [SPARK-37039] [SC-153094] [PS] Eksik değerle düzgün çalışmak için düzeltme
Series.astype
- [SPARK-46312] [SC-150163] [CORE] Kullanım
lower_camel_case
alanı:store_types.proto
- [SPARK-46630] [SC-153084] [SQL] XML: Yazma işleminde XML öğesi adını doğrulama
- [SPARK-46627] [SC-152981] [SS] [UI] Akış kullanıcı arabiriminde zaman çizelgesi araç ipucu içeriğini düzeltme
- [SPARK-46248] [SC-151774] [SQL] XML: ignoreCorruptFiles ve ignoreMissingFiles seçenekleri desteği
- [SPARK-46386] [SC-150766] [PYTHON] Gözlem onaylarını geliştirme (pyspark.sql.gözlem)
- [SPARK-46581] [SC-151789] [CORE] AccumulatorV2'de isZero ile ilgili açıklamayı güncelleştirme
- [SPARK-46601] [SC-151785] [CORE] handleStatusMessage'daki günlük hatalarını düzeltme
- [SPARK-46568] [SC-151685] [PYTHON] Python veri kaynağı seçeneklerini büyük/küçük harfe duyarlı olmayan bir sözlük yapma
- [SPARK-46611] [SC-151783] [CORE] SimpleDateFormat yerine DateTimeFormatter yazarak ThreadLocal'ı kaldırma
- [SPARK-46604] [SC-151768] [SQL] Destek olun
Literal.apply
s.c.immuable.ArraySeq
- [SPARK-46324] [SC-150223] [SQL] [PYTHON] pyspark.sql.functions.user ve session_user çıkış adını düzeltme
- [SPARK-46621] [SC-151794] [PYTHON] Py4J tarafından yakalanan özel durumda Exception.getMessage'dan null değerini adresle
- [SPARK-46598] [SC-151767] [SQL] OrcColumnarBatchReader eksik sütun için sütun vektörleri oluştururken bellek moduna saygı duymalıdır
- [SPARK-46613] [SC-151778] [SQL] [PYTHON] Python Veri Kaynakları'nı arayamadığında günlük tam özel durumu
- [SPARK-46559] [SC-151364] [MLLIB]
export
paket adının içindeki öğesini ters köşelerle sarmalama - [SPARK-46522] [SC-151784] [PYTHON] Ad çakışmalarıyla Python veri kaynağı kaydını engelleme
- [SPARK-45580] [SC-149956] [SQL] İç içe alt sorguların varoluş birleşimine dönüştüğü durumu işleme
- [SPARK-46609] [SC-151714] [SQL] BölümlemePreservingUnaryExecNode'da üstel patlamadan kaçının
- [SPARK-46535] [SC-151288] [SQL] Sütun istatistikleri olmadan genişletilmiş bir sütun açıklandığında NPE düzeltildi
- [SPARK-46599] [SC-147661] [SC-151770] [SQL] XML: Uyumluluk denetimi için TypeCoercion.findTightestCommonType kullanın
- [SPARK-40876] [SC-151129] [SQL] Parquet okuyucularında tür yükseltmelerini genişletme
- [SPARK-46179] [SC-151069] [SQL] SQLQueryTestSuite'ta kodu yeniden kullanılabilir işlevlere çekme
- [SPARK-46586] [SC-151679] [SQL] Şu destekte olduğu gibi
customCollectionCls
desteks.c.immutable.ArraySeq
:MapObjects
- [SPARK-46585] [SC-151622] [CORE]
metricPeaks
içinde kullanmakmutable.ArraySeq.toSeq
yerine doğrudan birimmutable.ArraySeq
olarakExecutor
- [SPARK-46488] [SC-151173] [SQL] Zaman damgası ayrıştırma sırasında trimTüm çağrı atlanıyor
- [SPARK-46231] [SC-149724] [PYTHON] Kalan
NotImplementedError
tüm &TypeError
değerini PySpark hata çerçevesine geçirme - [SPARK-46348] [SC-150281] [CORE] Destek
spark.deploy.recoveryTimeout
- [SPARK-46313] [SC-150164] [CORE] Günlük
Spark HA
kurtarma süresi - [SPARK-46358] [SC-150307] [BAĞLAN] Koşul denetimini basitleştirin
ResponseValidator#verifyResponse
- [SPARK-46380] [SC-151078] [SQL] Satır içi tablo ifadelerini değerlendirmeden önce geçerli saati/tarihi değiştirin.
- [SPARK-46563] [SC-151441] [SQL] conf spark.sql.debug.maxToStringFields'i izlemeyen simpleString'i görüntüleyin
- [SPARK-46101] [SC-149211] [CORE] [SQL] [MLLIB] [SS] [R] [CONNCT] [GRAPHX] (dize|dizi).size değerini (dize|dizi).length ile değiştirerek yığın derinliğini azaltın
- [SPARK-46539] [SC-151469] [SQL] SELECT * EXCEPT(bir yapıdaki tüm alanlar) onay hatasına neden olur
- [SPARK-46565] [SC-151414] [PYTHON] Python veri kaynakları için hata sınıflarını ve hata iletilerini iyileştirme
- [SPARK-46576] [SC-151614] [SQL] Desteklenmeyen veri kaynağı kaydetme modu için hata iletilerini iyileştirme
- [SPARK-46540] [SC-151355] [PYTHON] Python veri kaynağı okuma işlevinin Satır nesneleri adlı çıkışları olduğunda sütun adlarını dikkate al
- [SPARK-46577] [SC-151448] [SQL] HiveMetastoreLazyInitializationSuite, hive'ın SessionState'ini sızdırıyor
- [SPARK-44556] [SC-151562] [SQL] VectorizedReader etkinleştirildiğinde yeniden kullanma
OrcTail
- [SPARK-46587] [SC-151618] [SQL] XML: XSD büyük tamsayı dönüştürmeyi düzeltme
- [SPARK-46382] [SC-151297] [SQL] XML: Öğeler arasında kesişen değerleri yakalama
- [SPARK-46567] [SC-151447] [CORE] ReadAheadInputStream için ThreadLocal'ı kaldırma
- [SPARK-45917] [SC-151269] [PYTHON] [SQL] Başlangıçta Python Veri Kaynağı'nın otomatik kaydı
- [SPARK-28386] [SC-151014] [SQL] GROUP BY ve HAVING ile ORDER BY sütunları çözümlenemiyor
- [SPARK-46524] [SC-151446] [SQL] Geçersiz kaydetme modu için hata iletilerini geliştirme
- [SPARK-46294] [SC-150672] [SQL] init ile sıfır değerinin semantiğini temizleme
- [SPARK-46301] [SC-150100] [CORE] Destek
spark.worker.(initial|max)RegistrationRetries
- [SPARK-46542] [SC-151324] [SQL] Her zaman doğru olduğundan öğesinin
c>=0
ExternalCatalogUtils#needsEscaping
denetimini kaldırın - [SPARK-46553] [SC-151360] [PS]
FutureWarning
nesne dtype ile içininterpolate
- [SPARK-45914] [SC-151312] [PYTHON] Python veri kaynağı yazma için işleme ve durdurma API'sini destekleme
- [SPARK-46543] [SC-151350] [PYTHON] [BAĞLAN] Boş alanlar için throw PySparkValueError yapma
json_tuple
- [SPARK-46520] [SC-151227] [PYTHON] Python veri kaynağı yazma için üzerine yazma modu desteği
- [SPARK-46502] [SC-151235] [SQL] UnwrapCastInBinaryComparison'da destek zaman damgası türleri
- [SPARK-46532] [SC-151279] [BAĞLAN] meta verilerinde ileti parametrelerini geçirme
ErrorInfo
- [SPARK-46397] Revert "[SC-151311][PYTHON][CONNECT] İşlevi
sha2
PySparkValueError
geçersiznumBits
" - [SPARK-46170] [SC-149472] [SQL] SparkSessionExtensions'a uyarlamalı sorgu planlayıcısı strateji kuralları ekleme desteği
- [SPARK-46444] [SC-151195] [SQL] V2SessionCatalog#createTable tabloyu yüklememelidir
- [SPARK-46397] [SC-151311] [PYTHON] [BAĞLAN] İşlev
sha2
geçersiz olarak yükseltilmelidirPySparkValueError
numBits
- [SPARK-46145] [SC-149471] [SQL] spark.catalog.listTables tablo veya görünüm bulunamadığında özel durum oluşturmuyor
- [SPARK-46272] [SC-151012] [SQL] DSv2 kaynaklarını kullanarak CTAS desteği
- [SPARK-46480] [SC-151127] [CORE] [SQL] Tablo önbelleği görev girişiminde NPE düzeltilir
- [SPARK-46100] [SC-149051] [CORE] [PYTHON] (dize|dizi).size değerini (dize|dizi).length ile değiştirerek yığın derinliğini azaltın
- [SPARK-45795] [SC-150764] [SQL] DS V2, aşağı gönderme Modunu destekler
- [SPARK-46485] [SC-151133] [SQL] V1Write gerekli olmadığında Sıralama eklememelidir
- [SPARK-46468] [SC-151121] [SQL] Anahtarları gruplandırmadan Toplama ile EXISTS alt sorguları için COUNT hatasını işleme
- [SPARK-46246] [SC-150927] [SQL] ANıNDA SQL desteği YÜRÜTME
- [SPARK-46498] [SC-151199] [CORE] Kaldırılacak
shuffleServiceEnabled
yero.a.spark.util.Utils#getConfiguredLocalDirs
- [SPARK-46440] [SC-150807] [SQL] Yeniden temel yapılandırmalarını
CORRECTED
varsayılan olarak moda ayarlayın - [SPARK-45525] [SC-151120] [SQL] [PYTHON] DSv2 kullanılarak Python veri kaynağı yazma desteği
- [SPARK-46505] [SC-151187] [BAĞLAN] içinde bayt eşiğini yapılandırılabilir hale getirme
ProtoUtils.abbreviate
- [SPARK-46447] [SC-151025] [SQL] SQL yapılandırmalarını yeniden başlatan eski tarih saatlerini kaldırma
- [SPARK-46443] [SC-151123] [SQL] Ondalık duyarlık ve ölçek, H2 diyalekt tarafından belirlenir.
- [SPARK-46384] [SC-150694] [SPARK-46404] [SS] [UI] Yapılandırılmış Akış Sayfasındaki İşlem Süresi Yığın Grafiğini Düzeltme
- [SPARK-46207] [SC-151068] [SQL] DataFrameWriterV2'de MergeInto desteği
- [SPARK-46452] [SC-151018] [SQL] Kayıtların yineleyicisini yazmak için DataWriter'a yeni bir API ekleme
- [SPARK-46273] [SC-150313] [SQL] DSv2 kaynaklarını kullanarak INSERT INTO/OVERWRITE desteği
- [SPARK-46344] [SC-150267] [CORE] Bir sürücü başarıyla mevcut olduğunda ancak ana sürücünün bağlantısı kesildiğinde düzgün bir şekilde uyarın
- [SPARK-46284] [SC-149944] [PYTHON] [BAĞLAN] Python'a işlev ekleme
session_user
- [SPARK-46043] [SC-149786] [SQL] DSv2 kaynaklarını kullanarak tablo oluşturma desteği
- [SPARK-46323] [SC-150191] [PYTHON] pyspark.sql.functions.now dosyasının çıkış adını düzeltin
- [SPARK-46465] [SC-151059] [PYTHON] [BAĞLAN] PySpark'ta ekle
Column.isNaN
- [SPARK-46456] [SC-151050] [CORE] SparkContext kapatma engelini kaldırmak için Jetty sunucusu durdurma zaman aşımını ayarlamak için ekle
spark.ui.jettyStopTimeout
- [SPARK-43427] [SC-150356] [PROTOBUF] spark protobuf: işaretsiz tamsayı türlerine yukarı yayına izin ver
- [SPARK-46399] [SC-151013] [14.x] [Çekirdek] Spark Dinleyicisi'nin kullanımı için Uygulama Sonu olayına çıkış durumu ekleme
- [SPARK-46423] [SC-150752] [PYTHON] [SQL] DataSource.lookupDataSourceV2'de Python Veri Kaynağı örneğini oluşturma
- [SPARK-46424] [SC-150765] [PYTHON] [SQL] Python Veri Kaynağı'nda Python ölçümlerini destekleme
- [SPARK-46330] [SC-151015] HybridStore etkinleştirildiğinde Spark kullanıcı arabirimi bloklarının uzun süre yüklenmesi
- [SPARK-46378] [SC-150397] [SQL] Toplamayı Project'e dönüştürdükten sonra sıralamayı kaldırmaya devam etme
- [SPARK-45506] [SC-146959] [BAĞLAN] Spark'a sarmaşık URI desteği ekleme Bağlan addArtifact
- [SPARK-45814] [SC-147871] [BAĞLAN] [SQL] Bellek sızıntısını önlemek için ArrowConverters.createEmptyArrowBatch çağrısı close() yapın
- [SPARK-46427] [SC-150759] [PYTHON] [SQL] Python Veri Kaynağı'nın açıklamasını açıklama olarak güzel olacak şekilde değiştirin
- [SPARK-45597] [SC-150730] [PYTHON] [SQL] SQL'de Python veri kaynağı kullanarak tablo oluşturma desteği (DSv2 exec)
- [SPARK-46402] [SC-150700] [PYTHON] getMessageParameters ve getQueryContext desteği ekleme
- [SPARK-46453] [SC-150897] [BAĞLAN] uygulamasından
internalError()
özel durum oluşturmaSessionHolder
- [SPARK-45758] [SC-147454] [SQL] Hadoop sıkıştırma codec'leri için eşleyici tanıtma
- [SPARK-46213] [PYTHON] Hata çerçevesi için tanıtma
PySparkImportError
- [SPARK-46230] [SC-149960] [PYTHON] PySpark'a geçiş
RetriesExceeded
hatası - [SPARK-45035] [SC-145887] [SQL] Çok satırlı CSV/JSON ile ignoreCorruptFiles/ignoreMissingFiles hata bildirecek düzeltme
- [SPARK-46289] [SC-150846] [SQL] Yorumlanmış modda UDF'leri sıralama desteği
- [SPARK-46229] [SC-150798] [PYTHON] [BAĞLAN] Spark Bağlan'da groupBy ve cogroup'a applyInArrow ekleme
- [SPARK-46420] [SC-150847] [SQL] SparkSQLCLIDriver'da kullanılmayan aktarımı kaldırma
- [SPARK-46226] [PYTHON] Kalanların
RuntimeError
tümünü PySpark hata çerçevesine geçirme - [SPARK-45796] [SC-150613] [SQL] DESTEK MODE() IN GROUP (ORDER BY col)
- [SPARK-40559] [SC-149686] [PYTHON] [14.X] groupBy ve cogroup'a applyInArrow ekleme
- [SPARK-46069] [SC-149672] [SQL] Zaman damgası türünü tarih türüne kadar açma desteği
- [SPARK-46406] [SC-150770] [SQL] Hata sınıfına ad atama _LEGACY_ERROR_TEMP_1023
- [SPARK-46431] [SC-150782] [SS] Oturum yineleyicilerinde dönüştürme
IllegalStateException
internalError
- [SPARK-45807] [SC-150751] [SQL] ViewCatalog API'sini geliştirme
- [SPARK-46009] [SC-149771] [SQL] [BAĞLAN] PercentileCont ve PercentileDisc ayrıştırma kuralını functionCall ile birleştirin
- [SPARK-46403] [SC-150756] [SQL] getBytesUnsafe yöntemiyle parquet ikili kodunu çözme
- [SPARK-46389] [SC-150779] [CORE] Özel Durum oluştururken
checkVersion
örneği el ile kapatmaRocksDB/LevelDB
- [SPARK-46360] [SC-150376] [PYTHON] Yeni
getMessage
API ile hata iletisi hata ayıklamasını geliştirme - [SPARK-46233] [SC-149766] [PYTHON] Kalanların
AttributeError
tümünü PySpark hata çerçevesine geçirme - [SPARK-46394] [SC-150599] [SQL] True olarak ayarlandığında özel karakterler
spark.sql.legacy.keepCommandOutputSchema
içeren şemalardaki spark.catalog.listDatabases() sorunlarını düzeltme - [SPARK-45964] [SC-148484] [SQL] Katalizör paketi altındaki XML ve JSON paketinde özel SQL erişimcisini kaldırma
- [SPARK-45856] [SC-148691] ArtifactManager'ı Spark Bağlan SparkSession'a taşıma (sql/core)
- [SPARK-46409] [SC-150714] [BAĞLAN] spark-connect-scala-client başlatma betiğini düzeltme
- [SPARK-46416] [SC-150699] [CORE] Ekle
@tailrec
HadoopFSUtils#shouldFilterOutPath
- [SPARK-46115] [SC-149154] [SQL] içinde karakter kümelerini kısıtlama
encode()
- [SPARK-46253] [SC-150416] [PYTHON] MapInArrow kullanarak Python veri kaynağını okumayı planlama
- [SPARK-46339] [SC-150266] [SS] Toplu iş numarası adına sahip dizin meta veri günlüğü olarak değerlendirilmemelidir
- [SPARK-46353] [SC-150396] [CORE] Birim testi kapsamını geliştirmek
RegisterWorker
için yeniden düzenleme - [SPARK-45826] [SC-149061] [SQL] DataFrame sorgu bağlamında yığın izlemeleri için SQL yapılandırması ekleme
- [SPARK-45649] [SC-150300] [SQL] OffsetWindowFunctionFrame için hazırlama çerçevesini birleştirme
- [SPARK-46346] [SC-150282] [CORE] Bir çalışanı msg'den
UNKNOWN
msg'yeRegisterWorker
güncelleştirmek içinALIVE
Ana Şablonu düzeltme - [SPARK-46388] [SC-150496] [SQL] HiveAnalysis,
query.resolved
- [SPARK-46401] [SC-150609] [CORE] şunun yerine
getCardinality() > 0
açıkRoaringBitmap
kullanın!isEmpty()
:RemoteBlockPushResolver
- [SPARK-46393] [SC-150603] [SQL] JDBC tablo kataloğunda özel durumları sınıflandırma
- [SPARK-45798] [SC-150513] [BAĞLAN] İzleme: SessionHolderInfo'ya serverSessionId ekleme
- [SPARK-46153] [SC-146564] [SC-150508] [SQL] XML: TimestampNTZType desteği ekleme
- [SPARK-46075] [SC-150393] [BAĞLAN] Spark Bağlan SessionManager geliştirmeleri
- [SPARK-46357] [SC-150596] setConf'un yanlış belge kullanımını conf.set ile değiştirme
- [SPARK-46202] [SC-150420] [BAĞLAN] Özel hedef dizinleri desteklemek için yeni ArtifactManager API'lerini kullanıma sunma
- [SPARK-45824] [SC-147648] [SQL] içinde hata sınıfını zorlama
ParseException
- [SPARK-45845] [SC-148163] [SS] [UI] Akış kullanıcı arabirimine çıkarılan durum satırlarının sayısını ekleme
- [SPARK-46316] [SC-150181] [CORE] Modülde
core
etkinleştirbuf-lint-action
- [SPARK-45816] [SC-147656] [SQL] Zaman damgasından tamsayılara dönüştürme sırasında taşma sırasında dönüş
NULL
- [SPARK-46333] [SC-150263] [SQL] katalizörde ile
SparkException.internalError
değiştirIllegalStateException
- [SPARK-45762] [SC-148486] [CORE] Başlangıç sırasını değiştirerek kullanıcı jar'larında tanımlanan karıştırma yöneticilerini destekleme
- [SPARK-46239] [SC-149752] [CORE] Bilgileri gizle
Jetty
- [SPARK-45886] [SC-148089] [SQL] DataFrame bağlamında çıkış tam yığın izlemesi
callSite
- [SPARK-46290] [SC-150059] [PYTHON] saveMode değerini DataSourceWriter için boole bayrağıyla değiştirme
- [SPARK-45899] [SC-148097] [BAĞLAN] errorInfoToThrowable'da errorClass'ı ayarlama
- [SPARK-45841] [SC-147657] [SQL] Yığın izlemesi kullanıma sunma ölçütü
DataFrameQueryContext
- [SPARK-45843] [SC-147721] [CORE] REST Gönderim API'sinde destek
killall
- [SPARK-46234] [SC-149711] [PYTHON] PySpark hata çerçevesi için tanıtma
PySparkKeyError
- [SPARK-45606] [SC-147655] [SQL] Çok katmanlı çalışma zamanı filtresinde yayın kısıtlamaları
- [SPARK-45725] [SC-147006] [SQL] Varsayılan olmayan IN alt sorgu çalışma zamanı filtresini kaldırma
- [SPARK-45694] [SC-147314] [SPARK-45695] [SQL] Kullanım dışı API kullanımını
View.force
temizleme veScalaNumberProxy.signum
- [SPARK-45805] [SC-147488] [SQL] Daha genel hale getirme
withOrigin
- [SPARK-46292] [SC-150086] [CORE] [UI] MasterPage'de çalışanların özetini gösterme
- [SPARK-45685] [SC-146881] [CORE] [SQL] Yerine kullanın
LazyList
Stream
- [SPARK-45888] [SC-149945] [SS] Durum (Meta Veri) Veri Kaynağına hata sınıfı çerçevesi uygulama
- [SPARK-46261] [SC-150111] [BAĞLAN]
DataFrame.withColumnsRenamed
dikte/harita sıralamasını korumalıdır - [SPARK-46263] [SC-149933] [SQL] [SS] [ML] [MLLIB] [UI]
SeqOps.view
Temizleme veArrayOps.view
dönüştürmeler - [SPARK-46029] [SC-149255] [SQL] Tek tırnak
_
işaretinden ve%
DS V2 anında iletme için kaçış - [SPARK-46275] [SC-150189] Protobuf: Seri durumdan çıkarma başarısız olduğunda izin verme modunda null döndürür.
- [SPARK-46320] [SC-150187] [CORE] Destek
spark.master.rest.host
- [SPARK-46092] [SC-149658] [SQL] Taşan Parquet satır grubu filtrelerini aşağı itme
- [SPARK-46300] [SC-150097] [PYTHON] [BAĞLAN] Sütunda küçük davranış eşleştirmeyi tam test kapsamıyla eşleştirme
- [SPARK-46298] [SC-150092] [PYTHON] [BAĞLAN] Catalog.createExternalTable'ın kullanımdan kaldırma uyarısını, test çalışmalarını ve hatasını eşleştirin
- [SPARK-45689] [SC-146898] [SPARK-45690] [SPARK-45691] [CORE] [SQL] ve türü kullanımıyla ilgili
StringContext/StringOps/RightProjection/LeftProjection/Either
kullanım dışı API kullanımını temizleyinBufferedIterator/CanBuildFrom/Traversable
- [SPARK-33393] [SC-148407] [SQL] v2'de SHOW TABLE EXTENDED desteği
- [SPARK-45737] [SC-147011] [SQL] 'de gereksizleri
.toArray[InternalRow]
kaldırmaSparkPlan#executeTake
- [SPARK-46249] [SC-149797] [SS] Arka plan işlemleriyle yarışı önlemek için RocksDB ölçümlerini almak için örnek kilidi gerektir
- [SPARK-46260] [SC-149940] [PYTHON] [SQL]
DataFrame.withColumnsRenamed
dikte düzenine uygun olmalıdır - [SPARK-46274] [SC-150043] [SQL] Dönüştürmeden önce uzun geçerliliği denetlemek için ComputeStats() Aralık işlecini düzeltin
- [SPARK-46040] [SC-149767] [SQL] [Python] Genel ifadeleri destekleyecek şekilde sütunları bölümleme/sıralama için 'analiz' için UDTF API'sini güncelleştirin
- [SPARK-46287] [SC-149949] [PYTHON] [BAĞLAN]
DataFrame.isEmpty
tüm veri türleriyle çalışmalıdır - [SPARK-45678] [SC-146825] [CORE] TryOrFetchFailedException altında BufferReleasingInputStream.available/reset öğesini kapsar
- [SPARK-45667] [SC-146716] [CORE] [SQL] [BAĞLAN] ile ilgili
IterableOnceExtensionMethods
kullanım dışı API kullanımını temizleyin. - [SPARK-43980] [SC-148992] [SQL] söz dizimine giriş
select * except
- [SPARK-46269] [SC-149816] [PS] Daha fazla NumPy uyumluluk işlevi testlerini etkinleştirme
- [SPARK-45807] [SC-149851] [SQL] ViewCatalog'a createOrReplaceView(..) / replaceView(..) ekleyin
- [SPARK-45742] [SC-147212] [CORE] [BAĞLAN] [MLLIB] [PYTHON] Scala Dizisi'nin içine kaydırılması için örtük bir işlev tanıtın
immutable.ArraySeq
. - [SPARK-46205] [SC-149655] [CORE] ile performansı geliştirme
PersistenceEngine
KryoSerializer
- [SPARK-45746] [SC-149359] [Python] UDTF 'çözümle' veya 'değerlendirme' yöntemi yanlış değerler kabul ederse veya döndürüyorsa belirli hata iletileri döndür
- [SPARK-46186] [SC-149707] [BAĞLAN] ExecuteThreadRunner başlamadan önce kesintiye uğradığında geçersiz durum geçişi düzeltildi
- [SPARK-46262] [SC-149803] [PS] Pandas-on-Spark nesnesi için
np.left_shift
testi etkinleştirin. - [SPARK-45093] [SC-149679] [BAĞLAN] [PYTHON] AddArtifactHandler için hata işleme ve dönüştürmeyi düzgün bir şekilde destekleme
- [SPARK-46188] [SC-149571] [Belge] [3.5] Spark belgesinin oluşturduğu tabloların CSS'sini düzeltme
- [SPARK-45940] [SC-149549] [PYTHON] DataSourceReader arabirimine InputPartition ekleme
- [SPARK-43393] [SC-148301] [SQL] Adres dizisi ifadesi taşma hatası.
- [SPARK-46144] [SC-149466] [SQL] INSERT INTO başarısız ... Koşul alt sorgu içeriyorsa REPLACE deyimi
- [SPARK-46118] [SC-149096] [SQL] [SS] [BAĞLAN] yerine
SQLContext.conf
kullanınSparkSession.sessionState.conf
ve kullanım dışı olarak işaretleyinSQLContext.conf
- [SPARK-45760] [SC-147550] [SQL] İfadelerin çoğaltılmasını önlemek için With ifadesi ekleme
- [SPARK-43228] [SC-149670] [SQL] Birleştirme anahtarları, CoalesceBucketsInJoin içindeki PartitioningCollection ile de eşleşir
- [SPARK-46223] [SC-149691] [PS] SparkPandasNotImplementedError'ı kullanılmayan kodu temizleyerek test edin
- [SPARK-46119] [SC-149205] [SQL] için geçersiz kılma
toString
yöntemiUnresolvedAlias
- [SPARK-46206] [SC-149674] [PS] SQL işlemcisi için daha dar bir kapsam özel durumu kullanma
- [SPARK-46191] [SC-149565] [CORE] Mevcut dosya durumunda hata msg'sini iyileştirme
FileSystemPersistenceEngine.persist
- [SPARK-46036] [SC-149356] [SQL] hata sınıfını raise_error işlevinden kaldırma
- [SPARK-46055] [SC-149254] [SQL] Katalog Veritabanı API'lerini yeniden yazma uygulaması
- [SPARK-46152] [SC-149454] [SQL] XML: XML şeması çıkarımına DecimalType desteği ekleme
- [SPARK-45943] [SC-149452] [SQL] DetermineTableStats'ı çözümleme kurallarına taşıma
- [SPARK-45887] [SC-148994] [SQL] codegen ve non-codegen uygulamasını uyumlu hale getirme
Encode
- [SPARK-45022] [SC-147158] [SQL] Veri kümesi API'leri hataları için bağlam sağlama
- [SPARK-45469] [SC-145135] [CORE] [SQL] [BAĞLAN] [PYTHON] şununla
iterator
değiştirtoIterator
:IterableOnce
- [SPARK-46141] [SC-149357] [SQL] spark.sql.legacy.ctePrecedencePolicy için varsayılan değeri DÜZELTİlDİ olarak değiştirin
- [SPARK-45663] [SC-146617] [CORE] [MLLIB] şununla değiştir
IterableOnceOps#aggregate
IterableOnceOps#foldLeft
- [SPARK-45660] [SC-146493] [SQL] ComputeCurrentTime kuralında Değişmez Değer nesnelerini yeniden kullanma
- [SPARK-45803] [SC-147489] [CORE] Artık kullanılmayan öğesini kaldırma
RpcAbortException
- [SPARK-46148] [SC-149350] [PS] pyspark.pandas.mlflow.load_model test düzeltmesi (Python 3.12)
- [SPARK-46110] [SC-149090] [PYTHON] Katalog, conf, connect, gözlem, pandas modüllerinde hata sınıflarını kullanma
- [SPARK-45827] [SC-149203] [SQL] Codegen ve vektörleştirilmiş okuyucu devre dışı bırakılmış değişken düzeltmeleri
- [SPARK-46080] "[SC-149012][PYTHON] Cloudpickle'i 3.0.0 sürümüne yükseltme"
- [SPARK-45460] [SC-144852] [SQL] Şununla değiştir
scala.collection.convert.ImplicitConversions
:scala.jdk.CollectionConverters
- [SPARK-46073] [SC-149019] [SQL] Belirli komutlar için UnresolvedNamespace özel çözünürlüğünü kaldırma
- [SPARK-45600] [SC-148976] [PYTHON] Python veri kaynağı kaydı oturum düzeyini belirleme
- [SPARK-46074] [SC-149063] [BAĞLAN] [SCALA] UDF hatasıyla ilgili hata iletisinde yetersiz ayrıntılar
- [SPARK-46114] [SC-149076] [PYTHON] Hata çerçevesi için PySparkIndexError ekleme
- [SPARK-46120] [SC-149083] [BAĞLAN] [PYTHON] Yardımcı işlevi kaldırma
DataFrame.withPlan
- [SPARK-45927] [SC-148660] [PYTHON] Python veri kaynağı için güncelleştirme yolu işleme
- [SPARK-46062] [14.x] [SC-148991] [SQL] isStreaming bayrağını CTE tanımı ve başvurusu arasında eşitleme
- [SPARK-45698] [SC-146736] [CORE] [SQL] [SS] ile ilgili kullanım dışı API kullanımını temizleme
Buffer
- [SPARK-46064] [SC-148984] [SQL] [SS] EliminateEventTimeWatermark'ı çözümleyiciye taşıyın ve yalnızca çözümlenen alt öğeyi etkili olacak şekilde değiştirin
- [SPARK-45922] [SC-149038] [BAĞLAN] [CLIENT] Küçük yeniden denemeler yeniden düzenleme (birden çok ilkeyi izleme)
- [SPARK-45851] [SC-148419] [BAĞLAN] [SCALA] Scala istemcisinde birden çok ilkeyi destekleme
- [SPARK-45974] [SC-149062] [SQL] RowLevelOperationRuntimeGroupFiltering için scan.filterAttributes boş olmayan bir karar ekleme
- [SPARK-46085] [SC-149049] [BAĞLAN] Scala Spark Bağlan istemcisinde Dataset.groupingSets
- [SPARK-45136] [SC-146607] [BAĞLAN] Ammonite desteği ile ClosureCleaner'ı geliştirme
- [SPARK-46084] [SC-149020] [PS] Kategorik tür için veri türü atama işlemini yeniden düzenleme.
- [SPARK-46083] [SC-149018] [PYTHON] SparkNoSuchElementException'ı kurallı hata API'si yapma
- [SPARK-46048] [SC-148982] [PYTHON] [BAĞLAN] Python Spark'ta DataFrame.groupingSets desteği Bağlan
- [SPARK-46080] [SC-149012] [PYTHON] Cloudpickle'i 3.0.0 sürümüne yükseltme
- [SPARK-46082] [SC-149015] [PYTHON] [BAĞLAN] Spark Bağlan ile Pandas İşlevleri API'sinde protobuf dize gösterimi düzeltilir
- [SPARK-46065] [SC-148985] [PS] kullanmak
create_map
için yeniden düzenleme.(DataFrame|Series).factorize()
- [SPARK-46070] [SC-148993] [SQL] SparkDateTimeUtils.getZoneId dosyasındaki regex desenini sık erişimli döngünün dışında derleme
- [SPARK-46063] [SC-148981] [PYTHON] [BAĞLAN] Sevimli, toplama, gruplandırma ve özet bağımsız değişken türleriyle ilgili hata iletilerini geliştirme
- [SPARK-44442] [SC-144120] [MESOS] Mesos desteğini kaldırma
- [SPARK-45555] [SC-147620] [PYTHON] Başarısız onay için hata ayıklanabilir bir nesne içerir
- [SPARK-46048] [SC-148871] [PYTHON] [SQL] PySpark'ta DataFrame.groupingSets desteği
- [SPARK-45768] [SC-147304] [SQL] [PYTHON] Sql'de Python yürütmesi için faulthandler'i çalışma zamanı yapılandırması yapma
- [SPARK-45996] [SC-148586] [PYTHON] [BAĞLAN] Spark Bağlan için uygun bağımlılık gereksinimi iletilerini gösterme
- [SPARK-45681] [SC-146893] [UI] Ui üzerinde tutarlı hata işleme için UIUtils.errorMessageCell'in js sürümünü kopyalama
- [SPARK-45767] [SC-147225] [CORE] Silme
TimeStampedHashMap
ve UT - [SPARK-45696] [SC-148864] [CORE] Promise özelliğinde tryCompleteWith yönteminin kullanım dışı bırakıldığında düzeltilmesi
- [SPARK-45503] [SC-146338] [SS] Set RocksDB Compression için Conf ekleme
- [SPARK-45338] [SC-143934] [CORE] [SQL] Şununla değiştir
scala.collection.JavaConverters
:scala.jdk.CollectionConverters
- [SPARK-44973] [SC-148804] [SQL] Düzeltme:
ArrayIndexOutOfBoundsException
conv()
- [SPARK-45912] [SC-144982] [SC-148467] [SQL] XSDToSchema API'sinin geliştirilmesi: Bulut depolama erişilebilirliği için HDFS API'sine geçiş
- [SPARK-45819] [SC-147570] [CORE] REST Gönderim API'sinde destek
clear
- [SPARK-45552] [14.x] [SC-146874] [PS] Için esnek parametreler ekleme
assertDataFrameEqual
- [SPARK-45815] [SC-147877] [SQL] [Akış] [14.x] [CHERRY-PICK] Sütun eklemek
_metadata
için diğer Akış kaynakları için bir arabirim sağlayın - [SPARK-45929] [SC-148692] [SQL] Dataframe API'sinde gruplamaSets işlemi desteği
- [SPARK-46012] [SC-148693] [CORE] Uygulama durumu dosyası eksikse EventLogFileReader sıralı günlükleri okumamalıdır
- [SPARK-45965] [SC-148575] [SQL] DSv2 bölümleme ifadelerini functions.partitioning içine taşıma
- [SPARK-45971] [SC-148541] [CORE] [SQL] öğesinin paket adını düzeltin
SparkCollectionUtils
:org.apache.spark.util
- [SPARK-45688] [SC-147356] [SPARK-45693] [CORE] & Fix ile ilgili
MapOps
kullanım dışı API kullanımını temizlememethod += in trait Growable is deprecated
- [SPARK-45962] [SC-144645] [SC-148497] [SQL] XML yerine kaldır
treatEmptyValuesAsNulls
ve kullannullValue
seçeneği - [SPARK-45988] [SC-148580] [SPARK-45989] [PYTHON] Python 3.11+'da GenericAlias'ı işlemek
list
için typehints düzeltildi - [SPARK-45999] [SC-148595] [PS] Ayrılmış olarak
PandasProduct
kullanmacumprod
- [SPARK-45986] [SC-148583] [ML] [PYTHON] Python 3.11'de düzeltme
pyspark.ml.torch.tests.test_distributor
- [SPARK-45994] [SC-148581] [PYTHON] Olarak değiştir
description-file
description_file
- [SPARK-45575] [SC-146713] [SQL] Df okuma API'si için zaman yolculuğu seçeneklerini destekleme
- [SPARK-45747] [SC-148404] [SS] Oturum penceresi toplama işleminin okuma durumunu işlemek için durum meta verilerinde ön ek anahtarı bilgilerini kullanma
- [SPARK-45898] [SC-148213] [SQL] Çözümlenmemiş mantıksal planı kullanmak için katalog tablosu API'lerini yeniden yazma
- [SPARK-45828] [SC-147663] [SQL] DSL'de kullanım dışı yöntemi kaldırma
- [SPARK-45990] [SC-148576] [SPARK-45987] [PYTHON] [BAĞLAN] Desteklemek için 4.25.1 sürümüne yükseltin
protobuf
Python 3.11
- [SPARK-45911] [SC-148226] [CORE] TLS1.3'i RPC SSL için varsayılan yapma
- [SPARK-45955] [SC-148429] [UI] Flamegraph ve iş parçacığı dökümü ayrıntıları için Desteği Daralt
- [SPARK-45936] [SC-148392] [PS] Optimize
Index.symmetric_difference
- [SPARK-45389] [SC-144834] [SQL] [3.5] Bölüm meta verilerini alma konusunda MetaException eşleştirme kuralını düzeltme
- [SPARK-45655] [SC-148085] [SQL] [SS] CollectMetrics'te AggregateFunctions içinde belirlenemeyen ifadelere izin ver
- [SPARK-45946] [SC-148448] [SS] RocksDBSuite'da varsayılan karakter kümesini geçirmek için kullanım dışı FileUtils yazma özelliğinin kullanımı düzeltildi
- [SPARK-45511] [SC-148285] [SS] Durum Veri Kaynağı - Okuyucu
- [SPARK-45918] [SC-148293] [PS] Optimize
MultiIndex.symmetric_difference
- [SPARK-45813] [SC-148288] [BAĞLAN] [PYTHON] Komutlardan gözlemlenen ölçümleri döndürme
- [SPARK-45867] [SC-147916] [CORE] Destek
spark.worker.idPattern
- [SPARK-45945] [SC-148418] [BAĞLAN] için yardımcı işlev ekleme
parser
- [SPARK-45930] [SC-148399] [SQL] MapInPandas/MapInArrow'da belirlenemeyen UDF'leri destekleme
- [SPARK-45810] [SC-148356] [Python] Giriş tablosundan satır kullanmayı durdurmak için Python UDTF API'sini oluşturma
- [SPARK-45731] [SC-147929] [SQL] Ayrıca komutla
ANALYZE TABLE
bölüm istatistiklerini güncelleştirin - [SPARK-45868] [SC-148355] [BAĞLAN] Vanilya spark ile aynı ayrıştırıcıyı kullandığınızdan emin
spark.table
olun - [SPARK-45882] [SC-148161] [SQL] BroadcastHashJoinExec yayma bölümlemesi CoalescedHashPartitioning'e göre olmalıdır
- [SPARK-45710] [SC-147428] [SQL] Hata _LEGACY_ERROR_TEMP_21 ad atama[59,60,61,62]
- [SPARK-45915] [SC-148306] [SQL] ondalık(x, 0) değerini içindeki IntegralType ile aynı şekilde değerlendirin
PromoteStrings
- [SPARK-45786] [SC-147552] [SQL] Hatalı Ondalık çarpma ve bölme sonuçlarını düzeltme
- [SPARK-45871] [SC-148084] [BAĞLAN] Modüllerdeki ile
.toBuffer
ilgili iyileştirmeler koleksiyonu dönüştürmesiconnect
- [SPARK-45822] [SC-147546] [BAĞLAN] Spark Bağlan SessionManager durdurulmuş bir sparkcontext arayabilir
- [SPARK-45913] [SC-148289] [PYTHON] İç öznitelikleri PySpark hatalarından özel hale getirin.
- [SPARK-45827] [SC-148201] [SQL] Spark'ta Değişken veri türü ekleyin.
- [SPARK-44886] [SC-147876] [SQL] CREATE/REPLACE TABLE için CLUSTER BY yan tümcesini tanıtma
- [SPARK-45756] [SC-147959] [CORE] Destek
spark.master.useAppNameAsAppId.enabled
- [SPARK-45798] [SC-147956] [BAĞLAN] Sunucu tarafı oturum kimliğini onaylama
- [SPARK-45896] [SC-148091] [SQL] Doğru beklenen türle oluşturma
ValidateExternalType
- [SPARK-45902] [SC-148123] [SQL] Kullanılmayan işlevi
resolvePartitionColumns
DataSource
- [SPARK-45909] [SC-148137] [SQL] Güvenli bir şekilde yukarı alabiliyorsa, yayınları kaldırın
NumericType
IsNotNull
- [SPARK-42821] [SC-147715] [SQL] splitFiles yöntemlerinde kullanılmayan parametreleri kaldırma
- [SPARK-45875] [SC-148088] [CORE] Modülden
core
kaldırMissingStageTableRowData
- [SPARK-45783] [SC-148120] [PYTHON] [BAĞLAN] Spark Bağlan modu etkinleştirildiğinde ancak uzak URL ayarlanmadığında hata iletilerini iyileştirme
- [SPARK-45804] [SC-147529] [UI] Alev grafiğini açmak/kapatmak için spark.ui.threadDump.flamegraphEnabled yapılandırması ekleme
- [SPARK-45664] [SC-146878] [SQL] Ork sıkıştırma codec'leri için eşleyici tanıtma
- [SPARK-45481] [SC-146715] [SQL] Parquet sıkıştırma codec'leri için eşleyici tanıtma
- [SPARK-45752] [SC-148005] [SQL] Başvurulmamış CTE ilişkilerini denetleme kodunu basitleştirme
- [SPARK-44752] [SC-146262] [SQL] XML: Spark Docs'ı güncelleştirme
- [SPARK-45752] [SC-147869] [SQL] Başvurulmayan CTE'nin tümü CheckAnalysis0 tarafından denetlenmelidir
- [SPARK-45842] [SC-147853] [SQL] Çözümleyici kullanmak için Katalog İşlevi API'lerini yeniden düzenleme
- [SPARK-45639] [SC-147676] [SQL] [PYTHON] DataFrameReader'da Python veri kaynaklarını yükleme desteği
- [SPARK-45592] [SC-146977] [SQL] InMemoryTableScanExec ile AQE'de doğruluk sorunu
- [SPARK-45794] [SC-147646] [SS] Akış durumu meta veri bilgilerini sorgulamak için durum meta veri kaynağını tanıtın
- [SPARK-45739] [SC-147059] [PYTHON] Hata işleyici için tek başına EOFException yerine IOException'i yakalama
- [SPARK-45677] [SC-146700] Gözlem API'sinde daha iyi hata günlüğü
- [SPARK-45544] [SC-146873] [CORE] SSL desteğini TransportContext ile tümleştirme
- [SPARK-45654] [SC-147152] [PYTHON] Python veri kaynağı yazma API'sini ekleme
- [SPARK-45771] [SC-147270] [CORE] Varsayılan olarak etkinleştir
spark.eventLog.rolling.enabled
- [SPARK-45713] [SC-146986] [PYTHON] Python veri kaynaklarını kaydetme desteği
- [SPARK-45656] [SC-146488] [SQL] Farklı veri kümelerinde aynı ada sahip gözlemler adlandırıldığında gözlemi düzeltme
- [SPARK-45808] [SC-147571] [BAĞLAN] [PYTHON] SQL Özel Durumları için daha iyi hata işleme
- [SPARK-45774] [SC-147353] [CORE] [UI] Destek
spark.master.ui.historyServerUrl
:ApplicationPage
- [SPARK-45776] [SC-147327] [CORE] SPARK-39553'te eklenen savunma
MapOutputTrackerMaster#unregisterShuffle
null denetimini kaldırma - [SPARK-45780] [SC-147410] [BAĞLAN] InheritableThread içindeki tüm Spark Bağlan istemci iş parçacıklarını yayma
- [SPARK-45785] [SC-147419] [CORE]
spark.deploy.appNumberModulo
Uygulama numarasını döndürme desteği - [SPARK-45793] [SC-147456] [CORE] Yerleşik sıkıştırma codec'lerini geliştirme
- [SPARK-45757] [SC-147282] [ML] Binarizer'da NNZ'nin yeniden hesaplanmasından kaçının
- [SPARK-45209] [SC-146490] [CORE] [UI] Yürütücü İş Parçacığı Döküm Sayfası için Flame Graph Desteği
- [SPARK-45777] [SC-147319] [CORE] Destek
spark.test.appId
:LocalSchedulerBackend
- [SPARK-45523] [SC-146331] [PYTHON] Kısayollara sahip olmak için null denetimini yeniden düzenleme
- [SPARK-45711] [SC-146854] [SQL] Avro sıkıştırma codec'leri için eşleyici tanıtma
- [SPARK-45523] [SC-146077] [Python] UDTF null değer atanamayan herhangi bir sütun için None döndürürse yararlı hata iletisi döndür
- [SPARK-45614] [SC-146729] [SQL] Hata _LEGACY_ERROR_TEMP_215 ad atama[6,7,8]
- [SPARK-45755] [SC-147164] [SQL] Genel sınır uygulayarak iyileştirme
Dataset.isEmpty()
1
- [SPARK-45569] [SC-145915] [SQL] Hata _LEGACY_ERROR_TEMP_2153 ad atayın
- [SPARK-45749] [SC-147153] [CORE] [WEBUI] Sütunu düzgün sıralamak
Duration
için düzeltmeSpark History Server
- [SPARK-45754] [SC-147169] [CORE] Destek
spark.deploy.appIdPattern
- [SPARK-45707] [SC-146880] [SQL] ile basitleştirme
DataFrameStatFunctions.countMinSketch
CountMinSketchAgg
- [SPARK-45753] [SC-147167] [CORE] Destek
spark.deploy.driverIdPattern
- [SPARK-45763] [SC-147177] [CORE] [UI] Sütunu yalnızca mevcut olduğunda gösterecek
Resource
şekilde geliştirinMasterPage
- [SPARK-45112] [SC-143259] [SQL] SQL Veri Kümesi işlevlerinde UnresolvedFunction tabanlı çözümleme kullanma
Databricks ODBC/JDBC sürücü desteği
Databricks, son 2 yılda yayımlanan ODBC/JDBC sürücülerini destekler. Lütfen son yayınlanan sürücüleri indirin ve yükseltin (ODBC'yi indirin, JDBC'yi indirin).
Bakım güncelleştirmeleri
Bkz . Databricks Runtime 14.3 bakım güncelleştirmeleri. Bu, ilk sürümde açıklama satırı yapılır.
Sistem ortamı
- İşletim Sistemi: Ubuntu 22.04.3 LTS
- Java: Zulu 8.74.0.17-CA-linux64
- Scala: 2.12.15
- Python: 3.10.12
- R: 4.3.1
- Delta Gölü: 3.1.0
Yüklü Python kitaplıkları
Kitaplık | Sürüm | Kitaplık | Sürüm | Kitaplık | Sürüm |
---|---|---|---|---|---|
anyio | 3.5.0 | argon2-cffi | 21.3.0 | argon2-cffi-bindings | 21.2.0 |
asttokens | 2.0.5 | attrs | 22.1.0 | geri arama | 0.2.0 |
beautifulsoup4 | 4.11.1 | Siyah | 22.6.0 | Çamaşır suyu | 4.1.0 |
yanıp sönen | 1.4 | boto3 | 1.24.28 | botocore | 1.27.96 |
sertifikalı | 2022.12.7 | cffi | 1.15.1 | chardet | 4.0.0 |
charset-normalizer | 2.0.4 | tıklama | 8.0.4 | Comm | 0.1.2 |
konturlu | 1.0.5 | Şifreleme | 39.0.1 | Cycler | 0.11.0 |
Cython | 0.29.32 | databricks-sdk | 0.1.6 | dbus-python | 1.2.18 |
hata ayıklama | 1.6.7 | Dekoratör | 5.1.1 | defusedxml | 0.7.1 |
daistlib | 0.3.7 | docstring-to-markdown | 0,11 | Entrypoints | 0.4 |
Yürütme | 0.8.3 | modellere genel bakış | 1.1.1 | fastjsonschema | 2.19.1 |
dosya kilidi | 3.13.1 | fonttools | 4.25.0 | googleapis-common-protos | 1.62.0 |
grpcio | 1.48.2 | grpcio-status | 1.48.1 | httplib2 | 0.20.2 |
ıdna | 3.4 | importlib-metadata | 4.6.4 | ipykernel | 6.25.0 |
ipython | 8.14.0 | ipython-genutils | 0.2.0 | ipywidgets | 7.7.2 |
Jedi | 0.18.1 | Jeepney | 0.7.1 | Jinja2 | 3.1.2 |
jmespath | 0.10.0 | joblib | 1.2.0 | jsonschema | 4.17.3 |
jupyter-client | 7.3.4 | jupyter-server | 1.23.4 | jupyter_core | 5.2.0 |
jupyterlab-pygments | 0.1.2 | jupyterlab pencere öğeleri | 1.0.0 | Anahtarlık | 23.5.0 |
kiwisolver | 1.4.4 | başlatma çubuğu | 1.10.16 | lazr.restfulclient | 0.14.4 |
lazr.uri | 1.0.6 | lxml | 4.9.1 | İşaretlemeyi Kasa | 2.1.1 |
matplotlib | 3.7.0 | matplotlib-inline | 0.1.6 | Mccabe | 0.7.0 |
yanlış | 0.8.4 | more-itertools | 8.10.0 | mypy uzantıları | 0.4.3 |
nbclassic | 0.5.2 | nbclient | 0.5.13 | nbconvert | 6.5.4 |
nbformat | 5.7.0 | nest-asyncio | 1.5.6 | nodeenv | 1.8.0 |
not defteri | 6.5.2 | notebook_shim | 0.2.2 | numpy | 1.23.5 |
oauthlib | 3.2.0 | Ambalaj | 23,2 | pandas | 1.5.3 |
pandocfilters | 1.5.0 | parso | 0.8.3 | pathspec | 0.10.3 |
Patsy | 0.5.3 | pexpect | 4.8.0 | pickleshare | 0.7.5 |
Yastık | 9.4.0 | Pip | 22.3.1 | platformdirs | 2.5.2 |
çizim | 5.9.0 | takılmış | 1.0.0 | prometheus-client | 0.14.1 |
prompt-toolkit | 3.0.36 | protobuf | 4.24.0 | psutil | 5.9.0 |
psycopg2 | 2.9.3 | ptyprocess | 0.7.0 | saf değerlendirme | 0.2.2 |
serçe | 8.0.0 | pyarrow düzeltmesi | 0,5 | pycparser | 2.21 |
pydantic | 1.10.6 | pyflakes | 3.1.0 | Pygments | 2.11.2 |
PyGObject | 3.42.1 | PyJWT | 2.3.0 | pyodbc | 4.0.32 |
pyparsing | 3.0.9 | pyright | 1.1.294 | pirsistent | 0.18.0 |
python-dateutil | 2.8.2 | python-lsp-jsonrpc | 1.1.1 | python-lsp-server | 1.8.0 |
pytoolconfig | 1.2.5 | pytz | 2022.7 | pyzmq | 23.2.0 |
istekler | 2.28.1 | Ip | 1.7.0 | s3transfer | 0.6.2 |
scikit-learn | 1.1.1 | scipy | 1.10.0 | Sinan | 0.12.2 |
Gizli dizi Depolama | 3.3.1 | Send2Trash | 1.8.0 | kurulum araçları | 65.6.3 |
Altı | 1.16.0 | sniffio | 1.2.0 | soupsieve | 2.3.2.post1 |
ssh-import-id | 5.11 | stack-data | 0.2.0 | statsmodeller | 0.13.5 |
Azim | 8.1.0 | terminado | 0.17.1 | threadpoolctl | 2.2.0 |
tinycss2 | 1.2.1 | tokenize-rt | 4.2.1 | tomli | 2.0.1 |
Kasırga | 6.1 | traitlets | 5.7.1 | typing_extensions | 4.4.0 |
ujson | 5.4.0 | katılımsız yükseltmeler | 0,1 | urllib3 | 1.26.14 |
virtualenv | 20.16.7 | wadllib | 1.3.6 | wcwidth | 0.2.5 |
webencodings | 0.5.1 | websocket-client | 0.58.0 | whatthepatch | 1.0.2 |
Tekerlek | 0.38.4 | widgetsnbextension | 3.6.1 | yapf | 0.33.0 |
zipp | 1.0.0 |
Yüklü R kitaplıkları
R kitaplıkları, 2023-02-10'da Posit Paket Yöneticisi CRAN anlık görüntüsünden yüklenir.
Kitaplık | Sürüm | Kitaplık | Sürüm | Kitaplık | Sürüm |
---|---|---|---|---|---|
oku seçin | 12.0.1 | askpass | 1.1 | assertthat | 0.2.1 |
Backports | 1.4.1 | temel | 4.3.1 | base64enc | 0.1-3 |
bit | 4.0.5 | bit64 | 4.0.5 | blob | 1.2.4 |
başlatma | 1.3-28 | Brew | 1.0-8 | Brio | 1.1.3 |
Süpürge | 1.0.5 | bslib | 0.5.0 | önbellek | 1.0.8 |
çağıran | 3.7.3 | şapka işareti | 6.0-94 | cellranger | 1.1.0 |
chron | 2.3-61 | class | 7.3-22 | cli | 3.6.1 |
küçük resim | 0.8.0 | saat | 0.7.0 | cluster | 2.1.4 |
codetools | 0.2-19 | renk alanı | 2.1-0 | commonmark | 1.9.0 |
derleyicisi | 4.3.1 | config | 0.3.1 | Çakışan | 1.2.0 |
cpp11 | 0.4.4 | Crayon | 1.5.2 | kimlik bilgileri | 1.3.2 |
Curl | 5.0.1 | data.table | 1.14.8 | veri kümeleri | 4.3.1 |
DBİ | 1.1.3 | dbplyr | 2.3.3 | Desc | 1.4.2 |
geliştirici araçları | 2.4.5 | Diyagram | 1.6.5 | diffobj | 0.3.5 |
Özet | 0.6.33 | aşağı aydınlatma | 0.4.3 | dplyr | 1.1.2 |
dtplyr | 1.3.1 | e1071 | 1.7-13 | üç nokta | 0.3.2 |
değerlendir | 0.21 | fansi | 1.0.4 | farver | 2.1.1 |
fastmap | 1.1.1 | fontawesome | 0.5.1 | forcats | 1.0.0 |
foreach | 1.5.2 | Yabancı | 0.8-85 | Forge | 0.2.0 |
Fs | 1.6.2 | Gelecek | 1.33.0 | future.apply | 1.11.0 |
Gargara | 1.5.1 | Generics | 0.1.3 | gert | 1.9.2 |
ggplot2 | 3.4.2 | gh | 1.4.0 | gitcreds | 0.1.2 |
glmnet | 4.1-7 | Globals | 0.16.2 | Tutkal | 1.6.2 |
googledrive | 2.1.1 | googlesheets4 | 1.1.1 | Gower | 1.0.1 |
grafikler | 4.3.1 | grDevices | 4.3.1 | Kılavuz | 4.3.1 |
gridExtra | 2.3 | gsubfn | 0.7 | gtable | 0.3.3 |
sabit hat | 1.3.0 | Haven | 2.5.3 | daha yüksek | 0.10 |
Hms | 1.1.3 | htmltools | 0.5.5 | htmlwidgets | 1.6.2 |
httpuv | 1.6.11 | httr | 1.4.6 | httr2 | 0.2.3 |
Kimlik | 1.0.1 | ını | 0.3.1 | ipred | 0.9-14 |
isoband | 0.2.7 | Yineleyicilerde | 1.0.14 | jquerylib | 0.1.4 |
jsonlite | 1.8.7 | KernSmooth | 2.23-21 | örgü örme | 1,43 |
Etiketleme | 0.4.2 | Sonra | 1.3.1 | Kafes | 0.21-8 |
Lav | 1.7.2.1 | yaşam döngüsü | 1.0.3 | dinleyici | 0.9.0 |
lubridate | 1.9.2 | magrittr | 2.0.3 | markdown | 1.7 |
MASS | 7.3-60 | Matris | 1.5-4.1 | not defteri | 2.0.1 |
yöntemler | 4.3.1 | mgcv | 1.8-42 | Mıme | 0,12 |
miniUI | 0.1.1.1 | ModelMetrics | 1.2.2.2 | modelleyici | 0.1.11 |
munsell | 0.5.0 | nlme | 3.1-163 | nnet | 7.3-19 |
numDeriv | 2016.8-1.1 | openssl | 2.0.6 | parallel | 4.3.1 |
paralel olarak | 1.36.0 | Ayağı | 1.9.0 | pkgbuild | 1.4.2 |
pkgconfig | 2.0.3 | pkgdown | 2.0.7 | pkgload | 1.3.2.1 |
plogr | 0.2.0 | plyr | 1.8.8 | Övgü | 1.0.0 |
prettyunits | 1.1.1 | Yordam | 1.18.4 | processx | 3.8.2 |
prodlim | 2023.03.31 | profvis | 0.3.8 | ilerleme | 1.2.2 |
ilerleme durumu | 0.13.0 | Söz | 1.2.0.1 | Proto | 1.0.0 |
Proxy | 0.4-27 | Ps | 1.7.5 | purrr | 1.0.1 |
r2d3 | 0.2.6 | R6 | 2.5.1 | ragg | 1.2.5 |
randomForest | 4.7-1.1 | rappdirs | 0.3.3 | rcmdcheck | 1.4.0 |
RColorBrewer | 1.1-3 | Rcpp | 1.0.11 | RcppEigen | 0.3.3.9.3 |
readr | 2.1.4 | readxl | 1.4.3 | yemek tarifleri | 1.0.6 |
Rövanş | 1.0.1 | rematch2 | 2.1.2 | Kumanda | 2.4.2 |
reprex | 2.0.2 | yeniden şekillendirme2 | 1.4.4 | rlang | 1.1.1 |
rmarkdown | 2.23 | RODBC | 1.3-20 | roxygen2 | 7.2.3 |
rpart | 4.1.21 | rprojroot | 2.0.3 | Rserve | 1.8-11 |
RSQLite | 2.3.1 | rstudioapi | 0.15.0 | ters çevirmeler | 2.1.2 |
rvest | 1.0.3 | Sass | 0.4.6 | Terazi | 1.2.1 |
seçici | 0.4-2 | sessioninfo | 1.2.2 | Şekil | 1.4.6 |
Parlak | 1.7.4.1 | sourcetools | 0.1.7-1 | sparklyr | 1.8.1 |
Kayma | 7.3-15 | Splines | 4.3.1 | sqldf | 0.4-11 |
KAREM | 2021.1 | Istatistik | 4.3.1 | istatistikler4 | 4.3.1 |
stringi | 1.7.12 | dizeleyici | 1.5.0 | Hayatta kalma | 3.5-5 |
sys | 3.4.2 | systemfonts | 1.0.4 | tcltk | 4.3.1 |
test edin | 3.1.10 | metin şekillendirme | 0.3.6 | Türk | 3.2.1 |
derleyici | 1.3.0 | tidyselect | 1.2.0 | tidyverse | 2.0.0 |
zaman değişimi | 0.2.0 | timeDate | 4022.108 | tinytex | 0,45 |
araçlar | 4.3.1 | tzdb | 0.4.0 | urlchecker | 1.0.1 |
usethis | 2.2.2 | utf8 | 1.2.3 | Yardımcılar | 4.3.1 |
uuid | 1.1-0 | vctr'lar | 0.6.3 | viridisLite | 0.4.2 |
Vroom | 1.6.3 | Waldo | 0.5.1 | Bıyık | 0.4.1 |
withr | 2.5.0 | xfun | 0,39 | xml2 | 1.3.5 |
xopen | 1.0.0 | xtable | 1.8-4 | yaml | 2.3.7 |
Zip | 2.3.0 |
Yüklü Java ve Scala kitaplıkları (Scala 2.12 küme sürümü)
Grup Kimliği | Yapıt Kimliği | Sürüm |
---|---|---|
antlr | antlr | 2.7.7 |
com.amazonaws | amazon-kinesis-client | 1.12.0 |
com.amazonaws | aws-java-sdk-autoscaling | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudformation | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudfront | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudhsm | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudsearch | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudtrail | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudwatch | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.12.390 |
com.amazonaws | aws-java-sdk-codedeploy | 1.12.390 |
com.amazonaws | aws-java-sdk-cognitoidentity | 1.12.390 |
com.amazonaws | aws-java-sdk-cognitosync | 1.12.390 |
com.amazonaws | aws-java-sdk-config | 1.12.390 |
com.amazonaws | aws-java-sdk-core | 1.12.390 |
com.amazonaws | aws-java-sdk-datapipeline | 1.12.390 |
com.amazonaws | aws-java-sdk-directconnect | 1.12.390 |
com.amazonaws | aws-java-sdk-directory | 1.12.390 |
com.amazonaws | aws-java-sdk-dynamodb | 1.12.390 |
com.amazonaws | aws-java-sdk-ec2 | 1.12.390 |
com.amazonaws | aws-java-sdk-ecs | 1.12.390 |
com.amazonaws | aws-java-sdk-efs | 1.12.390 |
com.amazonaws | aws-java-sdk-elasticache | 1.12.390 |
com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.12.390 |
com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.12.390 |
com.amazonaws | aws-java-sdk-elastictranscoder | 1.12.390 |
com.amazonaws | aws-java-sdk-emr | 1.12.390 |
com.amazonaws | aws-java-sdk-glacier | 1.12.390 |
com.amazonaws | aws-java-sdk-glue | 1.12.390 |
com.amazonaws | aws-java-sdk-iam | 1.12.390 |
com.amazonaws | aws-java-sdk-importexport | 1.12.390 |
com.amazonaws | aws-java-sdk-kinesis | 1.12.390 |
com.amazonaws | aws-java-sdk-kms | 1.12.390 |
com.amazonaws | aws-java-sdk-lambda | 1.12.390 |
com.amazonaws | aws-java-sdk-logs | 1.12.390 |
com.amazonaws | aws-java-sdk-machinelearning | 1.12.390 |
com.amazonaws | aws-java-sdk-opsworks | 1.12.390 |
com.amazonaws | aws-java-sdk-rds | 1.12.390 |
com.amazonaws | aws-java-sdk-redshift | 1.12.390 |
com.amazonaws | aws-java-sdk-route53 | 1.12.390 |
com.amazonaws | aws-java-sdk-s3 | 1.12.390 |
com.amazonaws | aws-java-sdk-ses | 1.12.390 |
com.amazonaws | aws-java-sdk-simpledb | 1.12.390 |
com.amazonaws | aws-java-sdk-simpleworkflow | 1.12.390 |
com.amazonaws | aws-java-sdk-sns | 1.12.390 |
com.amazonaws | aws-java-sdk-sqs | 1.12.390 |
com.amazonaws | aws-java-sdk-ssm | 1.12.390 |
com.amazonaws | aws-java-sdk-storagegateway | 1.12.390 |
com.amazonaws | aws-java-sdk-sts | 1.12.390 |
com.amazonaws | aws-java-sdk-support | 1.12.390 |
com.amazonaws | aws-java-sdk-swf-libraries | 1.11.22 |
com.amazonaws | aws-java-sdk-workspaces | 1.12.390 |
com.amazonaws | jmespath-java | 1.12.390 |
com.clearspring.analytics | akış | 2.9.6 |
com.databricks | Rserve | 1.8-3 |
com.databricks | databricks-sdk-java | 0.13.0 |
com.databricks | jets3t | 0.7.1-0 |
com.databricks.scalapb | compilerplugin_2.12 | 0.4.15-10 |
com.databricks.scalapb | scalapb-runtime_2.12 | 0.4.15-10 |
com.esotericsoftware | kryo gölgeli | 4.0.2 |
com.esotericsoftware | minlog | 1.3.0 |
com.fasterxml | Classmate | 1.3.4 |
com.fasterxml.jackson.core | jackson-annotations | 2.15.2 |
com.fasterxml.jackson.core | jackson-core | 2.15.2 |
com.fasterxml.jackson.core | jackson-databind | 2.15.2 |
com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.15.2 |
com.fasterxml.jackson.dataformat | jackson-dataformat-yaml | 2.15.2 |
com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.15.2 |
com.fasterxml.jackson.datatype | jackson-datatype-jsr310 | 2.15.1 |
com.fasterxml.jackson.module | jackson-module-paranamer | 2.15.2 |
com.fasterxml.jackson.module | jackson-module-scala_2.12 | 2.15.2 |
com.github.ben-manes.caffeine | Kafein | 2.9.3 |
com.github.fommil | jniloader | 1.1 |
com.github.fommil.netlib | native_ref-java | 1.1 |
com.github.fommil.netlib | native_ref-java | 1.1-natives |
com.github.fommil.netlib | native_system-java | 1.1 |
com.github.fommil.netlib | native_system-java | 1.1-natives |
com.github.fommil.netlib | netlib-native_ref-linux-x86_64 | 1.1-natives |
com.github.fommil.netlib | netlib-native_system-linux-x86_64 | 1.1-natives |
com.github.luben | zstd-jni | 1.5.5-4 |
com.github.wendykierp | JTransforms | 3.1 |
com.google.code.findbugs | jsr305 | 3.0.0 |
com.google.code.gson | gson | 2.10.1 |
com.google.crypto.tink | Tink | 1.9.0 |
com.google.errorprone | error_prone_annotations | 2.10.0 |
com.google.flatbuffers | flatbuffers-java | 1.12.0 |
com.google.guava | Guava | 15.0 |
com.google.protobuf | protobuf-java | 2.6.1 |
com.helger | Profiler | 1.1.1 |
com.jcraft | jsch | 0.1.55 |
com.jolbox | bonecp | 0.8.0.RELEASE |
com.lihaoyi | sourcecode_2.12 | 0.1.9 |
com.microsoft.azure | azure-data-lake-store-sdk | 2.3.9 |
com.microsoft.sqlserver | mssql-jdbc | 11.2.2.jre8 |
com.ning | compress-lzf | 1.1.2 |
com.sun.mail | javax.mail | 1.5.2 |
com.sun.xml.bind | jaxb-core | 2.2.11 |
com.sun.xml.bind | jaxb-impl | 2.2.11 |
com.tdunning | json | 1.8 |
com.thoughtworks.paranamer | paranamer | 2.8 |
com.trueaccord.lenses | lenses_2.12 | 0.4.12 |
com.twitter | chill-java | 0.10.0 |
com.twitter | chill_2.12 | 0.10.0 |
com.twitter | util-app_2.12 | 7.1.0 |
com.twitter | util-core_2.12 | 7.1.0 |
com.twitter | util-function_2.12 | 7.1.0 |
com.twitter | util-jvm_2.12 | 7.1.0 |
com.twitter | util-lint_2.12 | 7.1.0 |
com.twitter | util-registry_2.12 | 7.1.0 |
com.twitter | util-stats_2.12 | 7.1.0 |
com.typesafe | config | 1.2.1 |
com.typesafe.scala-logging | scala-logging_2.12 | 3.7.2 |
com.uber | h3 | 3.7.3 |
com.univocity | univocity-ayrıştırıcıları | 2.9.1 |
com.zaxxer | HikariCP | 4.0.3 |
commons-cli | commons-cli | 1.5.0 |
commons-codec | commons-codec | 1.16.0 |
commons-collections | commons-collections | 3.2.2 |
commons-dbcp | commons-dbcp | 1.4 |
commons-fileupload | commons-fileupload | 1.5 |
commons-httpclient | commons-httpclient | 3.1 |
commons-io | commons-io | 2.13.0 |
commons-lang | commons-lang | 2,6 |
commons-logging | commons-logging | 1.1.3 |
commons-pool | commons-pool | 1.5.4 |
dev.ludovic.netlib | arpack | 3.0.3 |
dev.ludovic.netlib | Blas | 3.0.3 |
dev.ludovic.netlib | lapack | 3.0.3 |
info.ganglia.gmetric4j | gmetric4j | 1.0.10 |
io.airlift | aircompressor | 0.25 |
io.delta | delta-sharing-client_2.12 | 1.0.3 |
io.dropwizard.metrics | metrics-annotation | 4.2.19 |
io.dropwizard.metrics | metrics-core | 4.2.19 |
io.dropwizard.metrics | metrics-graphite | 4.2.19 |
io.dropwizard.metrics | metrics-healthchecks | 4.2.19 |
io.dropwizard.metrics | metrics-jetty9 | 4.2.19 |
io.dropwizard.metrics | metrics-jmx | 4.2.19 |
io.dropwizard.metrics | metrics-json | 4.2.19 |
io.dropwizard.metrics | metrics-jvm | 4.2.19 |
io.dropwizard.metrics | metrics-servlets | 4.2.19 |
io.netty | netty-all | 4.1.96.Final |
io.netty | netty-buffer | 4.1.96.Final |
io.netty | netty-codec | 4.1.96.Final |
io.netty | netty-codec-http | 4.1.96.Final |
io.netty | netty-codec-http2 | 4.1.96.Final |
io.netty | netty-codec-socks | 4.1.96.Final |
io.netty | netty-common | 4.1.96.Final |
io.netty | netty-handler | 4.1.96.Final |
io.netty | netty-handler-proxy | 4.1.96.Final |
io.netty | netty-resolver | 4.1.96.Final |
io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-linux-aarch_64 |
io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-linux-x86_64 |
io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-osx-aarch_64 |
io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-osx-x86_64 |
io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-windows-x86_64 |
io.netty | netty-tcnative-classes | 2.0.61.Final |
io.netty | netty-transport | 4.1.96.Final |
io.netty | netty-transport-classes-epoll | 4.1.96.Final |
io.netty | netty-transport-classes-kqueue | 4.1.96.Final |
io.netty | netty-transport-native-epoll | 4.1.96.Final |
io.netty | netty-transport-native-epoll | 4.1.96.Final-linux-aarch_64 |
io.netty | netty-transport-native-epoll | 4.1.96.Final-linux-x86_64 |
io.netty | netty-transport-native-kqueue | 4.1.96.Final-osx-aarch_64 |
io.netty | netty-transport-native-kqueue | 4.1.96.Final-osx-x86_64 |
io.netty | netty-transport-native-unix-common | 4.1.96.Final |
io.prometheus | simpleclient | 0.7.0 |
io.prometheus | simpleclient_common | 0.7.0 |
io.prometheus | simpleclient_dropwizard | 0.7.0 |
io.prometheus | simpleclient_pushgateway | 0.7.0 |
io.prometheus | simpleclient_servlet | 0.7.0 |
io.prometheus.jmx | Toplayıcı | 0.12.0 |
jakarta.annotation | jakarta.annotation-api | 1.3.5 |
jakarta.servlet | jakarta.servlet-api | 4.0.3 |
jakarta.validation | jakarta.validation-api | 2.0.2 |
jakarta.ws.rs | jakarta.ws.rs-api | 2.1.6 |
javax.activation | etkinleştirme | 1.1.1 |
javax.el | javax.el-api | 2.2.4 |
javax.jdo | jdo-api | 3.0.1 |
javax.transaction | jta | 1.1 |
javax.transaction | transaction-api | 1.1 |
javax.xml.bind | jaxb-api | 2.2.11 |
javolution | javolution | 5.5.1 |
jline | jline | 2.14.6 |
joda-time | joda-time | 2.12.1 |
net.java.dev.jna | Jna | 5.8.0 |
net.razorvine | Turşu | 1.3 |
net.sf.jpam | jpam | 1.1 |
net.sf.opencsv | opencsv | 2.3 |
net.sf.supercsv | süper csv | 2.2.0 |
net.snowflake | snowflake-ingest-sdk | 0.9.6 |
net.sourceforge.f2j | arpack_combined_all | 0,1 |
org.acplt.remotetea | remotetea-oncrpc | 1.1.2 |
org.antlr | ST4 | 4.0.4 |
org.antlr | antlr-runtime | 3.5.2 |
org.antlr | antlr4-runtime | 4.9.3 |
org.antlr | stringtemplate | 3.2.1 |
org.apache.ant | ant | 1.9.16 |
org.apache.ant | ant-jsch | 1.9.16 |
org.apache.ant | ant-launcher | 1.9.16 |
org.apache.arrow | ok biçimi | 12.0.1 |
org.apache.arrow | ok-bellek çekirdeği | 12.0.1 |
org.apache.arrow | ok-bellek-netty | 12.0.1 |
org.apache.arrow | ok-vektör | 12.0.1 |
org.apache.avro | avro | 1.11.2 |
org.apache.avro | avro-ipc | 1.11.2 |
org.apache.avro | avro eşlemeli | 1.11.2 |
org.apache.commons | commons-collections4 | 4.4 |
org.apache.commons | commons-compress | 1.23.0 |
org.apache.commons | commons-crypto | 1.1.0 |
org.apache.commons | commons-lang3 | 3.12.0 |
org.apache.commons | commons-math3 | 3.6.1 |
org.apache.commons | commons-text | 1.10.0 |
org.apache.curator | curator-client | 2.13.0 |
org.apache.curator | küratör çerçevesi | 2.13.0 |
org.apache.curator | curator-recipes | 2.13.0 |
org.apache.datasketches | datasketches-java | 3.1.0 |
org.apache.datasketches | datasketches-memory | 2.0.0 |
org.apache.derby | Derby | 10.14.2.0 |
org.apache.hadoop | hadoop-client-runtime | 3.3.6 |
org.apache.hive | hive-beeline | 2.3.9 |
org.apache.hive | hive-cli | 2.3.9 |
org.apache.hive | hive-jdbc | 2.3.9 |
org.apache.hive | hive-llap-client | 2.3.9 |
org.apache.hive | hive-llap-common | 2.3.9 |
org.apache.hive | hive-serde | 2.3.9 |
org.apache.hive | hive-shims | 2.3.9 |
org.apache.hive | hive-storage-api | 2.8.1 |
org.apache.hive.shims | hive-shims-0.23 | 2.3.9 |
org.apache.hive.shims | hive-shims-common | 2.3.9 |
org.apache.hive.shims | hive-shims-scheduler | 2.3.9 |
org.apache.httpcomponents | httpclient | 4.5.14 |
org.apache.httpcomponents | httpcore | 4.4.16 |
org.apache.ivy | sarmaşık | 2.5.1 |
org.apache.logging.log4j | log4j-1.2-api | 2.20.0 |
org.apache.logging.log4j | log4j-api | 2.20.0 |
org.apache.logging.log4j | log4j-core | 2.20.0 |
org.apache.logging.log4j | log4j-slf4j2-impl | 2.20.0 |
org.apache.orc | orc-core | 1.9.2 gölgeli-protobuf |
org.apache.orc | orc-mapreduce | 1.9.2 gölgeli-protobuf |
org.apache.orc | orc-shims | 1.9.2 |
org.apache.thrift | libfb303 | 0.9.3 |
org.apache.thrift | libthrift | 0.12.0 |
org.apache.ws.xmlschema | xmlschema-core | 2.3.0 |
org.apache.xbean | xbean-asm9 gölgeli | 4.23 |
org.apache.yetus | hedef kitle ek açıklamaları | 0.13.0 |
org.apache.zookeeper | zookeeper | 3.6.3 |
org.apache.zookeeper | zookeeper-jute | 3.6.3 |
org.checkerframework | dama-qual | 3.31.0 |
org.codehaus.jackson | jackson-core-asl | 1.9.13 |
org.codehaus.jackson | jackson-mapper-asl | 1.9.13 |
org.codehaus.janino | commons-derleyici | 3.0.16 |
org.codehaus.janino | janino | 3.0.16 |
org.datanucleus | datanucleus-api-jdo | 4.2.4 |
org.datanucleus | datanucleus-core | 4.1.17 |
org.datanucleus | datanucleus-rdbms | 4.1.19 |
org.datanucleus | javax.jdo | 3.2.0-m3 |
org.eclipse.jetty | jetty-client | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-continuation | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-http | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-io | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-jndi | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-plus | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-proxy | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-security | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-server | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-servlet | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-servlets | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-util | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-util-ajax | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-webapp | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-xml | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | websocket-api | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | websocket-client | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | websocket-common | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | websocket-server | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | websocket-servlet | 9.4.52.v20230823 |
org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
org.glassfish.hk2 | hk2-api | 2.6.1 |
org.glassfish.hk2 | hk2-bulucu | 2.6.1 |
org.glassfish.hk2 | hk2-utils | 2.6.1 |
org.glassfish.hk2 | osgi-resource-locator | 1.0.3 |
org.glassfish.hk2.external | aopalliance-repackaged | 2.6.1 |
org.glassfish.hk2.external | jakarta.inject | 2.6.1 |
org.glassfish.jersey.containers | jersey-container-servlet | 2.40 |
org.glassfish.jersey.containers | jersey-container-servlet-core | 2.40 |
org.glassfish.jersey.core | jersey-client | 2.40 |
org.glassfish.jersey.core | jersey-common | 2.40 |
org.glassfish.jersey.core | jersey-server | 2.40 |
org.glassfish.jersey.inject | jersey-hk2 | 2.40 |
org.hibernate.validator | hibernate-validator | 6.1.7.Final |
org.ini4j | ini4j | 0.5.4 |
org.javassist | javassist | 3.29.2-GA |
org.jboss.logging | jboss günlüğü | 3.3.2.Final |
org.jdbi | jdbi | 2.63.1 |
org.jetbrains | Ek açıklama -ları | 17.0.0 |
org.joda | joda-convert | 1.7 |
org.jodd | jodd-core | 3.5.2 |
org.json4s | json4s-ast_2.12 | 3.7.0-M11 |
org.json4s | json4s-core_2.12 | 3.7.0-M11 |
org.json4s | json4s-jackson_2.12 | 3.7.0-M11 |
org.json4s | json4s-scalap_2.12 | 3.7.0-M11 |
org.lz4 | lz4-java | 1.8.0 |
org.mlflow | mlflow-spark_2.12 | 2.9.1 |
org.objenesis | objenesis | 2.5.1 |
org.postgresql | postgresql | 42.6.0 |
org.roaringbitmap | RoaringBitmap | 0.9.45 |
org.roaringbitmap | dolgular | 0.9.45 |
org.rocksdb | rocksdbjni | 8.3.2 |
org.rosuda.REngine | REngine | 2.1.0 |
org.scala-lang | scala-compiler_2.12 | 2.12.15 |
org.scala-lang | scala-library_2.12 | 2.12.15 |
org.scala-lang | scala-reflect_2.12 | 2.12.15 |
org.scala-lang.modules | scala-collection-compat_2.12 | 2.11.0 |
org.scala-lang.modules | scala-parser-combinators_2.12 | 1.1.2 |
org.scala-lang.modules | scala-xml_2.12 | 1.2.0 |
org.scala-sbt | test arabirimi | 1.0 |
org.scalacheck | scalacheck_2.12 | 1.14.2 |
org.scalactic | scalactic_2.12 | 3.2.15 |
org.scalanlp | breeze-macros_2.12 | 2.1.0 |
org.scalanlp | breeze_2.12 | 2.1.0 |
org.scalatest | sca en son uyumlu | 3.2.15 |
org.scalatest | scalatest-core_2.12 | 3.2.15 |
org.scalatest | scalatest-diagrams_2.12 | 3.2.15 |
org.scalatest | scalatest-featurespec_2.12 | 3.2.15 |
org.scalatest | scalatest-flatspec_2.12 | 3.2.15 |
org.scalatest | scalatest-freespec_2.12 | 3.2.15 |
org.scalatest | scalatest-funspec_2.12 | 3.2.15 |
org.scalatest | scalatest-funsuite_2.12 | 3.2.15 |
org.scalatest | scalatest-matchers-core_2.12 | 3.2.15 |
org.scalatest | scalatest-mustmatchers_2.12 | 3.2.15 |
org.scalatest | scalatest-propspec_2.12 | 3.2.15 |
org.scalatest | scalatest-refspec_2.12 | 3.2.15 |
org.scalatest | scalatest-shouldmatchers_2.12 | 3.2.15 |
org.scalatest | scalatest-wordspec_2.12 | 3.2.15 |
org.scalatest | scalatest_2.12 | 3.2.15 |
org.slf4j | jcl-over-slf4j | 2.0.7 |
org.slf4j | jul-to-slf4j | 2.0.7 |
org.slf4j | slf4j-api | 2.0.7 |
org.slf4j | slf4j-simple | 1.7.25 |
org.threeten | threeten-extra | 1.7.1 |
org.tukaani | Xz | 1.9 |
org.typelevel | algebra_2.12 | 2.0.1 |
org.typelevel | cats-kernel_2.12 | 2.1.1 |
org.typelevel | spire-macros_2.12 | 0.17.0 |
org.typelevel | spire-platform_2.12 | 0.17.0 |
org.typelevel | spire-util_2.12 | 0.17.0 |
org.typelevel | spire_2.12 | 0.17.0 |
org.wildfly.openssl | wildfly-openssl | 1.1.3.Final |
org.xerial | sqlite-jdbc | 3.42.0.0 |
org.xerial.snappy | snappy-java | 1.1.10.3 |
org.yaml | snakeyaml | 2.0 |
Oro | Oro | 2.0.8 |
pl.edu.icm | JLargeArrays | 1.5 |
software.amazon.cryptools | AmazonCorrettoCryptoProvider | 1.6.1-linux-x86_64 |
software.amazon.ion | ion-java | 1.0.2 |
Stax | stax-api | 1.0.1 |
Geri Bildirim
https://aka.ms/ContentUserFeedback.
Çok yakında: 2024 boyunca, içerik için geri bildirim mekanizması olarak GitHub Sorunları’nı kullanımdan kaldıracak ve yeni bir geri bildirim sistemiyle değiştireceğiz. Daha fazla bilgi için bkz.Gönderin ve geri bildirimi görüntüleyin