Databricks Runtime 13.3 LTS

  • Makale

Aşağıdaki sürüm notları, Apache Spark 3.4.1 tarafından desteklenen Databricks Runtime 13.3 LTS hakkında bilgi sağlar.

Databricks bu görüntüleri Ağustos 2023'te yayımladı.

Yeni özellikler ve geliştirmeler

Paylaşılan kümeler için Scala desteği

Unity Kataloğu özellikli paylaşılan kümeler artık Databricks Runtime 13.3 ve üzerini kullanırken Scala'yı destekliyor.

Unity Kataloğu paylaşılan kümelerinde başlatma betikleri, JAR'ler ve Maven koordinatları için izin verilenler listesi Genel Önizleme'de

Artık Unity Kataloğu'nu allowlist kullanarak Databricks Runtime 13.3 ve üzerini çalıştıran paylaşılan erişim moduyla işlem üzerinde init betiklerinin, JAR'lerin ve Maven koordinatlarının yüklenmesini denetleyebilirsiniz. Bkz. Paylaşılan işlemdeki izin verilenler listesi kitaplıkları ve başlatma betikleri.

Başlatma betikleri ve JAR'ler için birim desteği Genel Önizleme aşamasındadır

Artık Databricks Runtime 13.3 ve üzerini çalıştıran atanmış veya paylaşılan erişim modlarıyla işlem üzerinde init betiklerini ve JAR'leri depolamak için Unity Kataloğu birimlerini kullanabilirsiniz. Bkz. Init betikleri nereye yüklenebilir? ve Küme kapsamlı kitaplıklar.

Delta Lake işlemleri için varsayılan olarak etkinleştirilen Kasa atamaları

Delta UPDATE ve MERGE işlemler artık değerler hedef tablo şemasındaki türe güvenli bir şekilde türe verilemediğinde hatayla sonuçlanır. Delta'daki tüm örtük atamalar artık yerine spark.sql.ansi.enabledöğesini izlerspark.sql.storeAssignmentPolicy. Bkz . Databricks Runtime'da ANSI uyumluluğu.

Unity Kataloğu ile etiketlere giriş

Databricks Runtime 13.3 LTS ve sonraki sürümleriyle, güvenli hale getirilebilir nesnelerinize etiketler uygulayabilirsiniz. Etiketler, güvenli hale getirilebilen nesneleri düzenlemenize ve veri varlıklarınızı aramayı ve bulmayı basitleştirmenize yardımcı olur. Bkz. Etiket uygulama.

Sorgu planlaması ve çağırma arasında bir dosya değiştirilirse Databricks Runtime bir hata döndürür

Sorgu planlaması ve çağırma arasında bir dosya güncelleştirilirse Databricks Runtime sorguları artık bir hata döndürür. Bu değişiklik öncesinde Databricks Runtime bu aşamalar arasındaki bir dosyayı okuyarak zaman zaman öngörülemeyen sonuçlara yol açar.

Dinamik bölüm üzerine yazmalar kullanılırken şema üzerine yazmayı engelle

Delta Lake'te dinamik bölüm üzerine yazmalarla birlikte olarak ayarlayamazsınız overwriteSchematrue . Bu, şema uyuşmazlığı nedeniyle olası tablo bozulmalarını önler. Bkz. Dinamik bölüm üzerine yazmalar.

copyFile API'lerini dbutils.fs.cp ile tümleştirme

dbutils copy komutu artık dbutils.fs.cp daha hızlı kopyalama için iyileştirilmiştir. Bu geliştirmeyle, dosya boyutuna bağlı olarak kopyalama işlemleri 100 kata kadar daha hızlı olabilir. Bu özellik, Unity Katalog Birimleri ve Databricks Dosya Sistemi bağlamaları dahil olmak üzere Azure Databricks'te erişilebilen tüm dosya sistemlerinde kullanılabilir.

Databricks ODBC/JDBC sürücü desteği

Azure Databricks, son 2 yılda yayımlanan ODBC ve JDBC sürücülerini destekler. ODBC Sürücüsünü İndir ve JDBC Sürücüsü İndir'de en son sürücüyü indirin.

Adsız (konumsal) parametre işaretçileri desteği

SparkSession.sql() API artık söz dizimini ? kullanan parametreli sorgulara ek olarak söz dizimini :parm kullanarak parametreli sorguları da destekliyor. Bkz. parametre işaretçileri.

Zaman serisi sütun etiketlemesini etkinleştirme

Artık birincil anahtar kısıtlamaları oluştururken zaman serisi sütunlarını etiketleyebilirsiniz.

Yeni bit eşlem SQL işlevleri

Azure Databricks artık integral sayısal değerlerini bit eşlem ile eşlemek ve bunları toplamak için kullanılabilecek bir işlev kümesi sağladı. Bu, farklı değer sayısını önceden hesaplamak için kullanılabilir.

Geliştirilmiş şifreleme işlevleri

aes_encrypt, aes_decrypt ve try_aes_decrypt işlevleri başlatma vektörleri (IV) ve kimliği doğrulanmış ek veriler (AAD) desteğiyle geliştirilmiştir.

REFRESH FOREIGN için Unity Kataloğu desteği

Artık , REFRESH FOREIGN SCHEMAve kullanarak REFRESH FOREIGN CATALOGUnity Kataloğu'nda yabancı katalogları, şemaları ve REFRESH FOREIGN TABLEtabloları güncelleştirebilirsiniz. Bkz . YENİLEME YABANCI (KATALOG, ŞEMA ve TABLO).

ADA GÖRE EKLE

Tabloya satır eklerken artık Azure Databricks'in kaynak sorgudaki sütunları ve alanları kendi adlarıyla tablonun sütunlarıyla otomatik olarak eşlemesine izin vekleyebilirsiniz. Bkz. INSERT INTO.

Delta Sharing ile gerçekleştirilmiş görünümleri paylaşma

ALTER SHARE deyimi artık gerçekleştirilmiş görünümleri destekliyor.

Hataya neden olan değişiklikler

MERGE INTO ve UPDATE ile bir tabloda satırları depolarken örtük atamada yapılan değişiklikler

Azure Databricks artık bir tabloda satırları depolarken örtük atama yapılandırmasını spark.sql.storeAssignmentPolicy izler. Varsayılan değer ANSI , taşan değerleri depolarken bir hata oluşturur. Daha önce, değerler varsayılan olarak olarak NULL depolanıyorlardı.

Aşağıdaki örnekte olduğu gibi, hataya neden olan sütun için daha geniş bir tür kullanmak üzere tabloyu yeniden yazarak taşmalara çözüm bulabilirsiniz.

-- Enable column mapping
ALTER TABLE MyTable SET TBLPROPERTIES (
    'delta.minReaderVersion' = '2',
    'delta.minWriterVersion' = '5',
    'delta.columnMapping.mode' = 'name'
  )

-- Rename the old column and create a new column with the new type using the old name
ALTER TABLE MyTable RENAME ID to ID_old
ALTER TABLE MyTable ADD COLUMN ID BIGINT

-- Rewrite the entire table
UPDATE MyTable SET ID = ID_old

-- Drop the old column
ALTER TABLE MyTable DROP COLUMN ID_old

Kitaplık yükseltmeleri

  • Yükseltilen Python kitaplıkları:
    • 1.5.1 ile 1.6.0 arasında hata ayıklama
    • 0,3,6 ile 0,3,7 olan distlib
    • fastjsonschema 2.16.3 ile 2.18.0
    • 3.12.0 ile 3.12.2 arasında dosya kilidi
  • Yükseltilen R kitaplıkları:
    • SparkR 3.4.0 ile 3.4.1
  • Yükseltilen Java kitaplıkları:
    • org.apache.orc.orc-core 1.8.3-shaded-protobuf ile 1.8.4-shaded-protobuf
    • org.apache.orc.orc-mapreduce from 1.8.3-shaded-protobuf to 1.8.4-shaded-protobuf
    • org.apache.orc.orc-shims 1.8.3 ile 1.8.4 arası
    • org.eclipse.jetty.jetty-client from 9.4.50.v20221201 to 9.4.51.v20230217
    • org.eclipse.jetty.jetty-continuation from 9.4.50.v20221201 to 9.4.51.v20230217
    • org.eclipse.jetty.jetty-http from 9.4.50.v20221201 to 9.4.51.v20230217
    • org.eclipse.jetty.jetty-io from 9.4.50.v20221201 to 9.4.51.v20230217
    • org.eclipse.jetty.jetty-jndi from 9.4.50.v20221201 to 9.4.51.v20230217
    • org.eclipse.jetty.jetty-plus 9.4.50.v20221201 ile 9.4.51.v20230217 arasında
    • org.eclipse.jetty.jetty-proxy from 9.4.50.v20221201 to 9.4.51.v20230217
    • org.eclipse.jetty.jetty-security from 9.4.50.v20221201 to 9.4.51.v20230217
    • org.eclipse.jetty.jetty-server from 9.4.50.v20221201 to 9.4.51.v20230217
    • org.eclipse.jetty.jetty-servlet from 9.4.50.v20221201 to 9.4.51.v20230217
    • org.eclipse.jetty.jetty-servlets from 9.4.50.v20221201 to 9.4.51.v20230217
    • org.eclipse.jetty.jetty-util from 9.4.50.v20221201 to 9.4.51.v20230217
    • org.eclipse.jetty.jetty-util-ajax from 9.4.50.v20221201 to 9.4.51.v20230217
    • org.eclipse.jetty.jetty-webapp from 9.4.50.v20221201 to 9.4.51.v20230217
    • org.eclipse.jetty.jetty-xml from 9.4.50.v20221201 to 9.4.51.v20230217
    • org.eclipse.jetty.websocket.websocket-api from 9.4.50.v20221201 to 9.4.51.v20230217
    • org.eclipse.jetty.websocket.websocket-client from 9.4.50.v20221201 to 9.4.51.v20230217
    • org.eclipse.jetty.websocket.websocket-common from 9.4.50.v20221201 to 9.4.51.v20230217
    • org.eclipse.jetty.websocket.websocket-server from 9.4.50.v20221201 to 9.4.51.v20230217
    • org.eclipse.jetty.websocket.websocket-servlet from 9.4.50.v20221201 to 9.4.51.v20230217
    • org.xerial.snappy.snappy-java 1.1.8.4 ile 1.1.10.1

Apache Spark

Databricks Runtime 13.3, Apache Spark 3.4.1'i içerir. Bu sürüm, Databricks Runtime 13.2'ye (desteklenmeyen) dahil olan tüm Spark düzeltmeleri ve iyileştirmelerinin yanı sıra Spark'ta yapılan aşağıdaki ek hata düzeltmelerini ve iyileştirmeleri içerir:

  • Artık küme ortam değişkenini SNOWFLAKE_SPARK_CONNECTOR_VERSION=2.12 Spark-snowflake bağlayıcısı v2.12.0 kullanacak şekilde ayarlayabilirsiniz.
  • [SPARK-43380] [DBRRM-383] "[SC-133100][SQL] Avro veri türü yakınsama düzeltildi...
  • [SPARK-44504] [Backport] [13.2] [13.x] [13.3] Sağlayıcıyı kaldırarak veritabanı örneğini kapatmaya ve bakım görevi hatasında kaynakları serbest bırakmaya zorlama
  • [SPARK-44059] [SC-137023] Yerleşik işlevler için adlandırılmış bağımsız değişkenler için çözümleyici desteği ekleme
  • [SPARK-44485] [SC-137653] [SQL] TreeNode.generateTreeString'i iyileştirme
  • [SPARK-42944] [SC-137164] [SS] [PYTHON] Python'da Akış ForeachBatch
  • [SPARK-44446] [SC-136994] [PYTHON] Beklenen liste türü özel durumları için denetim ekleme
  • [SPARK-44439] [SC-136973] [BAĞLAN] [SS] ListListeners'ın yalnızca istemciye kimlikleri geri göndermesi düzeltildi
  • [SPARK-44216] [SC-136941] [PYTHON] assertSchemaEqual API'sini genel yapma
  • [SPARK-44201] [SC-136778] [BAĞLAN] [SS] Spark Bağlan için Scala'da Akış Dinleyicisi desteği ekleme
  • [SPARK-43915] [SC-134766] [SQL] LEGACY_ERROR_TEMP hata sınıfına ad atama[2438-2445]
  • [SPARK-43798] "[SC-133990][SQL][PYTHON] Python kullanıcı tanımlı tablo işlevlerini destekleme"
  • [SPARK-44398] [SC-136720] [BAĞLAN] Scala foreachBatch API'si
  • [SPARK-44476] [SC-137169] [CORE] [BAĞLAN] İlişkili yapıt olmadan JobArtifactState için yapıt popülasyonu düzeltilir
  • [SPARK-44269] [SC-135817] [SQL] LEGACY_ERROR_TEMP hata sınıfına ad atama[2310-2314]
  • [SPARK-44395] [SC-136744] [SQL] TABLE anahtar sözcüğü sonrasında tanımlayıcı etrafında parantez gerektirecek şekilde TVF bağımsız değişkenlerini güncelleştirin
  • [SPARK-43915] [SC-134766] [SQL] LEGACY_ERROR_TEMP hata sınıfına ad atama[2438-2445]
  • [SPARK-43995] [SC-136794] [SPARK-43996] [BAĞLAN] Bağlan Scala İstemcisine UDFRegistration desteği ekleme
  • [SPARK-44109] [SC-134755] [CORE] Her RDD bölümünün yinelenen tercih edilen konumlarını kaldırma
  • [SPARK-44169] [SC-135497] [SQL] LEGACY_ERROR_TEMP hata sınıfına ad atama[2300-2304]
  • [SPARK-41487] [SC-135636] [SQL] _LEGACY_ERROR_TEMP_1020'a ad atama
  • [SPARK-44398] [SC-136720] [BAĞLAN] Scala foreachBatch API'si
  • [SPARK-44153] [SC-134977] [CORE] [UI] Sekmedeki Executors destek Heap Histogram sütunu
  • [SPARK-44044] [SC-135695] [SS] Akış ile Window işlevleri için Hata iletisini geliştirme
  • [SPARK-43914] [SC-135414] [SQL] LEGACY_ERROR_TEMP hata sınıfına ad atama[2433-2437]
  • [SPARK-44217] [SC-136805] [PYTHON] Yaklaşık fp eşitliği için özel duyarlığa izin ver
  • [SPARK-44370] [SC-136575] [BAĞLAN] Buf uzak nesil alfayı uzak eklentilere geçirme
  • [SPARK-44410] [SC-136930] [PYTHON] [BAĞLAN] Yalnızca getOrCreate değil oluşturmada etkin oturumu ayarlama
  • [SPARK-44348] [SAS-1910] [SC-136644] [13.X] [CORE] [BAĞLAN] [PYTHON] İlgili değişikliklerle test_artifact yeniden kullanılabilir
  • [SPARK-44145] [SC-136698] [SQL] Yürütme için hazır olduğunda geri çağırma
  • [SPARK-44264] [SC-136870] [PYTHON] [ML] FunctionPickler Sınıfı
  • [SPARK-43986] [SC-135623] [SQL] HyperLogLog işlev çağrısı hataları için hata sınıfları oluşturma
  • [SPARK-44139] [SC-134967] [SQL] Grup tabanlı MERGE işlemlerinde tamamen aşağı gönderilen filtreleri at
  • [SPARK-44338] [SC-136718] [SQL] Görünüm şeması uyuşmazlığı hata iletisini düzeltme
  • [SPARK-44208] [SC-135505] [CORE] [SQL] Özel durumları doğrudan kullanan bazı mantıklar için net hata sınıfı adları atama
  • [SPARK-44364] [SC-136773] [PYTHON] Beklenen için List[Row] veri türü desteği eklendi
  • [SPARK-44180] [SC-136792] [SQL] DistributionAndOrderingUtils, ResolveTimeZone uygulamalıdır
  • [SPARK-43389] [SC-136772] [SQL] lineSep seçeneği için null denetim eklendi
  • [SPARK-44388] [SC-136695] [BAĞLAN] UDF örneği güncelleştirildiğinde protobuf atama sorunu düzeltildi
  • [SPARK-44352] [SC-136373] [BAĞLAN] SameType ve arkadaşlarınızı DataType'a geri yerleştirin.
  • [SPARK-43975] [SC-134265] [SQL] DataSource V2: Grup tabanlı kaynaklar için UPDATE komutlarını işleme
  • [SPARK-44360] [SC-136461] [SQL] Delta tabanlı MERGE işlemlerinde şema ayıklamayı destekleme
  • [SPARK-44138] [SC-134907] [SQL] MERGE koşullarında belirleyici olmayan ifadeleri, alt sorguları ve toplamaları yasakla
  • [SPARK-43321] [SC-136678] [Bağlan][İzleme] Scala client joinWith içinde kullanılan API'ler için daha iyi adlar
  • [SPARK-44263] [SC-136447] [BAĞLAN] Özel Kesme Noktası Avcıları Desteği
  • [SPARK-39851] [SC-123383] [SQL] Bir taraf benzersizliği koruyabiliyorsa birleştirme istatistikleri tahminini geliştirme
  • [SPARK-44390] [SC-136677] [CORE] [SQL] Yeniden adlandır SparkSerDerseUtilsSparkSerDeUtils
  • [SPARK-44004] [SC-134751] [SQL] Sık karşılaşılan ESKI hatalar için ad atayın ve hata iletisini geliştirin.
  • [SPARK-44322] [SC-136204] [BAĞLAN] Ayrıştırıcının SQLConf yerine SqlApiConf kullanmasını sağlayın.
  • [SPARK-44271] [SC-136347] [SQL] Varsayılan değer işlevlerini StructType'tan ResolveDefaultColumns'a taşıma
  • [SPARK-44332] [SC-136413] [CORE] [WEBUI] Yürütücüler Kullanıcı Arabirimi Sayfasında Yürütücü Kimliği Sütunu sıralama hatasını düzeltme
  • [SPARK-44282] [SC-135948] [BAĞLAN] DataType ayrıştırma işlemini Spark Bağlan Scala İstemcisi'nde kullanmak üzere hazırlama
  • [SPARK-44349] [SC-136581] [R] SparkR'ye matematik işlevleri ekleme
  • [SPARK-44397] [SC-136647] [PYTHON] pyspark.testing.utils içinde assertDataFrameEqual'i kullanıma sunma
  • [SPARK-42981] [SC-136620] [BAĞLAN] Doğrudan ok serileştirmesi ekleme
  • [SPARK-44373] [SC-136577] [SQL] Ayrıştırıcıyla ilgili yapılandırma çalışması yapmak için Veri Kümesi API'sinde Ayrıştırma mantığı ile Kaydırma
  • [SPARK-44340] [SC-136574] [SQL] PartitionEvaluator API'sini kullanarak bilgi işlem mantığını tanımlayın ve WindowGroupLimitExec'te kullanın
  • [SPARK-43665] [SC-136573] [BAĞLAN] [PS] Spark Bağlan ile çalışmak için PandasSQLStringFormatter.vformat'ı etkinleştirme
  • [SPARK-44325] [SC-136572] [SQL] SortMergeJoinExec'de PartitionEvaluator API'lerini kullanma
  • [SPARK-44315] [SC-136171] [SQL] [BAĞLAN] DefinedByConstructorParams'ı sql/api'ye taşıma
  • [SPARK-44275] [SC-136184] [BAĞLAN] Scala Spark'a yapılandırılabilir yeniden deneme mekanizması ekleme Bağlan
  • [SPARK-44326] [SC-136208] [SQL] [BAĞLAN] Scala istemcisinden kullanılan yardımcı programları ortak modüllere taşıma
  • [SPARK-43321] [SC-136156] [Bağlan] Dataset#Joinwith
  • [SPARK-44343] [SC-136372] [BAĞLAN] Scala Düşünceler ion'ı SQL/API'ye taşımaya hazırlama
  • [SPARK-44313] [SC-136081] [SQL] Şemada bir char/varchar sütunu olduğunda oluşturulan sütun ifadesi doğrulaması düzeltiliyor
  • [SPARK-43963] [SC-134145] [SQL] DataSource V2: Grup tabanlı kaynaklar için MERGE komutlarını işleme
  • [SPARK-44363] [SC-136433] [PYTHON] DataFrame karşılaştırmasında eşit olmayan satırların yüzdesini görüntüleme
  • [SPARK-44251] [SC-136432] [SQL] Tam dış USING birleştirmesinde birleştirilmiş birleştirme anahtarında null atanabilir değeri doğru ayarlama
  • [SPARK-43948] [SC-133366] [SQL] LEGACY_ERROR_TEMP hata sınıfına ad atama[0050|0057|0058|0059]
  • [SPARK-44329] [SC-136326] [BAĞLAN] [PYTHON] Scala ve Python'a hll_sketch_agg, hll_union_agg, to_varchar try_aes_decrypt ekleme
  • [SPARK-44351] [SC-136353] [SQL] Söz dizimsel basitleştirme yapın
  • [SPARK-44281] [SC-135963] [SQL] DataType tarafından kullanılan QueryCompilation hatasını DataTypeErrors olarak sql/api'ye taşıma
  • [SPARK-44283] [SC-136109] [BAĞLAN] Kaynağı SQL/API'ye Taşıma
  • [SPARK-43926] [SC-135590] [BAĞLAN] [PYTHON] Scala ve Python'a array_agg, array_size, kardinalite, count_min_sketch,maske,named_struct,json_* ekleme
  • [SPARK-44327] [SC-136187] [SQL] [BAĞLAN] Scala'ya ve len işlevleri any ekleme
  • [SPARK-44290] [SC-136300] [BAĞLAN] Spark Bağlan'da oturum tabanlı dosyalar ve arşivler
  • [SPARK-44061] [SC-136299] [PYTHON] assertDataFrameEqual yardımcı programı işlevi ekleme
  • [SPARK-44331] [SC-136324] [BAĞLAN] [PYTHON] Scala ve Python'a bit eşlem işlevleri ekleme
  • [SPARK-44342] [SC-136334] [SQL] SQLContext'i GenTPCDSData için SparkSession ile değiştirme
  • [SPARK-42583] [SC-124190] [SQL] Hepsi ayrı toplama işlevleriyse dış birleşimi kaldırın
  • [SPARK-44333] [SC-136206] [BAĞLAN] [SQL] EnhancedLogicalPlan'ı ParserUtils dışına taşıma
  • [SPARK-43824] [SC-132655] [SPARK-43825] [SQL] _LEGACY_ERROR_TEMP_128 hata sınıfına ad atama[1-2]
  • [SPARK-43939] [SC-134602] [BAĞLAN] [PYTHON] Scala ve Python'a try_* işlevleri ekleme
  • [SPARK-44193] [SC-135886] [BAĞLAN] Dönüştürme için GRPC özel durumlarını durdurma uygulama
  • [SPARK-44284] [SC-136107] [BAĞLAN] sql/api için basit conf sistemi oluşturma
  • [SPARK-43913] [SC-133368] [SQL] LEGACY_ERROR_TEMP hata sınıfına ad atama[2426-2432]
  • [SPARK-44291] "[SC-135924][SPARK-43416][CONNECT] Aralık sorgusu için yanlış şema düzeltildi"
  • [SPARK-44312] [SC-136185] [BAĞLAN] [PYTHON] Ortam değişkeniyle kullanıcı aracısı ayarlamaya izin ver
  • [SPARK-44154] [SC-136060] Bit eşlem işlevlerini uygulama
  • [SPARK-43885] [SC-133996] [SQL] DataSource V2: Delta tabanlı kaynaklar için BIRLEŞTIRME komutlarını işleme
  • [SPARK-43924] [SC-135161] [BAĞLAN] [PYTHON] Scala ve Python'a misc işlevleri ekleme
  • [SPARK-43969] [SC-134556] [SQL] Hata sınıfına adları yeniden düzenleme ve atama _LEGACY_ERROR_TEMP_1170
  • [SPARK-44185] [SC-135730] [SQL] Katalog ve veri işlemleri arasındaki tutarsız yolu düzeltme
  • [SPARK-44073] [SC-134562] [SQL] [PYTHON] [BAĞLAN] Scala, Python ve Bağlan tarih saat işlevleri ekleme - bölüm 2
  • [SPARK-43942] [SC-134527] [BAĞLAN] [PYTHON] Scala ve Python'a dize işlevleri ekleme - bölüm 1
  • [SPARK-44266] [SC-135813] [SQL] Util.truncatedString öğesini sql/api'ye taşıma
  • [SPARK-44195] [SC-135722] [R] SparkR SparkContext'e JobTag API'leri ekleme
  • [SPARK-44200] [SC-135736] [SQL] TableValuedFunction için TABLE bağımsız değişken ayrıştırıcısı kuralını destekleme
  • [SPARK-44254] [SC-135709] [SQL] DataType tarafından kullanılan QueryExecutionErrors'ı DataTypeErrors olarak sql/api'ye taşıma
  • [SPARK-44291] [SC-135924] [SPARK-43416] [BAĞLAN] Aralık sorgusu için yanlış şema düzeltilir
  • [SPARK-43922] [SC-135612] [SQL] İşlev çağrıları için ayrıştırıcıya adlandırılmış parametre desteği ekleme
  • [SPARK-44300] [SC-135882] [BAĞLAN] Silme kapsamını oturuma özgü yapıtlarla sınırlamak için yapıt temizlemeyi düzeltme
  • [SPARK-44293] [SC-135849] [BAĞLAN] Spark Bağlan'da özel JAR'ler için geçersiz URI'ler düzeltilir
  • [SPARK-44215] [SC-135850] [SHUFFLE] Sayı öbekleri 0 ise sunucu RuntimeException oluşturmalıdır
  • [SPARK-44245] [SC-135851] [PYTHON] pyspark.sql.dataframe sample() doctests yalnızca açıklayıcı olmalıdır
  • [SPARK-44274] [SC-135814] [BAĞLAN] ArtifactManager tarafından kullanılan yardımcı program işlevlerini ortak/yardımcı programlara taşıma
  • [SPARK-44194] [SC-135815] [PYTHON] [CORE] PySpark SparkContext'e JobTag API'leri ekleme
  • [SPARK-42828] [SC-135733] [PYTHON] [SQL] GroupedData için daha açık Python türü ek açıklamaları
  • [SPARK-44079] [SC-135486] [SQL] ArrayIndexOutOfBoundsException Bozuk kayıtla PERMISSIVE modunu kullanarak diziyi yapı olarak ayrıştırma düzeltmesi
  • [SPARK-44255] [SC-135809] [SQL] Depolama Level'i ortak/yardımcı programlara yeniden dağıtma
  • [SPARK-42169] [SC-135795] [SQL] to_csv işlevi için kod oluşturma uygulama (StructsToCsv)
  • [SPARK-44249] [SC-135719] [SQL] [PYTHON] PythonUDTFRunner'ı dönüş türünü ayrı olarak göndermek için yeniden düzenleme
  • [SPARK-43353] [SC-132734] [PYTHON] Kalan oturum hatalarını hata sınıfına geçirme
  • [SPARK-44211] [SC-135718] [PYTHON] [BAĞLAN] SparkSession.is_stopped uygulama
  • [SPARK-42784] [SC-135691] birleştirme dirindeki subDir sayısı conf değerinden az olduğunda subDir'i oluşturmaya devam etmelidir
  • [SPARK-41599] [SC-135616] InProcessLauncher kullanarak güvenli kümeye uygulama gönderirken FileSystem.CACHE dosyasında bellek sızıntısı
  • [SPARK-44241] [SC-135613] [Çekirdek] Yanlışlıkla io.connectionTimeout/connectionCreationTimeout değerini sıfır veya negatif olarak ayarlamak, sürekli yürütücü eksilerine/yok edilmesine neden olur
  • [SPARK-44133] [SC-134795] [13.X] [PYTHON] MyPy'yi 0.920'den 0.982'ye yükseltme
  • [SPARK-42941] [SC-134707] [SS] [BAĞLAN] [1/2] StreamingQueryListener - JSON biçiminde Event Serde
  • [SPARK-44188] [SC-135173] [CORE] içinde gereksiz resetAllPartitions yöntemi kaldırma ActiveJob
  • [SPARK-43757] [SC-135418] [BAĞLAN] İstemci uyumluluğunu izin ver listesinden reddetme listesine değiştirme
  • [SPARK-43474] [SC-135521] [SS] [BAĞLAN] Kimliğine göre çalışma zamanı Veri Çerçevelerine spark connect erişimi ekleyin.
  • [SPARK-44183] [SC-135209] [PYTHON] En düşük sürümü 4.0.0'a oluşturma PyArrow
  • [SPARK-44248] [SC-135554] [SS] [SQL] [Kafka] Kafka kaynağı v2'de tercih edilen konumu ekleme
  • [SPARK-43929] [SC-134510] [SQL] [PYTHON] [BAĞLAN] Scala, Python ve Bağlan API'sine tarih saat işlevleri ekleme - bölüm 1
  • [SPARK-44161] [SC-135326] [Bağlan] UDF'ler için Satır girişini işleme
  • [SPARK-44227] [SC-135520] [SQL] StructField'dan SchemaUtils Ayıklama
  • [SPARK-44064] [SC-135116] [CORE] [SQL] öğesine yeni apply bir işlev ekleme NonFateSharingCache
  • [SPARK-44171] [SC-135269] [SQL] Hata sınıfına ad atama LEGACY_ERROR_TEMP[2279-2282] & kullanılmayan bazı hata sınıflarını silin
  • [SPARK-44056] [SC-134758] [SQL] Kullanılabilir olduğunda UDF yürütme hatası hata iletisine UDF adını ekle
  • [SPARK-44205] [SC-135422] [SQL] DecimalType'tan Katalizör Kodunu Ayıklama
  • [SPARK-44220] [SC-135484] [SQL] StringConcat'i sql/api'ye taşıma
  • [SPARK-44146] [SC-135230] [BAĞLAN] Spark Bağlan Oturum jar'larını ve sınıf dosyalarını yalıtma
  • [SPARK-44206] [SC-135411] [SQL] DataSet.selectExpr scope Session.active
  • [SPARK-40850] [SC-135417] [SQL] Test çalışması yorumlanan sorguların Codegen yürütebileceğini düzeltme
  • [SPARK-44204] [SC-135253] [SQL] [HIVE] getPartitionNames için eksik recordHiveCall ekleme
  • [SPARK-44237] [SC-135485] [CORE] DirectByteBuffer oluşturucu arama mantığını basitleştirme
  • [SPARK-44189] [SC-135170] [BAĞLAN] [PYTHON] Konumsal parametreleri destekleme ölçütü: sql()
  • [SPARK-44140] [SC-134893] [SQL] [PYTHON] Python'da konumsal parametreleri destekleme sql()
  • [SPARK-44164] [SC-135158] [SQL] StructField'den Util sınıfına toAttribute yöntemini ayıklama
  • [SPARK-44178] [SC-135113] [BAĞLAN] konumunda konumsal parametreleri destekleme sql()
  • [SPARK-43208] [SC-128955] [SQL] [HIVE] IsolatedClassLoader okumadan sonra inputstream engel sınıfını kapatmalıdır
  • [SPARK-43063] [SC-128382] [SQL] df.show handle null yerine NULL yazdırmalıdır
  • [SPARK-42539] [SC-124464] [SQL] [HIVE] Meta veri istemcisi için 'yerleşik' Hive sürümünü kullanırken ayrı sınıf yükleyiciyi ortadan kaldırın
  • [SPARK-43992] [SC-133645] [SQL] [PYTHON] [BAĞLAN] Catalog.listFunctions için isteğe bağlı desen ekleme
  • [SPARK-44066] [SC-134878] [SQL] Scala/Java'da konumsal parametreleri destekleme sql()
  • [SPARK-44078] [SC-134869] [BAĞLAN] [CORE] Sınıf yükleyici/kaynak yalıtımı desteği ekleme
  • [SPARK-43470] [SC-135187] [CORE] Uygulama günlüğüne işletim sistemi, Java, Python sürüm bilgileri ekleme
  • [SPARK-43136] [SC-135238] [BAĞLAN] [İzleme] KeyA'lar için test ekleme
  • [SPARK-39740] [SC-135093] [UI]: CVE-2020-28487'yi düzeltmek için vis zaman çizelgesini 7.7.2'ye yükseltin
  • [SPARK-42298] [SC-133952] [SQL] _LEGACY_ERROR_TEMP_2132'a ad atama
  • [SPARK-43961] [SC-133459] [SQL] [PYTHON] [BAĞLAN] Catalog.listTables için isteğe bağlı desen ekleme
  • [SPARK-44026] [SC-135181] SQLMetrics için başlangıç değeri sağlamaya izin ver
  • [SPARK-44202] [SC-135244] [CORE] JavaSparkContext'e JobTag API'leri ekleme
  • [SPARK-44030] [SC-135237] [SQL] İfade için Unapply sunmak için DataTypeExpression uygulama
  • [SPARK-43876] "[SC-134603][SQL] Farklı sorgular için hızlı karma haritayı etkinleştirme"
  • [SPARK-40082] [SC-126437] Birleştirmeyi zamanlama Gönderme birleştirme shuffleMapStage yeniden denediğinde ancak çalışan görev olmadığında birleştirmeyi sonlandır
  • [SPARK-43888] [SC-132893] [CORE] Günlüğü ortak/yardımcı programlara yeniden dağıtma
  • [SPARK-43474] [SC-134400] [SS] [BAĞLAN] Spark Bağlan Planner'a SessionHolder ekleme
  • [SPARK-43944] [SC-134490] [BAĞLAN] [PYTHON] Scala ve Python'a dize işlevleri ekleme - bölüm 2
  • [SPARK-44134] [SC-134954] [CORE] Spark-defaults.conf içinde ayarlandığında kaynakları (GPU/FPGA) 0 olarak ayarlama düzeltildi
  • [SPARK-44142] [SC-134947] [PYTHON] Python türlerini Spark türlerine dönüştürmek için yardımcı programdaki tpe ile türünü değiştirin
  • [SPARK-43952] [SC-134695] [CORE] [BAĞLAN] [SQL] Etikete göre sorgu iptali için SparkContext API'leri ekleme
  • [SPARK-44000] [SC-133634] [SQL] Birleştirmenin bir tarafını yayınlamayı ve çoğaltmayı devre dışı bırakmak için ipucu ekleme
  • [SPARK-43937] [SC-134362] [BAĞLAN] [PYTHON] Scala ve Python'a ifnull,isnotnull,equal_null,nullif,nvl,nvl2 ekleme
  • [SPARK-43624] [13.x] [SC-134557] [PS] [BAĞLAN] Spark Bağlan Planner'a ekleyinEWM.
  • [SPARK-44040] [SC-134366] [SQL] QueryStageExec'in üzerinde AggregateExec düğümü olduğunda işlem istatistiklerini düzeltme
  • [SPARK-43485] [SC-131264] [SQL] Datetime add/diff işlevlerinin bağımsız değişkeni için unit hata iletisini düzeltme
  • [SPARK-43794] [SC-132561] [SQL] Hata sınıfına ad atama _LEGACY_ERROR_TEMP_1335
  • [SPARK-43511] [SC-134749] [BAĞLAN] [SS] Spark Bağlan için Uygulanan MapGroupsWithState ve FlatMapGroupsWithState API'leri
  • [SPARK-43529] [SQL] CREATE/REPLACE TABLE OPTIONS ifadeleri + kod temizleme desteği
  • [SPARK-44106] [SC-134750] [PYTHON] [BAĞLAN] Için ekle __repr__GroupedData
  • [SPARK-42299] [SC-133190] _LEGACY_ERROR_TEMP_2206'a ad atama
  • [SPARK-43290] [SC-134388] [SQL] aes_encrypt IV'ler ve AAD için destek ekler
  • [SPARK-43932] [SC-134138] [SQL] [PYTHON] [BAĞLAN] Scala ve Python'a like işlevleri ekleme current
  • [SPARK-43934] [SC-134108] [SQL] [PYTHON] [BAĞLAN] Scala ve Python'a regexp_* işlevleri ekleme
  • [SPARK-44107] [SC-134746] [BAĞLAN] [PYTHON] Desteklenmeyen Sütun yöntemlerini otomatik tamamlamadan gizleme
  • [SPARK-42941] [SC-134707] [SS] [BAĞLAN] [1/2] StreamingQueryListener - JSON biçiminde Event Serde
  • [SPARK-43773] [SC-132659] [BAĞLAN] [PYTHON] Python istemcisinde 'levenshtein(str1, str2[, threshold])' işlevlerini uygulama
  • [SPARK-44125] [SC-134745] [R] SparkR'da Java 21 desteği
  • [SPARK-43919] [SC-133374] [SQL] Satırdan JSON işlevselliğini ayıklama
  • [SPARK-43769] [SC-132520] [BAĞLAN] 'levenshtein(str1, str2[, threshold])' işlevlerini uygulama
  • [SPARK-44012] [SC-134662] [SS] Bazı okuma durumlarını yazdırmak için KafkaDataConsumer
  • [SPARK-43876] [SC-134603] [SQL] Farklı sorgular için hızlı karma haritayı etkinleştirme
  • [SPARK-44024] [SC-134497] [SQL] Yalnızca tek bir öğeyi ayıklamak unzip için kullanıldığında kullanılacak map şekilde değiştirin
  • [SPARK-43928] [SC-134467] [SQL] [PYTHON] [BAĞLAN] Scala, Python ve Bağlan API'sine bit işlemleri ekleme
  • [SPARK-44092] [SC-134506] [CORE] Java 21 ile modül geçişi ekleme Utils.isJavaVersionAtLeast21 ve geçirme core
  • [SPARK-44018] [SC-134512] [SQL] Bazı DS V2 İfadeleri için hashCode ve toString'i geliştirme
  • [SPARK-44105] [SC-134582] [SQL] LastNonNull lazily çözülmelidir
  • [SPARK-44081] [SC-134434] PartitionedFileUtil API'lerini biraz basitleştirme
  • [SPARK-43791] [SC-132531] [SQL] Hata sınıfına bir ad atama _LEGACY_ERROR_TEMP_1336
  • [SPARK-44071] [SC-134435] Çözülmemiş[Yaprak| tanımlama ve kullanmaTekli]Düğüm özellikleri.
  • [SPARK-43852] [SC-132890] [SPARK-43853] [SPARK-43854] [SPARK-43855] [SPARK-43856] _LEGACY_ERROR_TEMP_2418-2425 hata sınıfına ad atama
  • [SPARK-43742] [SC-132684] [SQL] Varsayılan sütun değeri çözümlemeyi yeniden düzenleme
  • [SPARK-43493] [SC-132063] [SQL] levenshtein() işlevine maksimum uzaklık bağımsız değişkeni ekleme
  • [SPARK-44075] [SC-134382] [BAĞLAN] Tembellik yapma transformStatCorr
  • [SPARK-43925] [SC-134381] [SQL] [PYTHON] [BAĞLAN] Scala, Python ve Bağlan için her bool_or, bool_and ekleyin
  • [SPARK-43931] [SC-134158] [SQL] [PYTHON] [BAĞLAN] Scala ve Python'a make_* işlevler ekleme
  • [SPARK-43762] [SC-132602] [SPARK-43763] [SPARK-43764] [SPARK-43765] [SPARK-43766] [SQL] _LEGACY_ERROR_TEMP_24 hata sınıfına ad atama[06-10]
  • [SPARK-43962] [SC-133367] [SQL] Hata iletilerini iyileştirme: CANNOT_DECODE_URL, CANNOT_MERGE_INCOMPATIBLE_DATA_TYPE, CANNOT_PARSE_DECIMAL, CANNOT_READ_FILE_FOOTER, CANNOT_RECOGNIZE_HIVE_TYPE.
  • [SPARK-43938] [SC-133887] [BAĞLAN] [PYTHON] Scala ve Python'a to_* işlevleri ekleme
  • [SPARK-44055] [SC-134321] [CORE] yedekli override işlevleri kaldırma CheckpointRDD
  • [SPARK-43802] [SC-132597] [SQL] failOnError=true ile unhex ve unbase64 için codegen düzeltmesi
  • [SPARK-43798] [SC-133990] [SQL] [PYTHON] Python kullanıcı tanımlı tablo işlevlerini destekleme
  • [SPARK-43941] [SC-134286] [SQL] [PYTHON] [BAĞLAN] Scala, Python ve Bağlan API'sine any_value, approx_percentile, count_if, first_value, histogram_numeric, last_value any_value ekleme
  • [SPARK-43380] [SC-133100] [SQL] Yanlış sonuçlar üretmemek için Avro veri türü dönüştürme sorunlarını düzeltme
  • [SPARK-43803] [SC-133729] [SS] [BAĞLAN] İstemci bağlantı kesilmelerini işlemek için awaitTermination() geliştirme
  • [SPARK-43179] [SC-129070] [SHUFFLE] Uygulamaların meta verilerinin Dış Karıştırma Hizmeti tarafından db'ye kaydedilip kaydedilmediğini denetlemesine izin verme

Databricks ODBC/JDBC sürücü desteği

Databricks, son 2 yılda yayımlanan ODBC/JDBC sürücülerini destekler. Lütfen son yayınlanan sürücüleri indirin ve yükseltin (ODBC'yi indirin, JDBC'yi indirin).

Sistem ortamı

  • İşletim Sistemi: Ubuntu 22.04.2 LTS
  • Java: Zulu 8.70.0.23-CA-linux64
  • Scala: 2.12.15
  • Python: 3.10.12
  • R: 4.2.2
  • Delta Gölü: 2.4.0

Yüklü Python kitaplıkları

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
appdirs 1.4.4 argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0
asttokens 2.2.1 attrs 21.4.0 geri arama 0.2.0
beautifulsoup4 4.11.1 Siyah 22.6.0 Çamaşır suyu 4.1.0
yanıp sönen 1.4 boto3 1.24.28 botocore 1.27.28
sertifikalı 2022.9.14 cffi 1.15.1 chardet 4.0.0
charset-normalizer 2.0.4 tıklama 8.0.4 Şifreleme 37.0.1
Cycler 0.11.0 Cython 0.29.32 databricks-sdk 0.1.6
dbus-python 1.2.18 hata ayıklama 1.6.0 Dekoratör 5.1.1
defusedxml 0.7.1 daistlib 0.3.7 docstring-to-markdown 0,12
Entrypoints 0.4 Yürütme 1.2.0 modellere genel bakış 1.0.3
fastjsonschema 2.18.0 dosya kilidi 3.12.2 fonttools 4.25.0
googleapis-common-protos 1.56.4 grpcio 1.48.1 grpcio-status 1.48.1
httplib2 0.20.2 ıdna 3.3 importlib-metadata 4.6.4
ipykernel 6.17.1 ipython 8.10.0 ipython-genutils 0.2.0
ipywidgets 7.7.2 Jedi 0.18.1 Jeepney 0.7.1
Jinja2 2.11.3 jmespath 0.10.0 joblib 1.2.0
jsonschema 4.16.0 jupyter-client 7.3.4 jupyter_core 4.11.2
jupyterlab-pygments 0.1.2 jupyterlab pencere öğeleri 1.0.0 Anahtarlık 23.5.0
kiwisolver 1.4.2 başlatma çubuğu 1.10.16 lazr.restfulclient 0.14.4
lazr.uri 1.0.6 İşaretlemeyi Kasa 2.0.1 matplotlib 3.5.2
matplotlib-inline 0.1.6 Mccabe 0.7.0 yanlış 0.8.4
more-itertools 8.10.0 mypy uzantıları 0.4.3 nbclient 0.5.13
nbconvert 6.4.4 nbformat 5.5.0 nest-asyncio 1.5.5
nodeenv 1.8.0 not defteri 6.4.12 numpy 1.21.5
oauthlib 3.2.0 Ambalaj 21.3 pandas 1.4.4
pandocfilters 1.5.0 parso 0.8.3 pathspec 0.9.0
Patsy 0.5.2 pexpect 4.8.0 pickleshare 0.7.5
Yastık 9.2.0 Pip 22.2.2 platformdirs 2.5.2
çizim 5.9.0 takılmış 1.0.0 prometheus-client 0.14.1
prompt-toolkit 3.0.36 protobuf 3.19.4 psutil 5.9.0
psycopg2 2.9.3 ptyprocess 0.7.0 saf değerlendirme 0.2.2
serçe 8.0.0 pycparser 2.21 pydantic 1.10.6
pyflakes 3.0.1 Pygments 2.11.2 PyGObject 3.42.1
PyJWT 2.3.0 pyodbc 4.0.32 pyparsing 3.0.9
pyright 1.1.294 pirsistent 0.18.0 python-dateutil 2.8.2
python-lsp-jsonrpc 1.0.0 python-lsp-server 1.7.1 pytoolconfig 1.2.2
pytz 2022.1 pyzmq 23.2.0 istekler 2.28.1
Ip 1.7.0 s3transfer 0.6.0 scikit-learn 1.1.1
scipy 1.9.1 Sinan 0.11.2 Gizli dizi Depolama 3.3.1
Send2Trash 1.8.0 kurulum araçları 63.4.1 Altı 1.16.0
soupsieve 2.3.1 ssh-import-id 5.11 stack-data 0.6.2
statsmodeller 0.13.2 Azim 8.1.0 terminado 0.13.1
test yolu 0.6.0 threadpoolctl 2.2.0 tokenize-rt 4.2.1
tomli 2.0.1 Kasırga 6.1 traitlets 5.1.1
typing_extensions 4.3.0 ujson 5.4.0 katılımsız yükseltmeler 0,1
urllib3 1.26.11 virtualenv 20.16.3 wadllib 1.3.6
wcwidth 0.2.5 webencodings 0.5.1 whatthepatch 1.0.2
Tekerlek 0.37.1 widgetsnbextension 3.6.1 yapf 0.31.0
zipp 1.0.0

Yüklü R kitaplıkları

R kitaplıkları 2023-02-10'da Microsoft CRAN anlık görüntüsünden yüklenir.

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
oku seçin 10.0.1 askpass 1.1 assertthat 0.2.1
Backports 1.4.1 temel 4.2.2 base64enc 0.1-3
bit 4.0.5 bit64 4.0.5 blob 1.2.3
başlatma 1.3-28 Brew 1.0-8 Brio 1.1.3
Süpürge 1.0.3 bslib 0.4.2 önbellek 1.0.6
çağıran 3.7.3 şapka işareti 6.0-93 cellranger 1.1.0
chron 2.3-59 class 7.3-21 cli 3.6.0
küçük resim 0.8.0 saat 0.6.1 cluster 2.1.4
codetools 0.2-19 renk alanı 2.1-0 commonmark 1.8.1
derleyicisi 4.2.2 config 0.3.1 cpp11 0.4.3
Crayon 1.5.2 kimlik bilgileri 1.3.2 Curl 5.0.0
data.table 1.14.6 veri kümeleri 4.2.2 DBİ 1.1.3
dbplyr 2.3.0 Desc 1.4.2 geliştirici araçları 2.4.5
diffobj 0.3.5 Özet 0.6.31 aşağı aydınlatma 0.4.2
dplyr 1.1.0 dtplyr 1.2.2 e1071 1.7-13
üç nokta 0.3.2 değerlendir 0,20 fansi 1.0.4
farver 2.1.1 fastmap 1.1.0 fontawesome 0.5.0
forcats 1.0.0 foreach 1.5.2 Yabancı 0.8-82
Forge 0.2.0 Fs 1.6.1 Gelecek 1.31.0
future.apply 1.10.0 Gargara 1.3.0 Generics 0.1.3
gert 1.9.2 ggplot2 3.4.0 gh 1.3.1
gitcreds 0.1.2 glmnet 4.1-6 Globals 0.16.2
Tutkal 1.6.2 googledrive 2.0.0 googlesheets4 1.0.1
Gower 1.0.1 grafikler 4.2.2 grDevices 4.2.2
Kılavuz 4.2.2 gridExtra 2.3 gsubfn 0.7
gtable 0.3.1 sabit hat 1.2.0 Haven 2.5.1
daha yüksek 0.10 Hms 1.1.2 htmltools 0.5.4
htmlwidgets 1.6.1 httpuv 1.6.8 httr 1.4.4
Kimlik 1.0.1 ını 0.3.1 ipred 0.9-13
isoband 0.2.7 Yineleyicilerde 1.0.14 jquerylib 0.1.4
jsonlite 1.8.4 KernSmooth 2.23-20 örgü örme 1.42
Etiketleme 0.4.2 Sonra 1.3.0 Kafes 0.20-45
Lav 1.7.1 yaşam döngüsü 1.0.3 dinleyici 0.9.0
lubridate 1.9.1 magrittr 2.0.3 markdown 1.5
MASS 7.3-58.2 Matris 1.5-1 not defteri 2.0.1
yöntemler 4.2.2 mgcv 1.8-41 Mıme 0,12
miniUI 0.1.1.1 ModelMetrics 1.2.2.2 modelleyici 0.1.10
munsell 0.5.0 nlme 3.1-162 nnet 7.3-18
numDeriv 2016.8-1.1 openssl 2.0.5 parallel 4.2.2
paralel olarak 1.34.0 Ayağı 1.8.1 pkgbuild 1.4.0
pkgconfig 2.0.3 pkgdown 2.0.7 pkgload 1.3.2
plogr 0.2.0 plyr 1.8.8 Övgü 1.0.0
prettyunits 1.1.1 Yordam 1.18.0 processx 3.8.0
prodlim 2019.11.13 profvis 0.3.7 ilerleme 1.2.2
ilerleme durumu 0.13.0 Söz 1.2.0.1 Proto 1.0.0
Proxy 0.4-27 Ps 1.7.2 purrr 1.0.1
r2d3 0.2.6 R6 2.5.1 ragg 1.2.5
randomForest 4.7-1.1 rappdirs 0.3.3 rcmdcheck 1.4.0
RColorBrewer 1.1-3 Rcpp 1.0.10 RcppEigen 0.3.3.9.3
readr 2.1.3 readxl 1.4.2 yemek tarifleri 1.0.4
Rövanş 1.0.1 rematch2 2.1.2 Kumanda 2.4.2
reprex 2.0.2 yeniden şekillendirme2 1.4.4 rlang 1.0.6
rmarkdown 2.20 RODBC 1.3-20 roxygen2 7.2.3
rpart 4.1.19 rprojroot 2.0.3 Rserve 1.8-12
RSQLite 2.2.20 rstudioapi 0,14 ters çevirmeler 2.1.2
rvest 1.0.3 Sass 0.4.5 Terazi 1.2.1
seçici 0.4-2 sessioninfo 1.2.2 Şekil 1.4.6
Parlak 1.7.4 sourcetools 0.1.7-1 sparklyr 1.7.9
SparkR 3.4.1 Kayma 7.3-15 Splines 4.2.2
sqldf 0.4-11 KAREM 2021.1 Istatistik 4.2.2
istatistikler4 4.2.2 stringi 1.7.12 dizeleyici 1.5.0
Hayatta kalma 3.5-3 sys 3.4.1 systemfonts 1.0.4
tcltk 4.2.2 test edin 3.1.6 metin şekillendirme 0.3.6
Türk 3.1.8 derleyici 1.3.0 tidyselect 1.2.0
tidyverse 1.3.2 zaman değişimi 0.2.0 timeDate 4022.108
tinytex 0.44 araçlar 4.2.2 tzdb 0.3.0
urlchecker 1.0.1 usethis 2.1.6 utf8 1.2.3
Yardımcılar 4.2.2 uuid 1.1-0 vctr'lar 0.5.2
viridisLite 0.4.1 Vroom 1.6.1 Waldo 0.4.0
Bıyık 0.4.1 withr 2.5.0 xfun 0.37
xml2 1.3.3 xopen 1.0.0 xtable 1.8-4
yaml 2.3.7 Zip 2.2.2

Yüklü Java ve Scala kitaplıkları (Scala 2.12 küme sürümü)

Grup Kimliği Yapıt Kimliği Sürüm
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.12.390
com.amazonaws aws-java-sdk-cloudformation 1.12.390
com.amazonaws aws-java-sdk-cloudfront 1.12.390
com.amazonaws aws-java-sdk-cloudhsm 1.12.390
com.amazonaws aws-java-sdk-cloudsearch 1.12.390
com.amazonaws aws-java-sdk-cloudtrail 1.12.390
com.amazonaws aws-java-sdk-cloudwatch 1.12.390
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.390
com.amazonaws aws-java-sdk-codedeploy 1.12.390
com.amazonaws aws-java-sdk-cognitoidentity 1.12.390
com.amazonaws aws-java-sdk-cognitosync 1.12.390
com.amazonaws aws-java-sdk-config 1.12.390
com.amazonaws aws-java-sdk-core 1.12.390
com.amazonaws aws-java-sdk-datapipeline 1.12.390
com.amazonaws aws-java-sdk-directconnect 1.12.390
com.amazonaws aws-java-sdk-directory 1.12.390
com.amazonaws aws-java-sdk-dynamodb 1.12.390
com.amazonaws aws-java-sdk-ec2 1.12.390
com.amazonaws aws-java-sdk-ecs 1.12.390
com.amazonaws aws-java-sdk-efs 1.12.390
com.amazonaws aws-java-sdk-elasticache 1.12.390
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.390
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.390
com.amazonaws aws-java-sdk-elastictranscoder 1.12.390
com.amazonaws aws-java-sdk-emr 1.12.390
com.amazonaws aws-java-sdk-glacier 1.12.390
com.amazonaws aws-java-sdk-glue 1.12.390
com.amazonaws aws-java-sdk-iam 1.12.390
com.amazonaws aws-java-sdk-importexport 1.12.390
com.amazonaws aws-java-sdk-kinesis 1.12.390
com.amazonaws aws-java-sdk-kms 1.12.390
com.amazonaws aws-java-sdk-lambda 1.12.390
com.amazonaws aws-java-sdk-logs 1.12.390
com.amazonaws aws-java-sdk-machinelearning 1.12.390
com.amazonaws aws-java-sdk-opsworks 1.12.390
com.amazonaws aws-java-sdk-rds 1.12.390
com.amazonaws aws-java-sdk-redshift 1.12.390
com.amazonaws aws-java-sdk-route53 1.12.390
com.amazonaws aws-java-sdk-s3 1.12.390
com.amazonaws aws-java-sdk-ses 1.12.390
com.amazonaws aws-java-sdk-simpledb 1.12.390
com.amazonaws aws-java-sdk-simpleworkflow 1.12.390
com.amazonaws aws-java-sdk-sns 1.12.390
com.amazonaws aws-java-sdk-sqs 1.12.390
com.amazonaws aws-java-sdk-ssm 1.12.390
com.amazonaws aws-java-sdk-storagegateway 1.12.390
com.amazonaws aws-java-sdk-sts 1.12.390
com.amazonaws aws-java-sdk-support 1.12.390
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.390
com.amazonaws jmespath-java 1.12.390
com.clearspring.analytics akış 2.9.6
com.databricks Rserve 1.8-3
com.databricks databricks-sdk-java 0.2.0
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo gölgeli 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml Classmate 1.3.4
com.fasterxml.jackson.core jackson-annotations 2.14.2
com.fasterxml.jackson.core jackson-core 2.14.2
com.fasterxml.jackson.core jackson-databind 2.14.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.14.2
com.fasterxml.jackson.datatype jackson-datatype-joda 2.14.2
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.13.4
com.fasterxml.jackson.module jackson-module-paranamer 2.14.2
com.fasterxml.jackson.module jackson-module-scala_2.12 2.14.2
com.github.ben-manes.caffeine Kafein 2.9.3
com.github.fommil jniloader 1.1
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java 1.1-natives
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java 1.1-natives
com.github.fommil.netlib netlib-native_ref-linux-x86_64 1.1-natives
com.github.fommil.netlib netlib-native_system-linux-x86_64 1.1-natives
com.github.luben zstd-jni 1.5.2-5
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.8.9
com.google.crypto.tink Tink 1.7.0
com.google.errorprone error_prone_annotations 2.10.0
com.google.flatbuffers flatbuffers-java 1.12.0
com.google.guava Guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 2.1.214
com.helger Profiler 1.1.1
com.jcraft jsch 0.1.55
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.microsoft.sqlserver mssql-jdbc 11.2.2.jre8
com.ning compress-lzf 1.1.2
com.sun.mail javax.mail 1.5.2
com.sun.xml.bind jaxb-core 2.2.11
com.sun.xml.bind jaxb-impl 2.2.11
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.uber h3 3.7.0
com.univocity univocity-ayrıştırıcıları 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.5.0
commons-codec commons-codec 1,15
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.5
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.11.0
commons-lang commons-lang 2,6
commons-logging commons-logging 1.1.3
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 3.0.3
dev.ludovic.netlib Blas 3.0.3
dev.ludovic.netlib lapack 3.0.3
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0.21
io.delta delta-sharing-spark_2.12 0.7.1
io.dropwizard.metrics metrics-core 4.2.10
io.dropwizard.metrics metrics-graphite 4.2.10
io.dropwizard.metrics metrics-healthchecks 4.2.10
io.dropwizard.metrics metrics-jetty9 4.2.10
io.dropwizard.metrics metrics-jmx 4.2.10
io.dropwizard.metrics metrics-json 4.2.10
io.dropwizard.metrics metrics-jvm 4.2.10
io.dropwizard.metrics metrics-servlets 4.2.10
io.netty netty-all 4.1.87.Final
io.netty netty-buffer 4.1.87.Final
io.netty netty-codec 4.1.87.Final
io.netty netty-codec-http 4.1.87.Final
io.netty netty-codec-http2 4.1.87.Final
io.netty netty-codec-socks 4.1.87.Final
io.netty netty-common 4.1.87.Final
io.netty netty-handler 4.1.87.Final
io.netty netty-handler-proxy 4.1.87.Final
io.netty netty-resolver 4.1.87.Final
io.netty netty-transport 4.1.87.Final
io.netty netty-transport-classes-epoll 4.1.87.Final
io.netty netty-transport-classes-kqueue 4.1.87.Final
io.netty netty-transport-native-epoll 4.1.87.Final
io.netty netty-transport-native-epoll 4.1.87.Final-linux-aarch_64
io.netty netty-transport-native-epoll 4.1.87.Final-linux-x86_64
io.netty netty-transport-native-kqueue 4.1.87.Final-osx-aarch_64
io.netty netty-transport-native-kqueue 4.1.87.Final-osx-x86_64
io.netty netty-transport-native-unix-common 4.1.87.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx Toplayıcı 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation etkinleştirme 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction transaction-api 1.1
javax.xml.bind jaxb-api 2.2.11
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.12.1
ml.combust.mleap mleap-databricks-runtime_2.12 v0.20.0-db2
net.java.dev.jna Jna 5.8.0
net.razorvine Turşu 1.3
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv süper csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.13.33
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.9.3
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.9.16
org.apache.ant ant-jsch 1.9.16
org.apache.ant ant-launcher 1.9.16
org.apache.arrow ok biçimi 11.0.0
org.apache.arrow ok-bellek çekirdeği 11.0.0
org.apache.arrow ok-bellek-netty 11.0.0
org.apache.arrow ok-vektör 11.0.0
org.apache.avro avro 1.11.1
org.apache.avro avro-ipc 1.11.1
org.apache.avro avro eşlemeli 1.11.1
org.apache.commons commons-collections4 4.4
org.apache.commons commons-compress 1.21
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.6.1
org.apache.commons commons-text 1.10.0
org.apache.curator curator-client 2.13.0
org.apache.curator küratör çerçevesi 2.13.0
org.apache.curator curator-recipes 2.13.0
org.apache.datasketches datasketches-java 3.1.0
org.apache.datasketches datasketches-memory 2.0.0
org.apache.derby Derby 10.14.2.0
org.apache.hadoop hadoop-client-runtime 3.3.4
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive hive-shims 2.3.9
org.apache.hive hive-storage-api 2.8.1
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.httpcomponents httpclient 4.5.14
org.apache.httpcomponents httpcore 4.4.16
org.apache.ivy sarmaşık 2.5.1
org.apache.logging.log4j log4j-1.2-api 2.19.0
org.apache.logging.log4j log4j-api 2.19.0
org.apache.logging.log4j log4j-core 2.19.0
org.apache.logging.log4j log4j-slf4j2-impl 2.19.0
org.apache.mesos mesos 1.11.0-shaded-protobuf
org.apache.orc orc-core 1.8.4 gölgeli-protobuf
org.apache.orc orc-mapreduce 1.8.4 gölgeli-protobuf
org.apache.orc orc-shims 1.8.4
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm9 gölgeli 4.22
org.apache.yetus hedef kitle ek açıklamaları 0.13.0
org.apache.zookeeper zookeeper 3.6.3
org.apache.zookeeper zookeeper-jute 3.6.3
org.checkerframework dama-qual 3.19.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-derleyici 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.51.v20230217
org.eclipse.jetty jetty-continuation 9.4.51.v20230217
org.eclipse.jetty jetty-http 9.4.51.v20230217
org.eclipse.jetty jetty-io 9.4.51.v20230217
org.eclipse.jetty jetty-jndi 9.4.51.v20230217
org.eclipse.jetty jetty-plus 9.4.51.v20230217
org.eclipse.jetty jetty-proxy 9.4.51.v20230217
org.eclipse.jetty jetty-security 9.4.51.v20230217
org.eclipse.jetty jetty-server 9.4.51.v20230217
org.eclipse.jetty jetty-servlet 9.4.51.v20230217
org.eclipse.jetty jetty-servlets 9.4.51.v20230217
org.eclipse.jetty jetty-util 9.4.51.v20230217
org.eclipse.jetty jetty-util-ajax 9.4.51.v20230217
org.eclipse.jetty jetty-webapp 9.4.51.v20230217
org.eclipse.jetty jetty-xml 9.4.51.v20230217
org.eclipse.jetty.websocket websocket-api 9.4.51.v20230217
org.eclipse.jetty.websocket websocket-client 9.4.51.v20230217
org.eclipse.jetty.websocket websocket-common 9.4.51.v20230217
org.eclipse.jetty.websocket websocket-server 9.4.51.v20230217
org.eclipse.jetty.websocket websocket-servlet 9.4.51.v20230217
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-bulucu 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.36
org.glassfish.jersey.containers jersey-container-servlet-core 2.36
org.glassfish.jersey.core jersey-client 2.36
org.glassfish.jersey.core jersey-common 2.36
org.glassfish.jersey.core jersey-server 2.36
org.glassfish.jersey.inject jersey-hk2 2.36
org.hibernate.validator hibernate-validator 6.1.7.Final
org.ini4j ini4j 0.5.4
org.javassist javassist 3.25.0-GA
org.jboss.logging jboss günlüğü 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains Ek açıklama -ları 17.0.0
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.8.0
org.mariadb.jdbc mariadb-java-client 2.7.4
org.mlflow mlflow-spark 2.2.0
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.3.8
org.roaringbitmap RoaringBitmap 0.9.39
org.roaringbitmap dolgular 0.9.39
org.rocksdb rocksdbjni 7.8.3
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.15
org.scala-lang scala-library_2.12 2.12.15
org.scala-lang scala-reflect_2.12 2.12.15
org.scala-lang.modules scala-collection-compat_2.12 2.4.3
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt test arabirimi 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.2.15
org.scalanlp breeze-macros_2.12 2.1.0
org.scalanlp breeze_2.12 2.1.0
org.scalatest sca en son uyumlu 3.2.15
org.scalatest scalatest-core_2.12 3.2.15
org.scalatest scalatest-diagrams_2.12 3.2.15
org.scalatest scalatest-featurespec_2.12 3.2.15
org.scalatest scalatest-flatspec_2.12 3.2.15
org.scalatest scalatest-freespec_2.12 3.2.15
org.scalatest scalatest-funspec_2.12 3.2.15
org.scalatest scalatest-funsuite_2.12 3.2.15
org.scalatest scalatest-matchers-core_2.12 3.2.15
org.scalatest scalatest-mustmatchers_2.12 3.2.15
org.scalatest scalatest-propspec_2.12 3.2.15
org.scalatest scalatest-refspec_2.12 3.2.15
org.scalatest scalatest-shouldmatchers_2.12 3.2.15
org.scalatest scalatest-wordspec_2.12 3.2.15
org.scalatest scalatest_2.12 3.2.15
org.slf4j jcl-over-slf4j 2.0.6
org.slf4j jul-to-slf4j 2.0.6
org.slf4j slf4j-api 2.0.6
org.threeten threeten-extra 1.7.1
org.tukaani Xz 1.9
org.typelevel algebra_2.12 2.0.1
org.typelevel cats-kernel_2.12 2.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.1.3.Final
org.xerial sqlite-jdbc 3.42.0.0
org.xerial.snappy snappy-java 1.1.10.1
org.yaml snakeyaml 1,33
Oro Oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.cryptools AmazonCorrettoCryptoProvider 1.6.1-linux-x86_64
software.amazon.ion ion-java 1.0.2
Stax stax-api 1.0.1