Databricks Runtime 4.2 (desteklenmiyor)

  • Makale

Databricks bu görüntüyü Temmuz 2018'de yayımladı.

Önemli

Bu sürüm 5 Mart 2019'da kullanım dışı bırakılmıştır. Databricks Runtime kullanımdan kaldırma ilkesi ve zamanlaması hakkında daha fazla bilgi için bkz . Databricks çalışma zamanı destek yaşam döngüleri.

Aşağıdaki sürüm notları, Apache Spark tarafından desteklenen Databricks Runtime 4.2 hakkında bilgi sağlar.

Delta Lake

Databricks Runtime 4.2, Delta Lake'e önemli kalite iyileştirmeleri ve işlevler ekler. Databricks, tüm Delta Lake müşterilerinin yeni çalışma zamanına yükseltmesini kesinlikle önerir. Bu sürüm Özel Önizleme'de kalır, ancak yaklaşan genel kullanılabilirlik (GA) sürümünü tahmin eden bir aday sürümü temsil eder.

Yeni özellikler

  • Akışlar artık kullanılarak df.writeStream.table(...)Hive meta veri deposunda kayıtlı bir Delta tablosuna doğrudan yazılabilir.

İyileştirmeler

  • Tüm Delta Lake komutları ve sorguları artık yolunu tanımlayıcı olarak kullanan bir tabloya başvurmayı destekliyor:

    delta.`<path-to-table>`

    Daha önce OPTIMIZE ve VACUUM gerekli olmayan standart olmayan dize değişmez değerleri kullanımı (başka bir ifadeyle '<path-to-table>').

  • DESCRIBE HISTORY şimdi işleme kimliğini içerir ve varsayılan olarak en yeniden en eskiye sıralanır.

Hata düzeltmeleri

  • Bölüm koşullarını temel alan filtreleme artık koşul durumu tablonunkinden farklı olsa bile doğru şekilde çalışır.
  • Delta tablolarındaki boole sütunlarında eşitlik denetimleri gerçekleştirirken eksik sütun AnalysisException düzeltildi (yani). booleanValue = true
  • CREATE TABLE artık var olan bir tabloya işaretçi oluştururken işlem günlüğünü değiştirmez. Bu, eşzamanlı akışlarla gereksiz çakışmaları önler ve kullanıcının verilere yalnızca okuma erişimine sahip olduğu tablolara yönelik meta veri deposu işaretçisi oluşturulmasına olanak tanır.
  • Büyük miktarda veri içeren bir akışta çağrılması display() artık sürücüde OOM'ye neden olmaz.
  • AnalysisException artık boş sonuçlar döndürmek yerine temel bir Delta Lake yolu silindiğinde oluşturulur.
  • Belirli bir protokol sürümü gerektiren Delta Lake yapılandırmaları (örneğin, appendOnly) yalnızca uygun bir sürümdeki tablolara uygulanabilir.
  • Delta tablosunun durumunu güncelleştirirken, uzun kökenler artık bir önlemek StackOverFlowErroriçin otomatik olarak kesiliyor.

Yapılandırılmış Akış

Yeni özellikler

  • Delta Lake ve Kafka artık Trigger.Once'ı tam olarak destekliyor. Kaynak seçenekler veya varsayılanlar olarak belirtilen daha önce hız sınırları (örneğin maxOffsetsPerTrigger veya maxFilesPerTrigger) kullanılabilir verilerin yalnızca kısmi yürütülmesine neden olabilir. Bu seçenekler artık kullanıldığında yoksayılır Trigger.Once ve kullanılabilir durumdaki tüm verilerin işlenmesine olanak sağlar.

  • Scala'da yeni akış foreachBatch() eklendi. Burada, DataFrame işlemlerini kullanarak her mikrobatch'in çıkışını işlemek için bir işlev tanımlayabilirsiniz. Bu, aşağıdakileri etkinleştirir:

    • Henüz akış veri kaynağı olmayan sistemlere mikrobatch çıkışları yazmak için mevcut toplu iş veri kaynaklarını kullanma (örneğin, her mikro toplu iş çıkışında Cassandra toplu iş yazıcısını kullanın).
    • Mikrobatch çıkışını birden çok konuma yazma.
    • DataFrame akışında henüz desteklenmeyen mikrobatch çıkışlarına DataFrame ve tablo işlemleri uygulama (örneğin, delta tablosuna mikrobatch çıkışı ekleme).

  • Gibi yalnızca dosyalar yerine bir DataFrame içinde Avro verilerini okumak ve yazmak için from_json/to_jsonişlevler eklendifrom_avro/to_avro. Daha fazla ayrıntı için bkz . Avro Verilerini Her Yerde Okuma ve Yazma.

  • Python'da akış foreach() desteği eklendi (Scala'da zaten kullanılabilir). Diğer ayrıntılar için foreach ve foreachBatch belgelerine bakın.

İyileştirmeler

  • Giriş akışında veri olmadığında durum bilgisi olan işlemler (mapGroupsWithStateakış akış birleştirme, akış toplama, akış dropDuplicates) ile çıkış sonuçlarının ve/veya durum temizlemesinin daha hızlı oluşturulması.

Hata düzeltmeleri

Diğer Değişiklikler ve Geliştirmeler

  • Tablo erişim denetimi etkin kümeler için SQL Reddetme komutu desteği eklendi. Kullanıcılar artık belirli izinleri daha önce verileceği şekilde reddedebilir. Reddedilen izin verilen iznin yerini alır. Belirli bir nesnenin Yönetici ve Sahiplerinin her zaman eylem gerçekleştirmesine izin verilir.
  • ABFS sürücüsünü kullanan yeni Azure Data Lake Storage 2. Nesil veri kaynağı. Bkz. Azure Data Lake Storage 2. Nesil ve Blob Depolama Bağlan
  • Yüklü bazı Python kitaplıkları yükseltildi:
    • pip: 10.0.0b2 ile 10.0.1
    • kurulum araçları: 39.0.1 ile 39.2.0
    • tornado: 5.0.1 - 5.0.2
    • tekerlek: 0.31.0 - 0.31.1
  • Yüklü birkaç R kitaplığı yükseltildi. Bkz. Yüklü R Kitaplıkları.
  • Geliştirilmiş Parquet desteği
  • Apache ORC 1.4.1'den 1.4.3'e yükseltildi

Apache Spark

Databricks Runtime 4.2, Apache Spark 2.3.1'i içerir. Bu sürüm, Databricks Runtime 4.1'e (desteklenmeyen) dahil olan tüm düzeltmeler ve iyileştirmelerin yanı sıra Spark'ta yapılan aşağıdaki ek hata düzeltmelerini ve iyileştirmeleri içerir:

  • [SPARK-24588][SS] akış birleştirme için alt öğelerden HashClusteredPartitioning gerekir
  • [SPARK-23931][SQL] function.scala @scala.annotation.varargsiçinde yapınarrays_zip.
  • [SPARK-24633][SQL] arrays_zip için bölme gerektiğinde codegen düzeltmesi
  • [SPARK-24578][CORE] Cap alt bölgesinin döndürülen nio arabelleğindeki boyutu
  • [SPARK-24613][SQL] UDF ile önbellek, sonraki bağımlı önbelleklerle eşleştirilemedi
  • [SPARK-24583][SQL] InsertIntoDataSourceCommand'da yanlış şema türü
  • [SPARK-24565][SS] Her mikrobatch'in çıkış satırlarını DataFrame olarak kullanıma çıkarmak için Yapılandırılmış Akış'ta için API ekleme
  • [SPARK-24396][SS] [PYSPARK] Python için Yapılandırılmış Streaming ForeachWriter ekleme
  • [SPARK-24216][SQL] Spark TypedAggregateExpression, Scala'da güvenli olmayan getSimpleName kullanır
  • [SPARK-24452][SQL] [CORE] Int add veya multiple içinde olası taşmalardan kaçının
  • [SPARK-24187][R] [SQL] SparkR'ye array_join işlevi ekleme
  • [SPARK-24525][SS] MemorySink içindeki satır sayısını sınırlama seçeneği sağlama
  • [SPARK-24331][SPARKR] [SQL] SparkR'ye arrays_overlap, array_repeat map_entries ekleme
  • [SPARK-23931][SQL] Spark SQL'e arrays_zip işlevi ekler
  • [SPARK-24186][R] [SQL] R'de koleksiyon işlevlerine ters ve concat'i değiştirme
  • [SPARK-24198][SPARKR] [SQL] SparkR'ye dilim işlevi ekleme
  • [SPARK-23920][SQL] diziden öğeye eşit olan tüm öğeleri kaldırmak için array_remove ekleyin
  • [SPARK-24197][SPARKR] [SQL] SparkR'ye array_sort işlevi ekleme
  • [SPARK-24340][CORE] Tek başına kümede yürütücüden çıkılmalarından sonra disk bloğu yöneticisi dosyalarını karıştırmayan dosyaları temizleme
  • [SPARK-23935][SQL] map_entries işlevi ekleme
  • [SPARK-24500][SQL] Ağaç dönüşümleri sırasında akışların gerçekleştirildiğinden emin olun.
  • [SPARK-24495][SQL] Eşit anahtarları yeniden sıralarken EnsureRequirement yanlış plan döndürüyor
  • [SPARK-24506][UI] Bağlamadan sonra eklenen sekmelere KULLANıCı arabirimi filtreleri ekleme
  • [SPARK-24468][SQL] Ondalık işlemler için duyarlığı ayarlarken negatif ölçeği işleme
  • [SPARK-24313][SQL] Karmaşık türler için koleksiyon işlemlerinin yorumlanmış değerlendirmesini düzeltme
  • [SPARK-23922][SQL] arrays_overlap işlevi ekleme
  • [SPARK-24369][SQL] Aynı bağımsız değişken kümesine sahip birden çok ayrı toplama için doğru işleme
  • [SPARK-24455][CORE] TaskSchedulerImpl açıklamasında yazım hatası düzeltildi
  • [SPARK-24397][PYSPARK] Python'da TaskContext.getLocalProperty(key) eklendi
  • [SPARK-24117][SQL] getSizePerRow birleştirilmiş
  • [SPARK-24156][SS] Veri içermeyen toplu işlemdeki hatadan kurtarma hatasını düzeltme
  • [SPARK-24414][UI] Aşama için doğru görev sayısını hesaplama.
  • [SPARK-23754][PYTHON] İstemci kodunda StopIteration'ı yeniden oluşturma
  • [SPARK-23991][DSTREAMS] allocateBlocksToBatch'ta WAL yazma işlemi başarısız olduğunda veri kaybını düzeltme
  • [SPARK-24373][SQL] RelationalGroupedDataset ve KeyValueGroupedDataset'in alt öğelerine AnalysisBarrier ekleme
  • [SPARK-24392][PYTHON] pandas_udf Deneysel olarak etiketleme
  • [SPARK-24334] ArrowPythonRunner'da Ok bellek ayırıcısının belirsiz bir şekilde kapatılmasına neden olan yarış durumu düzeltildi
  • [SPARK-19112][CORE] Yapılandırmaya eksik shortCompressionCodecNames ekleyin.
  • [SPARK-24244][SPARK-24368][SQL] CSV ayrıştırıcısına yalnızca gerekli sütunları geçirme
  • [SPARK-24366][SQL] Tür dönüştürme için hata iletilerini iyileştirme
  • [SPARK-24371][SQL] Scala için DataFrame API'sinde isInCollection eklendi...
  • [SPARK-23925][SQL] array_repeat koleksiyonu işlevi ekleme
  • [KÜÇÜK] toString ve scaladoc'a bağlantı noktası SSL yapılandırması ekleme
  • [SPARK-24378][SQL] date_trunc işlevi yanlış örneklerini düzeltme
  • [SPARK-24364][SS] Dosya yolu yoksa InMemoryFileIndex'in başarısız olmasını engelle
  • [SPARK-24257][SQL] LongToUnsafeRowMap yeni boyutu hesaplama yanlış olabilir
  • [SPARK-24348][SQL] element_at" hata düzeltmesi
  • [SPARK-23930][SQL] Dilim işlevi ekleme
  • [SPARK-23416][SS] ContinuousExecution için belirli bir durdurma yöntemi ekleyin.
  • [SPARK-23852][SQL] Parquet 1.8.3 sürümüne yükseltme
  • [SPARK-24350][SQL] "array_position" işlevindeki ClassCastException düzeltmeleri
  • [SPARK-24321][SQL] Ortak kodu Bölme/Kalan öğelerden temel bir özellik olarak ayıklama
  • [SPARK-24309][CORE] AsyncEventQueue kesmede durmalıdır.
  • [SPARK-23850][SQL] SQL seçenekleri yeniden eylem için ayrı yapılandırma ekleyin.
  • [SPARK-22371][CORE] Bir akümülatör atık toplandığında bir özel durum atmak yerine Hiçbiri döndürün.
  • [SPARK-24002][SQL] Org.apache.parquet.io.api.Binary$ByteBufferBackedBinary.getBytes nedeniyle görev serileştirilebilir değil
  • [SPARK-23921][SQL] array_sort işlevi ekleme
  • [SPARK-23923][SQL] Kardinalite işlevi ekleme
  • [SPARK-24159][SS] MapGroupswithState akışı için veri içermeyen mikro toplu işlemleri etkinleştirme
  • [SPARK-24158][SS] Akış birleştirmeleri için veri olmayan toplu işlemleri etkinleştirme
  • [SPARK-24157][SS] Akış toplama ve yinelenenleri kaldırma için MicroBatchExecution'da veri yok toplu işlemleri etkinleştirildi
  • [SPARK-23799][SQL] FilterEstimation.evaluateInSet STRING için yanlış istatistikler üretir
  • [SPARK-17916][SQL] nullValue ayarlandığında boş dizenin null olarak ayrıştırılması düzeltildi.
  • [SPARK-23916][SQL] array_join işlevi ekleme
  • [SPARK-23408][SS] Streaming*JoinSuite içindeki ardışık AddData eylemlerini eşitleme
  • [SPARK-23780][R] yeni SparkR ile googleVis kitaplığı kullanılamadı
  • [SPARK-23821][SQL] Koleksiyon işlevi: düzleştirme
  • [SPARK-23627][SQL] Veri Kümesinde isEmpty sağlama
  • [SPARK-24027][SQL] from_json tarafından kök tür olarak anahtarlar için StringType ile MapType desteği
  • [SPARK-24035][SQL] Pivot için SQL söz dizimi - antlr uyarısını düzeltme
  • [SPARK-23736][SQL] Concat işlevini dizi sütunlarını destekleyecek şekilde genişletme
  • [SPARK-24246][SQL] Kullanılabilir durumdaki nedeni ayarlayarak AnalysisException'ı geliştirme
  • [SPARK-24263][R] Openjdk ile SparkR java denetimi sonları
  • [SPARK-24262][PYTHON] UDF türü eşleştirme hata iletisindeki yazım hatası düzeltilir
  • [SPARK-24067][AKıŞ] [KAFKA] Ardışık olmayan uzaklıklara izin ver
  • [SPARK-10878][CORE] Birden çok istemci yapıtları aynı anda çözümlediğinde yarış durumunu düzeltme
  • [SPARK-19181][CORE] Zayıf "SparkListenerSuite.local ölçümleri" düzeltildi
  • [SPARK-24068]DataFrameReader'ın seçeneklerini şema çıkarımında Metin veri kaynağına yayma
  • [SPARK-24214][SS] StreamingRelationV2/StreamingExecutionRelation/ContinuousExecutionRelation için toJSON düzeltmesi
  • [SPARK-23919][SPARK-23924][SPARK-24054][SQL] array_position/element_at işlevi ekleme
  • [SPARK-23926][SQL] ArrayType bağımsız değişkenlerini desteklemek için ters işlevi genişletme
  • [SPARK-23809][SQL] Etkin SparkSession getOrCreate tarafından ayarlanmalıdır
  • [SPARK-23094][SPARK-23723][SPARK-23724][SQL] JSON dosyaları için özel kodlamayı destekleme
  • [SPARK-24035][SQL] Pivot için SQL söz dizimi
  • [SPARK-24069][R] array_min / array_max işlevleri ekleme
  • [SPARK-23976][CORE] UTF8String.concat()/ByteArray.concat() içinde uzunluk taşması algılama
  • [SPARK-24188][CORE] "/version" API uç noktasını geri yükleyin.
  • [SPARK-24128][SQL] Örtük CROSS JOIN hatasında yapılandırma seçeneğinden bahsetme
  • [SPARK-23291][SQL] [R] Scala API'sini çağırırken R'nin alt dizesi başlangıç konumunu 1 azaltmamalıdır
  • [SPARK-23697][CORE] LegacyAccumulatorWrapper isZero'yı doğru tanımlamalıdır
  • [SPARK-24168][SQL] WindowExec yürütücü tarafında SQLConf'a erişmemelidir
  • [SPARK-24143]mapstatus'ı (blockId, boyut) çiftine dönüştürürken boş blokları filtreleme
  • [SPARK-23917][SPARK-23918][SQL] array_max/array_min işlevi ekleme
  • [SPARK-23905][SQL] Hafta içi UDF ekleme
  • [SPARK-16406][SQL] LogicalPlan.resolve performansını geliştirme
  • [SPARK-24013][SQL] ApproximatePercentile'de gereksiz sıkıştırmayı kaldırma
  • [SPARK-23433][CORE] Geç zombi görev tamamlamaları tüm görev kümelerini güncelleştirir
  • [SPARK-24169][SQL] JsonToStructs yürütücü tarafında SQLConf'a erişmemelidir
  • [SPARK-24133][SQL] Backport [SPARK-24133]WritableColumnVectors yeniden boyutlandırılırken tamsayı taşmalarını denetleme
  • [SPARK-24166][SQL] InMemoryTableScanExec yürütücü tarafında SQLConf'a erişmemelidir
  • [SPARK-24133][SQL] WritableColumnVectors yeniden boyutlandırılırken tamsayı taşmalarını denetleme
  • [SPARK-24085][SQL] Bölümleme ifadesinde skaler alt sorgu mevcut olduğunda sorgu UnsupportedOperationException döndürür
  • [SPARK-24062][THRIFT SERVER] Thrift sunucusunda SASL şifrelemesi etkinleştirilemiyor sorununu düzeltme
  • [SPARK-23004][SS] Akış toplama görevinde StateStore.commit dosyasının yalnızca bir kez çağrıldığından emin olun
  • [SPARK-23188][SQL] Vektörleştirilmiş harmanlama okuyucu toplu iş boyutunu yapılandırılabilir hale getirme
  • [SPARK-23375][SPARK-23973][SQL] İyileştirici'de gereksiz Sıralamayı ortadan kaldırma
  • [SPARK-23877][SQL] Yalnızca meta veri sorgularında bölümleri ayıklamak için filtre koşullarını kullanma
  • [SPARK-24033][SQL] Belirtilen Pencere ÇerçevesiNin Eşleşmeme Durumu Düzeltildiwindowframe(RowFrame, -1, -1)
  • [SPARK-23340][SQL] Apache ORC'yi 1.4.3 sürümüne yükseltme
  • Oluşturulan kaynak kodu biraz daha uzun hale getirdiğinden ve sorunlu kod yolunu tetiklediğinden (Expression.reduceCodeSize() ile bölünen kod) spark-23986 tarafından kullanıma sunulan, daha kolay ifade kodu oluşturma tarafından tetiklenme olasılığı daha yüksek olan eksik null denetim sorunu düzeltildi.
  • [SPARK-23989][SQL] exchange serileştirilmemiş karıştırmadan önce verileri kopyalamalıdır
  • [SPARK-24021][CORE] BlacklistTracker'ın güncelleştirmesindeki hata düzeltildiBlacklistForFetchFailure
  • [SPARK-24014][PYSPARK] StreamingListener'a onStreamingStarted yöntemi ekleme
  • [SPARK-23963][SQL] Metin tabanlı Hive tablosunda sorgudaki çok sayıda sütunu düzgün bir şekilde işleme
  • [SPARK-23948] submitMissingTasks içinde mapstage'ın iş dinleyicisini tetikleme
  • [SPARK-23986][SQL] freshName benzersiz olmayan adlar oluşturabilir
  • [SPARK-23835][SQL] Demetlerin bağımsız değişkenlerini seri durumdan çıkarma işlemine null olmayan denetim ekleme

Bakım güncelleştirmeleri

Bkz . Databricks Runtime 4.2 bakım güncelleştirmeleri.

Sistem ortamı

  • İşletim Sistemi: Ubuntu 16.04.4 LTS
  • Java: 1.8.0_162
  • Scala: 2.11.8
  • Python: Python 2 kümeleri için 2.7.12 ve Python 3 kümeleri için 3.5.2.
  • R: R sürüm 3.4.4 (2018-03-15)
  • GPU kümeleri: Aşağıdaki NVIDIA GPU kitaplıkları yüklenir:
    • Tesla sürücüsü 375.66
    • CUDA 9.0
    • cuDNN 7.0

Yüklü Python kitaplıkları

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
ansi2html 1.1.1 argparse 1.2.1 backports-abc 0,5
Boto 2.42.0 boto3 1.4.1 botocore 1.4.70
brewer2mpl 1.4.1 sertifikalı 2016.2.28 cffi 1.7.0
chardet 2.3.0 colorama 0.3.7 configobj 5.0.6
Şifreleme 1.5 Cycler 0.10.0 Cython 0.24.1
Dekoratör 4.0.10 docutils 0,14 enum34 1.1.6
et-xmlfile 1.0.1 freetype-py 1.0.2 funcsigs 1.0.2
fusepy 2.0.4 Vadeli 3.2.0 ggplot 0.6.8
html5lib 0,999 ıdna 2.1 ıpaddress 1.0.16
ipython 2.2.0 ipython-genutils 0.1.0 jdcal 1.2
Jinja2 2.8 jmespath 0.9.0 llvmlite 0.13.0
lxml 3.6.4 İşaretlemeyi Kasa 0.23 matplotlib 1.5.3
mpld3 0,2 msgpack-python 0.4.7 ndg-httpsclient 0.3.3
numba 0.28.1 numpy 1.11.1 openpyxl 2.3.2
pandas 0.19.2 pathlib2 2.1.0 Patsy 0.4.1
pexpect 4.0.1 pickleshare 0.7.4 Yastık 3.3.1
Pip 10.0.1 Kat 3.9 prompt-toolkit 1.0.7
psycopg2 2.6.2 ptyprocess 0.5.1 py4j 0.10.3
serçe 0.8.0 pyasn1 0.1.9 pycparser 2,14
Pygments 2.1.3 PyGObject 3.20.0 pyOpenSSL 16.0.0
pyparsing 2.2.0 pypng 0.0.18 Python 2.7.12
python-dateutil 2.5.3 python-geohash 0.8.5 pytz 2016.6.1
istekler 2.11.1 s3transfer 0.1.9 scikit-learn 0.18.1
scipy 0.18.1 Koşuşturmak 0.32 Sinan 0.7.1
kurulum araçları 39.2.0 simplejson 3.8.2 simples3 1.0
singledispatch 3.4.0.3 Altı 1.10.0 statsmodeller 0.6.1
Kasırga 5.0.2 traitlets 4.3.0 urllib3 1.19.1
virtualenv 15.0.1 wcwidth 0.1.7 Tekerlek 0.31.1
wsgiref 0.1.2

Yüklü R kitaplıkları

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
abind 1.4-5 assertthat 0.2.0 Backports 1.1.2
temel 3.4.4 BH 1.66.0-1 bağlayıcı 0.1.1
bindrcpp 0.2.2 bit 1.1-12 bit64 0.9-7
bitops 1.0-6 blob 1.1.1 başlatma 1.3-20
Brew 1.0-6 Süpürge 0.4.4 car 3.0-0
carData 3.0-1 şapka işareti 6.0-79 cellranger 1.1.0
chron 2.3-52 class 7.3-14 cli 1.0.0
cluster 2.0.7-1 codetools 0.2-15 renk alanı 1.3-2
commonmark 1.4 derleyicisi 3.4.4 Crayon 1.3.4
Curl 3.2 CVST 0.2-1 data.table 1.10.4-3
veri kümeleri 3.4.4 DBİ 0.8 ddalpha 1.3.1.1
DEoptimR 1.0-8 Desc 1.1.1 geliştirici araçları 1.13.5
dichromat 2.0-0 Özet 0.6.15 soluk 0.1.0
doMC 1.3.5 dplyr 0.7.4 DRR 0.0.3
forcats 0.3.0 foreach 1.4.4 Yabancı 0.8-70
gbm 2.1.3 ggplot2 2.2.1 git2r 0.21.0
glmnet 2.0-16 Tutkal 1.2.0 Gower 0.1.2
grafikler 3.4.4 grDevices 3.4.4 Kılavuz 3.4.4
gsubfn 0.7 gtable 0.2.0 h2o 3.16.0.2
Haven 1.1.1 Hms 0.4.2 httr 1.3.1
hwriter 1.3.2 hwriterPlus 1.0-3 ipred 0.9-6
Yineleyicilerde 1.0.9 jsonlite 1.5 kernlab 0.9-25
KernSmooth 2.23-15 Etiketleme 0.3 Kafes 0.20-35
Lav 1.6.1 lazyeval 0.2.1 Littler 0.3.3
lme4 1.1-17 lubridate 1.7.3 magrittr 1.5
mapproj 1.2.6 Haritalar 3.3.0 maptools 0.9-2
MASS 7.3-50 Matris 1.2-14 MatrixModels 0.4-1
not defteri 1.1.0 yöntemler 3.4.4 mgcv 1.8-24
Mıme 0,5 minqa 1.2.4 mnormt 1.5-5
ModelMetrics 1.1.0 munsell 0.4.3 mvtnorm 1.0-7
nlme 3.1-137 nloptr 1.0.4 nnet 7.3-12
numDeriv 2016.8-1 openssl 1.0.1 openxlsx 4.0.17
parallel 3.4.4 pbkrtest 0.4-7 Ayağı 1.2.1
pkgconfig 2.0.1 pkgKitten 0.1.4 plogr 0.2.0
plyr 1.8.4 Övgü 1.0.0 prettyunits 1.0.2
Yordam 1.11.0 prodlim 1.6.1 Proto 1.0.0
Psikolojik 1.8.3.3 purrr 0.2.4 quantreg 5,35
R.methodsS3 1.7.1 R.oo 1.21.0 R.utils 2.6.0
R6 2.2.2 randomForest 4.6-14 RColorBrewer 1.1-2
Rcpp 0.12.16 RcppEigen 0.3.3.4.0 RcppRoll 0.2.2
RCurl 1.95-4.10 readr 1.1.1 readxl 1.0.0
yemek tarifleri 0.1.2 Rövanş 1.0.1 yeniden şekillendirme2 1.4.3
Rio 0.5.10 rlang 0.2.0 robustbase 0.92-8
RODBC 1.3-15 roxygen2 6.0.1 rpart 4.1-13
rprojroot 1.3-2 Rserve 1.7-3 RSQLite 2.1.0
rstudioapi 0.7 Terazi 0.5.0 sfsmisc 1.1-2
Sp 1.2-7 SparkR 2.3.1 Seyrek Bakış 1.77
Kayma 7.3-11 Splines 3.4.4 sqldf 0.4-11
KAREM 2017.10-1 statmod 1.4.30 Istatistik 3.4.4
istatistikler4 3.4.4 stringi 1.1.7 dizeleyici 1.3.0
Hayatta kalma 2.42-3 tcltk 3.4.4 TeachingDemos 2.10
test edin 2.0.0 Türk 1.4.2 derleyici 0.8.0
tidyselect 0.2.4 timeDate 3043.102 araçlar 3.4.4
utf8 1.1.3 Yardımcılar 3.4.4 viridisLite 0.3.0
Bıyık 0.3-2 withr 2.1.2 xml2 1.2.0

Yüklü Java ve Scala kitaplıkları (Scala 2.11 küme sürümü)

Grup Kimliği Yapıt Kimliği Sürüm
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.7.3
com.amazonaws aws-java-sdk-autoscaling 1.11.313
com.amazonaws aws-java-sdk-cloudformation 1.11.313
com.amazonaws aws-java-sdk-cloudfront 1.11.313
com.amazonaws aws-java-sdk-cloudhsm 1.11.313
com.amazonaws aws-java-sdk-cloudsearch 1.11.313
com.amazonaws aws-java-sdk-cloudtrail 1.11.313
com.amazonaws aws-java-sdk-cloudwatch 1.11.313
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.11.313
com.amazonaws aws-java-sdk-codedeploy 1.11.313
com.amazonaws aws-java-sdk-cognitoidentity 1.11.313
com.amazonaws aws-java-sdk-cognitosync 1.11.313
com.amazonaws aws-java-sdk-config 1.11.313
com.amazonaws aws-java-sdk-core 1.11.313
com.amazonaws aws-java-sdk-datapipeline 1.11.313
com.amazonaws aws-java-sdk-directconnect 1.11.313
com.amazonaws aws-java-sdk-directory 1.11.313
com.amazonaws aws-java-sdk-dynamodb 1.11.313
com.amazonaws aws-java-sdk-ec2 1.11.313
com.amazonaws aws-java-sdk-ecs 1.11.313
com.amazonaws aws-java-sdk-efs 1.11.313
com.amazonaws aws-java-sdk-elasticache 1.11.313
com.amazonaws aws-java-sdk-elasticbeanstalk 1.11.313
com.amazonaws aws-java-sdk-elasticloadbalancing 1.11.313
com.amazonaws aws-java-sdk-elastictranscoder 1.11.313
com.amazonaws aws-java-sdk-emr 1.11.313
com.amazonaws aws-java-sdk-glacier 1.11.313
com.amazonaws aws-java-sdk-iam 1.11.313
com.amazonaws aws-java-sdk-importexport 1.11.313
com.amazonaws aws-java-sdk-kinesis 1.11.313
com.amazonaws aws-java-sdk-kms 1.11.313
com.amazonaws aws-java-sdk-lambda 1.11.313
com.amazonaws aws-java-sdk-logs 1.11.313
com.amazonaws aws-java-sdk-machinelearning 1.11.313
com.amazonaws aws-java-sdk-opsworks 1.11.313
com.amazonaws aws-java-sdk-rds 1.11.313
com.amazonaws aws-java-sdk-redshift 1.11.313
com.amazonaws aws-java-sdk-route53 1.11.313
com.amazonaws aws-java-sdk-s3 1.11.313
com.amazonaws aws-java-sdk-ses 1.11.313
com.amazonaws aws-java-sdk-simpledb 1.11.313
com.amazonaws aws-java-sdk-simpleworkflow 1.11.313
com.amazonaws aws-java-sdk-sns 1.11.313
com.amazonaws aws-java-sdk-sqs 1.11.313
com.amazonaws aws-java-sdk-ssm 1.11.313
com.amazonaws aws-java-sdk-storagegateway 1.11.313
com.amazonaws aws-java-sdk-sts 1.11.313
com.amazonaws aws-java-sdk-support 1.11.313
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.11.313
com.amazonaws jmespath-java 1.11.313
com.carrotsearch hppc 0.7.2
com.chuusai shapeless_2.11 2.3.2
com.clearspring.analytics akış 2.7.0
com.databricks Rserve 1.8-3
com.databricks dbml-local_2.11 0.4.1-db1-spark2.3
com.databricks dbml-local_2.11-tests 0.4.1-db1-spark2.3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.11 0.4.15-9
com.databricks.scalapb scalapb-runtime_2.11 0.4.15-9
com.esotericsoftware kryo gölgeli 3.0.3
com.esotericsoftware minlog 1.3.0
com.fasterxml Classmate 1.0.0
com.fasterxml.jackson.core jackson-annotations 2.6.7
com.fasterxml.jackson.core jackson-core 2.6.7
com.fasterxml.jackson.core jackson-databind 2.6.7.1
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.6.7
com.fasterxml.jackson.datatype jackson-datatype-joda 2.6.7
com.fasterxml.jackson.module jackson-module-paranamer 2.6.7
com.fasterxml.jackson.module jackson-module-scala_2.11 2.6.7.1
com.github.fommil jniloader 1.1
com.github.fommil.netlib çekirdek 1.1.2
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java-natives 1.1
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java-natives 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1.1
com.github.luben zstd-jni 1.3.2-2
com.github.rwl jtransforms 2.4.0
com.google.code.findbugs jsr305 2.0.1
com.google.code.gson gson 2.2.4
com.google.guava Guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.googlecode.javaewah JavaEWAH 0.3.2
com.h2database h2 1.3.174
com.jamesmurty.utils java-xmlbuilder 1.1
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.RELEASE
com.mchange c3p0 0.9.5.1
com.mchange mchange-commons-java 0.2.10
com.microsoft.azure azure-data-lake-store-sdk 2.2.8
com.microsoft.sqlserver mssql-jdbc 6.2.2.jre8
com.ning compress-lzf 1.0.3
com.sun.mail javax.mail 1.5.2
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.11 0.3
com.twitter chill-java 0.8.4
com.twitter chill_2.11 0.8.4
com.twitter parquet-hadoop-bundle 1.6.0
com.twitter util-app_2.11 6.23.0
com.twitter util-core_2.11 6.23.0
com.twitter util-jvm_2.11 6.23.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging-api_2.11 2.1.2
com.typesafe.scala-logging scala-logging-slf4j_2.11 2.1.2
com.univocity univocity-ayrıştırıcıları 2.5.9
com.vlkan flatbuffers 1.2.0-3f79e055
com.zaxxer HikariCP 3.1.0
commons-beanutils commons-beanutils 1.7.0
commons-beanutils commons-beanutils-core 1.8.0
commons-cli commons-cli 1.2
commons-codec commons-codec 1.10
commons-collections commons-collections 3.2.2
commons-configuration commons-configuration 1.6
commons-dbcp commons-dbcp 1.4
commons-digester commons-digester 1.8
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.4
commons-lang commons-lang 2,6
commons-logging commons-logging 1.1.3
commons-net commons-net 2.2
commons-pool commons-pool 1.5.4
info.ganglia.gmetric4j gmetric4j 1.0.7
io.airlift aircompressor 0.8
io.dropwizard.metrics metrics-core 3.1.5
io.dropwizard.metrics metrics-ganglia 3.1.5
io.dropwizard.metrics metrics-graphite 3.1.5
io.dropwizard.metrics metrics-healthchecks 3.1.5
io.dropwizard.metrics metrics-jetty9 3.1.5
io.dropwizard.metrics metrics-json 3.1.5
io.dropwizard.metrics metrics-jvm 3.1.5
io.dropwizard.metrics metrics-log4j 3.1.5
io.dropwizard.metrics metrics-servlets 3.1.5
io.netty netty 3.9.9.Final
io.netty netty-all 4.1.17.Final
io.prometheus simpleclient 0.0.16
io.prometheus simpleclient_common 0.0.16
io.prometheus simpleclient_dropwizard 0.0.16
io.prometheus simpleclient_servlet 0.0.16
io.prometheus.jmx Toplayıcı 0.7
javax.activation etkinleştirme 1.1.1
javax.annotation javax.annotation-api 1.2
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.servlet javax.servlet-api 3.1.0
javax.servlet.jsp jsp-api 2.1
javax.transaction jta 1.1
javax.validation validation-api 1.1.0.Final
javax.ws.rs javax.ws.rs-api 2.0.1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
javolution javolution 5.5.1
jline jline 2.11
joda-time joda-time 2.9.3
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
net.hydromatic eigenbase-properties 1.1.5
net.iharder base64 2.3.8
net.java.dev.jets3t jets3t 0.9.4
net.razorvine pirolit 4.13
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv süper csv 2.2.0
net.snowflake snowflake-jdbc 3.6.3
net.snowflake spark-snowflake_2.11 2.3.2
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt oncrpc 1.0.7
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.4
org.antlr antlr4-runtime 4.7
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant ant-launcher 1.9.2
org.apache.arrow ok biçimi 0.8.0
org.apache.arrow ok-bellek 0.8.0
org.apache.arrow ok-vektör 0.8.0
org.apache.avro avro 1.7.7
org.apache.avro avro-ipc 1.7.7
org.apache.avro avro-ipc-tests 1.7.7
org.apache.avro avro-mapred-hadoop2 1.7.7
org.apache.calcite calcite-avatica 1.2.0-incubating
org.apache.calcite calcite-core 1.2.0-incubating
org.apache.calcite calcite-linq4j 1.2.0-incubating
org.apache.commons commons-compress 1.4.1
org.apache.commons commons-crypto 1.0.0
org.apache.commons commons-lang3 3.5
org.apache.commons commons-math3 3.4.1
org.apache.curator curator-client 2.7.1
org.apache.curator küratör çerçevesi 2.7.1
org.apache.curator curator-recipes 2.7.1
org.apache.derby Derby 10.12.1.1
org.apache.directory.api api-asn1-api 1.0.0-M20
org.apache.directory.api api-util 1.0.0-M20
org.apache.directory.server apacheds-i18n 2.0.0-M15
org.apache.directory.server apacheds-kerberos-codec 2.0.0-M15
org.apache.hadoop hadoop ek açıklamaları 2.7.3
org.apache.hadoop hadoop-auth 2.7.3
org.apache.hadoop hadoop-client 2.7.3
org.apache.hadoop hadoop-common 2.7.3
org.apache.hadoop hadoop-hdfs 2.7.3
org.apache.hadoop hadoop-mapreduce-client-app 2.7.3
org.apache.hadoop hadoop-mapreduce-client-common 2.7.3
org.apache.hadoop hadoop-mapreduce-client-core 2.7.3
org.apache.hadoop hadoop-mapreduce-client-jobclient 2.7.3
org.apache.hadoop hadoop-mapreduce-client-shuffle 2.7.3
org.apache.hadoop hadoop-yarn-api 2.7.3
org.apache.hadoop hadoop-yarn-client 2.7.3
org.apache.hadoop hadoop-yarn-common 2.7.3
org.apache.hadoop hadoop-yarn-server-common 2.7.3
org.apache.htrace htrace-core 3.1.0-incubating
org.apache.httpcomponents httpclient 4.5.4
org.apache.httpcomponents httpcore 4.4.8
org.apache.ivy sarmaşık 2.4.0
org.apache.orc orc-core-nohive 1.4.3
org.apache.orc orc-mapreduce-nohive 1.4.3
org.apache.parquet parquet-column 1.8.3-databricks2
org.apache.parquet parquet-common 1.8.3-databricks2
org.apache.parquet parquet kodlaması 1.8.3-databricks2
org.apache.parquet parquet biçimi 2.3.1
org.apache.parquet parquet-hadoop 1.8.3-databricks2
org.apache.parquet parquet-jackson 1.8.3-databricks2
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.9.3
org.apache.xbean xbean-asm5-shaded 4.4
org.apache.zookeeper zookeeper 3.4.6
org.bouncycastle bcprov-jdk15on 1.58
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-jaxrs 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.jackson jackson-xc 1.9.13
org.codehaus.janino commons-derleyici 3.0.8
org.codehaus.janino janino 3.0.8
org.datanucleus datanucleus-api-jdo 3.2.6
org.datanucleus datanucleus-core 3.2.10
org.datanucleus datanucleus-rdbms 3.2.9
org.eclipse.jetty jetty-client 9.3.20.v20170531
org.eclipse.jetty jetty-continuation 9.3.20.v20170531
org.eclipse.jetty jetty-http 9.3.20.v20170531
org.eclipse.jetty jetty-io 9.3.20.v20170531
org.eclipse.jetty jetty-jndi 9.3.20.v20170531
org.eclipse.jetty jetty-plus 9.3.20.v20170531
org.eclipse.jetty jetty-proxy 9.3.20.v20170531
org.eclipse.jetty jetty-security 9.3.20.v20170531
org.eclipse.jetty jetty-server 9.3.20.v20170531
org.eclipse.jetty jetty-servlet 9.3.20.v20170531
org.eclipse.jetty jetty-servlets 9.3.20.v20170531
org.eclipse.jetty jetty-util 9.3.20.v20170531
org.eclipse.jetty jetty-webapp 9.3.20.v20170531
org.eclipse.jetty jetty-xml 9.3.20.v20170531
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.4.0-b34
org.glassfish.hk2 hk2-bulucu 2.4.0-b34
org.glassfish.hk2 hk2-utils 2.4.0-b34
org.glassfish.hk2 osgi-resource-locator 1.0.1
org.glassfish.hk2.external aopalliance-repackaged 2.4.0-b34
org.glassfish.hk2.external javax.inject 2.4.0-b34
org.glassfish.jersey.bundles.repackaged jersey-guava 2.22.2
org.glassfish.jersey.containers jersey-container-servlet 2.22.2
org.glassfish.jersey.containers jersey-container-servlet-core 2.22.2
org.glassfish.jersey.core jersey-client 2.22.2
org.glassfish.jersey.core jersey-common 2.22.2
org.glassfish.jersey.core jersey-server 2.22.2
org.glassfish.jersey.media jersey-media-jaxb 2.22.2
org.hibernate hibernate-validator 5.1.1.Final
org.iq80.snappy Çabuk 0,2
org.javassist javassist 3.18.1-GA
org.jboss.logging jboss günlüğü 3.1.3.GA
org.jdbi jdbi 2.63.1
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.11 3.2.11
org.json4s json4s-core_2.11 3.2.11
org.json4s json4s-jackson_2.11 3.2.11
org.lz4 lz4-java 1.4.0
org.mariadb.jdbc mariadb-java-client 2.1.2
org.mockito mockito-all 1.9.5
org.objenesis objenesis 2.1
org.postgresql postgresql 42.1.4
org.roaringbitmap RoaringBitmap 0.5.11
org.rocksdb rocksdbjni 5.2.1
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.11 2.11.8
org.scala-lang scala-library_2.11 2.11.8
org.scala-lang scala-reflect_2.11 2.11.8
org.scala-lang scalap_2.11 2.11.8
org.scala-lang.modules scala-ayrıştırıcı-combinators_2.11 1.0.2
org.scala-lang.modules scala-xml_2.11 1.0.5
org.scala-sbt test arabirimi 1.0
org.scalacheck scalacheck_2.11 1.12.5
org.scalanlp breeze-macros_2.11 0.13.2
org.scalanlp breeze_2.11 0.13.2
org.scalatest scalatest_2.11 2.2.6
org.slf4j jcl-over-slf4j 1.7.16
org.slf4j jul-to-slf4j 1.7.16
org.slf4j slf4j-api 1.7.16
org.slf4j slf4j-log4j12 1.7.16
org.spark-project.hive hive-beeline 1.2.1.spark2
org.spark-project.hive hive-cli 1.2.1.spark2
org.spark-project.hive hive-exec 1.2.1.spark2
org.spark-project.hive hive-jdbc 1.2.1.spark2
org.spark-project.hive hive-meta veri deposu 1.2.1.spark2
org.spark-project.spark Kullanılma -yan 1.0.0
org.spire-math spire-macros_2.11 0.13.0
org.spire-math spire_2.11 0.13.0
org.springframework spring-core 4.1.4.RELEASE
org.springframework spring-test 4.1.4.RELEASE
org.tukaani Xz 1.0
org.typelevel machinist_2.11 0.6.1
org.typelevel makro-compat_2.11 1.1.1
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.2.6
org.yaml snakeyaml 1.16
Oro Oro 2.0.8
software.amazon.ion ion-java 1.0.2
Stax stax-api 1.0.1
xmlenc xmlenc 0,52