Databricks Runtime 5.0 (desteklenmiyor)

  • Makale

Databricks bu görüntüyü Kasım 2018'de yayımladı.

Aşağıdaki sürüm notları, Apache Spark tarafından desteklenen Databricks Runtime 5.0 hakkında bilgi sağlar.

Yeni Özellikler

  • Delta Lake

    • Alt sorgular artık ve UPDATE komutları için DELETE destek yan tümcesinde WHERE desteklenmektedir.
    • Komutlar için MERGE yeni ölçeklenebilir uygulama.
      • Ekleme ve güncelleştirme sayısında sınır yoktur.
      • SCD Tür 1 ve Tür 2 sorguları için kullanılabilir.
      • Akış sorgularından upsert'leri "güncelleştirme" modunda (örneğin, bir Delta tablosuna akış toplama çıktısı yazma) gerçekleştirmek olabilir. Bkz. MERGE ve foreachBatch not defterini kullanarak Databricks Delta'ya akış toplamaları yazma.

  • Yapılandırılmış Akış

    • Azure Blob depolama dosyası bildirimi tabanlı akış kaynağı. Bu, Azure Blob depolamadaki dosyalarda Yapılandırılmış Akış sorgusu çalıştırırken listeleme maliyetlerini önemli ölçüde azaltabilir. Bu akış kaynağı, işlenmek üzere yeni dosyaları bulmak için listeleme kullanmak yerine, yeni dosyaları bulmak için dosya olayı bildirimlerini doğrudan okuyabilir. Bkz. Azure Kuyruk Depolama (eski) ile Azure Blob depolama dosya kaynağı.

  • Derin öğrenme işlerini izlemek için TensorBoard desteği eklendi. Bkz. TensorBoard.

İyileştirmeler

  • Delta Gölü
    • OPTIMIZE performans ve kararlılık.
      • OPTIMIZE komutu, toplu işlemleri en kısa sürede değil, en kısa sürede işler.
      • Paralel olarak çalıştırılan varsayılan iş parçacığı OPTIMIZE sayısı azaltıldı. Bu, büyük tablolar için katı bir performans artışıdır.
      • Bölümlenmiş OPTIMIZE bir tabloya yazarken gereksiz yere sıralanan verilerden kaçınarak yazma işlemleri hızlandırıldı.
      • Artımlı hale getirerek hızlandırıldı OPTIMIZE ZORDER BY . Bu, komutun artık aynı sütunlarda Z sıralı olan veri dosyalarını yeniden yazmaktan kaçındığı anlamına gelir. Bkz. Delta Lake için veri atlama.
    • Delta tablolarını sorgularken anlık görüntü yalıtımı. Delta tablosuna birden çok başvuru içeren tüm sorgular (örneğin, kendi kendine birleştirme), tabloda eşzamanlı güncelleştirmeler olsa bile aynı tablo anlık görüntüsünden okur.
    • Sürücüde meta verileri önbelleğe alarak küçük (< 2000 dosya) Delta tablolarından okuma yaparken sorgu gecikme süresi geliştirildi.
  • Geliştirilmiş MLlib lojistik regresyon performansı.
  • Geliştirilmiş MLlib ağaç algoritması performansı.
  • Birkaç Java ve Scala kitaplığı yükseltildi. Bkz . Yüklü Java ve Scala kitaplıkları (Scala 2.11 küme sürümü).
  • Yüklü bazı Python kitaplıkları yükseltildi:
    • pip: 10.0.1 - 18.0
    • kurulum araçları: 39.2.0 - 40.4.1
    • tornado: 5.0.2 - 5.1.1
  • Yüklü birkaç R kitaplığı yükseltildi. Bkz. Yüklü R Kitaplıkları.

Hata Düzeltmeleri

  • Delta Gölü
    • SQL konfederasyonunda ayarlanan yapılandırmalar artık ilk olarak farklı bir not defterine yüklenen Delta Lake işlemlerine doğru şekilde uygulanıyor.
    • Komutta DELETE koşulun null olarak değerlendirildiği satırları hatalı bir şekilde silecek bir hata düzeltildi.
    • İlk toplu işlemi (akış başlatıldığında tabloda yer alan veriler) işlemesi iki günden fazla zaman alan Akışlar, bir denetim noktasından kurtarmaya çalışırken artık başarısız FileNotFoundException olmaz.
    • Yeni bir tablo yüklerken yol açan NoClassDefError bir yarış durumundan kaçınır.
    • VACUUM AssertionError şu ifadeyle işlemin nerede başarısız olabileceğine ilişkin düzeltme: "Burada silme için mutlak yol olmamalıdır."
    • Komutun Hive tarafından oluşturulan depolama özelliklerini içermemesi düzeltildi SHOW CREATE TABLE .
  • İç Spark sınıfları için birçok NoClassDefFoundError hata oluşturan yürütücüler artık sorunu çözmek için otomatik olarak yeniden başlatılıyor.

Bilinen Sorunlar

  • Delta Lake'teki mod seçeneğinde replaceWhereoverwrite belirtilen sütun adları, büyük/küçük harf duyarsızlığı etkin olsa bile büyük/küçük harfe duyarlıdır (varsayılan değerdir).
  • Databricks Runtime 5.0 için Snowflake bağlayıcısı Önizleme aşamasındadır.
  • Databricks Runtime 5.0 kümesine bağlı bir not defterinde çalışan bir akış hücresini iptal ederseniz, not defteri durumunu temizlemediğiniz veya kümeyi yeniden başlatmadığınız sürece not defterinde sonraki komutları çalıştıramazsınız. Geçici bir çözüm için bkz . Bilgi Bankası.

Apache Spark

Databricks Runtime 5.0, Apache Spark 2.4.0'ı içerir.

Core ve Spark SQL

Not

Bu makale, Azure Databricks'in kullanmadığı bir terim olan bağımlı terimine başvurular içerir. Terim yazılımdan kaldırıldığında bu makaleden de kaldırılacak.

Başlıca özellikler

  • Engel Yürütme Modu: [SPARK-24374] Derin öğrenme çerçeveleriyle daha iyi tümleştirmek için zamanlayıcıda Engel Yürütme Modu'nu destekler.
  • Scala 2.12 Desteği: [SPARK-14220] Deneysel Scala 2.12 desteği eklendi. Artık Scala 2.12 ile Spark oluşturabilir ve Scala 2.12'de Spark uygulamaları yazabilirsiniz.
  • Daha yüksek sıralı işlevler: [SPARK-23899] Karmaşık veri türleriyle çalışmayı kolaylaştırmak için yüksek sıralı işlevler de dahil olmak üzere birçok yeni yerleşik işlev ekleyin. Bkz. Apache Spark yerleşik işlevleri.
  • Yerleşik Avro veri kaynağı: [SPARK-24768] Mantıksal tür desteği, daha iyi performans ve kullanılabilirlik ile satır içi Spark-Avro paketi.

API

Performans ve kararlılık

  • [SPARK-16406] Çok sayıda sütun için başvuru çözünürlüğü daha hızlı olmalıdır
  • [SPARK-23486] lookupFunctions için dış katalogdan işlev adını önbelleğe alma
  • [SPARK-23803] Demet Ayıklama desteği
  • [SPARK-24802] İyileştirme Kuralı Dışlama
  • [SPARK-4502] Parquet tabloları için iç içe şema ayıklama
  • [SPARK-24296] 2 GB'tan büyük blokları çoğaltma desteği
  • [SPARK-24307] Bellekten 2 GB'ın üzerinde ileti gönderme desteği
  • [SPARK-23243] RDD'de Shuffle+Repartition yanlış yanıtlara yol açabilir
  • [SPARK-25181] BlockManager ana ve bağımlı iş parçacığı havuzlarının boyutu sınırlı olduğundan ağ yavaş olduğunda bellek yükünü azaltır

Bağlayıcılar

  • [SPARK-23972] Parquet'i 1.8.2'den 1.10.0'a güncelleştirme
  • [SPARK-25419] Parquet koşulu gönderme iyileştirmesi
  • [SPARK-23456] Yerel ORC okuyucu varsayılan olarak açıktır
  • [SPARK-22279] Hive serde tablolarını varsayılan olarak okumak için yerel ORC okuyucu kullanma
  • [SPARK-21783] ORC filtresi aşağı göndermeyi varsayılan olarak açma
  • [SPARK-24959] JSON ve CSV için count() sayısını hızlandırma
  • [SPARK-24244] CSV ayrıştırıcısına yalnızca gerekli sütunları ayrıştırma
  • [SPARK-23786] CSV şema doğrulaması - sütun adları denetlenmiyor
  • [SPARK-24423] JDBC'den okunacak sorguyu belirtmek için seçenek sorgusu
  • [SPARK-22814] JDBC bölüm sütununda Destek Tarihi/Zaman Damgası
  • [SPARK-24771] Avro'ya 1.7.7'den 1.8'e güncelleştirme

PySpark

  • [SPARK-24215] DataFrame API'leri için istekli değerlendirme uygulama
  • [SPARK-22274] - [SPARK-22239] Pandas udf ile kullanıcı tanımlı toplama işlevleri
  • [SPARK-24396] Python için Yapılandırılmış Streaming ForeachWriter ekleme
  • [SPARK-23874] Apache Ok'un 0.10.0 sürümüne yükseltin
  • [SPARK-25004] spark.executor.pyspark.memory sınırı ekleme
  • [SPARK-23030] Pandas DataFrame'lerden oluşturma ve toplama için Ok akışı biçimini kullanma
  • [SPARK-24624] Python UDF ve Scalar pandas UDF'nin destek karışımı

Diğer önemli değişiklikler

Programlama kılavuzları: Spark RDD Programlama Kılavuzu ve Spark SQL Veri Çerçeveleri ve Veri Kümeleri Kılavuzu.

Yapılandırılmış Akış

Başlıca özellikler

  • [SPARK-24565] foreachBatch (Python, Scala ve Java) kullanarak her mikrobatch'in çıkış satırlarını DataFrame olarak kullanıma sunuldu
  • [SPARK-24396] foreach ve ForeachWriter için Python API'si eklendi
  • [SPARK-25005] yalnızca işlem üreticisi kullanılarak yazılan Kafka konu başlıklarından kaydedilmiş kayıtları okumak için "kafka.isolation.level" desteği.

Diğer önemli değişiklikler

  • [SPARK-24662] Ekleme veya Tamamlama modunda akışlar için LIMIT işlecini destekleme
  • [SPARK-24763] Akış toplamadaki değerden yedekli anahtar verilerini kaldırma
  • [SPARK-24156] Giriş akışında veri olmadığında durum bilgisi olan işlemler (mapGroupsWithState, stream-stream join, akış toplama, akış dropDuplicates) ile çıkış sonuçlarının ve/veya durum temizlemesinin daha hızlı oluşturulması.
  • [SPARK-24730] Sorguda birden çok giriş akışı olduğunda en küçük veya en yüksek filigranı seçme desteği
  • [SPARK-25399] Mikrobatch akışı için yürütme iş parçacıklarını sürekli işlemeden yeniden kullanma işleminin bir doğruluk sorununa neden olabileceği bir hata düzeltildi
  • [SPARK-18057] Kafka istemci sürümü 0.10.0.1'den 2.0.0'a yükseltildi

Programlama kılavuzu: Yapılandırılmış Akış Programlama Kılavuzu.

MLlib

Başlıca özellikler

Diğer önemli değişiklikler

Programlama kılavuzu: Machine Learning Kitaplığı (MLlib) Kılavuzu.

SparkR

Programlama kılavuzu: SparkR (Spark üzerinde R).

GraphX

  • [SPARK-25268] Paralel Kişiselleştirilmiş PageRank çalıştırma serileştirme Özel Durumu oluşturur

Programlama kılavuzu: GraphX Programlama Kılavuzu.

Kullanımdan kaldırılan özellikler

  • [SPARK-23451] KMeans computeCost'u kullanımdan kaldırma
  • [SPARK-25345] ImageSchema'dan readImages API'lerini kullanımdan kaldırma

Davranış değişiklikleri

  • [SPARK-23549] Zaman damgasını tarihle karşılaştırırken zaman damgasına dönüştürme
  • [SPARK-24324] pandas Gruplandırılmış Eşleme UDF'sinde sonuç sütunları ada göre atanmalıdır
  • [SPARK-25088] Rest Server varsayılan & belge güncelleştirmeleri
  • [SPARK-23425] joker karakter kullanımıyla hdfs dosya yolu için verileri yükleme düzgün çalışmıyor
  • [SPARK-23173] from_json, null atanamaz olarak işaretlenmiş alanlar için null oluşturabilir
  • [SPARK-24966] Ayarlama işlemleri için öncelik kuralları uygulama
  • [SPARK-25708] GROUP BY olmadan HAVING genel toplama olmalıdır
  • [SPARK-24341] Çok değerli IN alt sorgularını doğru şekilde işleme
  • [SPARK-19724] Var olan varsayılan konuma sahip yönetilen tablo oluşturma bir özel durum oluşturmalıdır

Tüm davranış değişiklikleri için Bkz. Geçiş Kılavuzu.

Bilinen Sorunlar

  • [SPARK-25793] BisectingKMeans'ta model yükleme hatası
  • [SPARK-25271] Hive parke tablolarına sahip CTAS yerel parke kaynağı kullanmalıdır
  • [SPARK-24935] Spark 2.2'den Başlayarak Hive UDAF'lerini Yürütme Sorunu

Bakım Güncelleştirmeler

Bkz . Databricks Runtime 5.0 bakım güncelleştirmeleri.

Sistem Ortamı

  • İşletim Sistemi: Ubuntu 16.04.5 LTS
  • Java: 1.8.0_162
  • Scala: 2.11.8
  • Python: Python 2 kümeleri için 2.7.12 ve Python 3 kümeleri için 3.5.2.
  • R: R sürüm 3.4.4 (2018-03-15)
  • GPU kümeleri: Aşağıdaki NVIDIA GPU kitaplıkları yüklenir:
    • Tesla sürücüsü 375.66
    • CUDA 9.0
    • cuDNN 7.0

Not

Scala 2.12 Apache Spark 2.4'te desteklense de Databricks Runtime 5.0'da desteklenmez.

Yüklü Python Kitaplıkları

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
ansi2html 1.1.1 argparse 1.2.1 backports-abc 0,5
Boto 2.42.0 boto3 1.4.1 botocore 1.4.70
brewer2mpl 1.4.1 sertifikalı 2016.2.28 cffi 1.7.0
chardet 2.3.0 colorama 0.3.7 configobj 5.0.6
Şifreleme 1.5 Cycler 0.10.0 Cython 0.24.1
Dekoratör 4.0.10 docutils 0,14 enum34 1.1.6
et-xmlfile 1.0.1 freetype-py 1.0.2 funcsigs 1.0.2
fusepy 2.0.4 Vadeli 3.2.0 ggplot 0.6.8
html5lib 0,999 ıdna 2.1 ıpaddress 1.0.16
ipython 2.2.0 ipython-genutils 0.1.0 jdcal 1.2
Jinja2 2.8 jmespath 0.9.0 llvmlite 0.13.0
lxml 3.6.4 İşaretlemeyi Kasa 0.23 matplotlib 1.5.3
mpld3 0,2 msgpack-python 0.4.7 ndg-httpsclient 0.3.3
numba 0.28.1 numpy 1.11.1 openpyxl 2.3.2
pandas 0.19.2 pathlib2 2.1.0 Patsy 0.4.1
pexpect 4.0.1 pickleshare 0.7.4 Yastık 3.3.1
Pip 18,0 Kat 3.9 prompt-toolkit 1.0.7
psycopg2 2.6.2 ptyprocess 0.5.1 py4j 0.10.3
serçe 0.8.0 pyasn1 0.1.9 pycparser 2,14
Pygments 2.1.3 PyGObject 3.20.0 pyOpenSSL 16.0.0
pyparsing 2.2.0 pypng 0.0.18 Python 2.7.12
python-dateutil 2.5.3 python-geohash 0.8.5 pytz 2016.6.1
istekler 2.11.1 s3transfer 0.1.9 scikit-learn 0.18.1
scipy 0.18.1 Koşuşturmak 0.32 Sinan 0.7.1
kurulum araçları 40.4.1 simplejson 3.8.2 simples3 1.0
singledispatch 3.4.0.3 Altı 1.10.0 statsmodeller 0.6.1
Kasırga 5.1.1 traitlets 4.3.0 urllib3 1.19.1
virtualenv 15.0.1 wcwidth 0.1.7 Tekerlek 0.31.1
wsgiref 0.1.2

Yüklü R Kitaplıkları

Kitaplık Sürüm Kitaplık Sürüm Kitaplık Sürüm
abind 1.4-5 assertthat 0.2.0 Backports 1.1.2
temel 3.4.4 base64enc 0.1-3 BH 1.66.0-1
bağlayıcı 0.1.1 bindrcpp 0.2.2 bit 1.1-14
bit64 0.9-7 bitops 1.0-6 blob 1.1.1
başlatma 1.3-20 Brew 1.0-6 Süpürge 0.5.0
çağıran 3.0.0 car 3.0-2 carData 3.0-1
şapka işareti 6.0-80 cellranger 1.1.0 chron 2.3-52
class 7.3-14 cli 1.0.0 cluster 2.0.7-1
codetools 0.2-15 renk alanı 1.3-2 commonmark 1.5
derleyicisi 3.4.4 Crayon 1.3.4 Curl 3.2
CVST 0.2-2 data.table 1.11.4 veri kümeleri 3.4.4
DBİ 1.0.0 ddalpha 1.3.4 DEoptimR 1.0-8
Desc 1.2.0 geliştirici araçları 1.13.6 Özet 0.6.16
soluk 0.1.0 doMC 1.3.5 dplyr 0.7.6
DRR 0.0.3 fansi 0.3.0 forcats 0.3.0
foreach 1.4.4 Yabancı 0.8-70 gbm 2.1.3
Geometri 0.3-6 ggplot2 3.0.0 git2r 0.23.0
glmnet 2.0-16 Tutkal 1.3.0 Gower 0.1.2
grafikler 3.4.4 grDevices 3.4.4 Kılavuz 3.4.4
gsubfn 0.7 gtable 0.2.0 h2o 3.20.0.2
Haven 1.1.2 Hms 0.4.2 httr 1.3.1
hwriter 1.3.2 hwriterPlus 1.0-3 ipred 0.9-7
Yineleyicilerde 1.0.10 jsonlite 1.5 kernlab 0.9-27
KernSmooth 2.23-15 Etiketleme 0.3 Kafes 0.20-35
Lav 1.6.3 lazyeval 0.2.1 Littler 0.3.4
lme4 1.1-18-1 lubridate 1.7.4 Sihirli 1.5-8
magrittr 1.5 mapproj 1.2.6 Haritalar 3.3.0
maptools 0.9-3 MASS 7.3-50 Matris 1.2-14
MatrixModels 0.4-1 not defteri 1.1.0 yöntemler 3.4.4
mgcv 1.8-24 Mıme 0,5 minqa 1.2.4
ModelMetrics 1.2.0 munsell 0.5.0 mvtnorm 1.0-8
nlme 3.1-137 nloptr 1.0.4 nnet 7.3-12
numDeriv 2016.8-1 openssl 1.0.2 openxlsx 4.1.0
parallel 3.4.4 pbkrtest 0.4-7 Ayağı 1.3.0
pkgbuild 1.0.0 pkgconfig 2.0.2 pkgKitten 0.1.4
pkgload 1.0.0 plogr 0.2.0 Pls 2.7-0
plyr 1.8.4 Övgü 1.0.0 prettyunits 1.0.2
Yordam 1.12.1 processx 3.2.0 prodlim 2018.04.18
Proto 1.0.0 Ps 1.1.0 purrr 0.2.5
quantreg 5,36 R.methodsS3 1.7.1 R.oo 1.22.0
R.utils 2.7.0 R6 2.2.2 randomForest 4.6-14
RColorBrewer 1.1-2 Rcpp 0.12.18 RcppEigen 0.3.3.4.0
RcppRoll 0.3.0 RCurl 1.95-4.11 readr 1.1.1
readxl 1.1.0 yemek tarifleri 0.1.3 Rövanş 1.0.1
yeniden şekillendirme2 1.4.3 Rio 0.5.10 rlang 0.2.2
robustbase 0.93-2 RODBC 1.3-15 roxygen2 6.1.0
rpart 4.1-13 rprojroot 1.3-2 Rserve 1.7-3
RSQLite 2.1.1 rstudioapi 0.7 Terazi 1.0.0
sfsmisc 1.1-2 Sp 1.3-1 SparkR 2.4.0
Seyrek Bakış 1.77 Kayma 7.3-11 Splines 3.4.4
sqldf 0.4-11 KAREM 2017.10-1 statmod 1.4.30
Istatistik 3.4.4 istatistikler4 3.4.4 stringi 1.2.4
dizeleyici 1.3.1 Hayatta kalma 2.42-6 tcltk 3.4.4
TeachingDemos 2.10 test edin 2.0.0 Türk 1.4.2
derleyici 0.8.1 tidyselect 0.2.4 timeDate 3043.102
araçlar 3.4.4 utf8 1.1.4 Yardımcılar 3.4.4
viridisLite 0.3.0 Bıyık 0.3-2 withr 2.1.2
xml2 1.2.0 Zip 1.0.0

Yüklü Java ve Scala kitaplıkları (Scala 2.11 küme sürümü)

Grup Kimliği Yapıt Kimliği Sürüm
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.8.10
com.amazonaws aws-java-sdk-autoscaling 1.11.313
com.amazonaws aws-java-sdk-cloudformation 1.11.313
com.amazonaws aws-java-sdk-cloudfront 1.11.313
com.amazonaws aws-java-sdk-cloudhsm 1.11.313
com.amazonaws aws-java-sdk-cloudsearch 1.11.313
com.amazonaws aws-java-sdk-cloudtrail 1.11.313
com.amazonaws aws-java-sdk-cloudwatch 1.11.313
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.11.313
com.amazonaws aws-java-sdk-codedeploy 1.11.313
com.amazonaws aws-java-sdk-cognitoidentity 1.11.313
com.amazonaws aws-java-sdk-cognitosync 1.11.313
com.amazonaws aws-java-sdk-config 1.11.313
com.amazonaws aws-java-sdk-core 1.11.313
com.amazonaws aws-java-sdk-datapipeline 1.11.313
com.amazonaws aws-java-sdk-directconnect 1.11.313
com.amazonaws aws-java-sdk-directory 1.11.313
com.amazonaws aws-java-sdk-dynamodb 1.11.313
com.amazonaws aws-java-sdk-ec2 1.11.313
com.amazonaws aws-java-sdk-ecs 1.11.313
com.amazonaws aws-java-sdk-efs 1.11.313
com.amazonaws aws-java-sdk-elasticache 1.11.313
com.amazonaws aws-java-sdk-elasticbeanstalk 1.11.313
com.amazonaws aws-java-sdk-elasticloadbalancing 1.11.313
com.amazonaws aws-java-sdk-elastictranscoder 1.11.313
com.amazonaws aws-java-sdk-emr 1.11.313
com.amazonaws aws-java-sdk-glacier 1.11.313
com.amazonaws aws-java-sdk-iam 1.11.313
com.amazonaws aws-java-sdk-importexport 1.11.313
com.amazonaws aws-java-sdk-kinesis 1.11.313
com.amazonaws aws-java-sdk-kms 1.11.313
com.amazonaws aws-java-sdk-lambda 1.11.313
com.amazonaws aws-java-sdk-logs 1.11.313
com.amazonaws aws-java-sdk-machinelearning 1.11.313
com.amazonaws aws-java-sdk-opsworks 1.11.313
com.amazonaws aws-java-sdk-rds 1.11.313
com.amazonaws aws-java-sdk-redshift 1.11.313
com.amazonaws aws-java-sdk-route53 1.11.313
com.amazonaws aws-java-sdk-s3 1.11.313
com.amazonaws aws-java-sdk-ses 1.11.313
com.amazonaws aws-java-sdk-simpledb 1.11.313
com.amazonaws aws-java-sdk-simpleworkflow 1.11.313
com.amazonaws aws-java-sdk-sns 1.11.313
com.amazonaws aws-java-sdk-sqs 1.11.313
com.amazonaws aws-java-sdk-ssm 1.11.313
com.amazonaws aws-java-sdk-storagegateway 1.11.313
com.amazonaws aws-java-sdk-sts 1.11.313
com.amazonaws aws-java-sdk-support 1.11.313
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.11.313
com.amazonaws jmespath-java 1.11.313
com.carrotsearch hppc 0.7.2
com.chuusai shapeless_2.11 2.3.2
com.clearspring.analytics akış 2.7.0
com.databricks Rserve 1.8-3
com.databricks dbml-local_2.11 0.5.0-db7-spark2.4
com.databricks dbml-local_2.11-tests 0.5.0-db7-spark2.4
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.11 0.4.15-9
com.databricks.scalapb scalapb-runtime_2.11 0.4.15-9
com.esotericsoftware kryo gölgeli 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml Classmate 1.0.0
com.fasterxml.jackson.core jackson-annotations 2.6.7
com.fasterxml.jackson.core jackson-core 2.6.7
com.fasterxml.jackson.core jackson-databind 2.6.7.1
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.6.7
com.fasterxml.jackson.datatype jackson-datatype-joda 2.6.7
com.fasterxml.jackson.module jackson-module-paranamer 2.6.7
com.fasterxml.jackson.module jackson-module-scala_2.11 2.6.7.1
com.github.fommil jniloader 1.1
com.github.fommil.netlib çekirdek 1.1.2
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java-natives 1.1
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java-natives 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1.1
com.github.luben zstd-jni 1.3.2-2
com.github.rwl jtransforms 2.4.0
com.google.code.findbugs jsr305 2.0.1
com.google.code.gson gson 2.2.4
com.google.guava Guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.googlecode.javaewah JavaEWAH 0.3.2
com.h2database h2 1.3.174
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.RELEASE
com.mchange c3p0 0.9.5.1
com.mchange mchange-commons-java 0.2.10
com.microsoft.azure azure-data-lake-store-sdk 2.2.8
com.microsoft.sqlserver mssql-jdbc 6.2.2.jre8
com.ning compress-lzf 1.0.3
com.sun.mail javax.mail 1.5.2
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.11 0.3
com.twitter chill-java 0.9.3
com.twitter chill_2.11 0.9.3
com.twitter parquet-hadoop-bundle 1.6.0
com.twitter util-app_2.11 6.23.0
com.twitter util-core_2.11 6.23.0
com.twitter util-jvm_2.11 6.23.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging-api_2.11 2.1.2
com.typesafe.scala-logging scala-logging-slf4j_2.11 2.1.2
com.univocity univocity-ayrıştırıcıları 2.7.3
com.vlkan flatbuffers 1.2.0-3f79e055
com.zaxxer HikariCP 3.1.0
commons-beanutils commons-beanutils 1.7.0
commons-beanutils commons-beanutils-core 1.8.0
commons-cli commons-cli 1.2
commons-codec commons-codec 1.10
commons-collections commons-collections 3.2.2
commons-configuration commons-configuration 1.6
commons-dbcp commons-dbcp 1.4
commons-digester commons-digester 1.8
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.4
commons-lang commons-lang 2,6
commons-logging commons-logging 1.1.3
commons-net commons-net 3.1
commons-pool commons-pool 1.5.4
info.ganglia.gmetric4j gmetric4j 1.0.7
io.airlift aircompressor 0.10
io.dropwizard.metrics metrics-core 3.1.5
io.dropwizard.metrics metrics-ganglia 3.1.5
io.dropwizard.metrics metrics-graphite 3.1.5
io.dropwizard.metrics metrics-healthchecks 3.1.5
io.dropwizard.metrics metrics-jetty9 3.1.5
io.dropwizard.metrics metrics-json 3.1.5
io.dropwizard.metrics metrics-jvm 3.1.5
io.dropwizard.metrics metrics-log4j 3.1.5
io.dropwizard.metrics metrics-servlets 3.1.5
io.netty netty 3.9.9.Final
io.netty netty-all 4.1.17.Final
io.prometheus simpleclient 0.0.16
io.prometheus simpleclient_common 0.0.16
io.prometheus simpleclient_dropwizard 0.0.16
io.prometheus simpleclient_servlet 0.0.16
io.prometheus.jmx Toplayıcı 0.7
javax.activation etkinleştirme 1.1.1
javax.annotation javax.annotation-api 1.2
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.servlet javax.servlet-api 3.1.0
javax.servlet.jsp jsp-api 2.1
javax.transaction jta 1.1
javax.validation validation-api 1.1.0.Final
javax.ws.rs javax.ws.rs-api 2.0.1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
javolution javolution 5.5.1
jline jline 2.11
joda-time joda-time 2.9.3
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
net.hydromatic eigenbase-properties 1.1.5
net.razorvine pirolit 4.13
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv süper csv 2.2.0
net.snowflake snowflake-jdbc 3.6.3
net.snowflake spark-snowflake_2.11 2.4.1
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt oncrpc 1.0.7
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.4
org.antlr antlr4-runtime 4.7
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant ant-launcher 1.9.2
org.apache.arrow ok biçimi 0.10.0
org.apache.arrow ok-bellek 0.10.0
org.apache.arrow ok-vektör 0.10.0
org.apache.avro avro 1.8.2
org.apache.avro avro-ipc 1.8.2
org.apache.avro avro-mapred-hadoop2 1.8.2
org.apache.calcite calcite-avatica 1.2.0-incubating
org.apache.calcite calcite-core 1.2.0-incubating
org.apache.calcite calcite-linq4j 1.2.0-incubating
org.apache.commons commons-compress 1.8.1
org.apache.commons commons-crypto 1.0.0
org.apache.commons commons-lang3 3.5
org.apache.commons commons-math3 3.4.1
org.apache.curator curator-client 2.7.1
org.apache.curator küratör çerçevesi 2.7.1
org.apache.curator curator-recipes 2.7.1
org.apache.derby Derby 10.12.1.1
org.apache.directory.api api-asn1-api 1.0.0-M20
org.apache.directory.api api-util 1.0.0-M20
org.apache.directory.server apacheds-i18n 2.0.0-M15
org.apache.directory.server apacheds-kerberos-codec 2.0.0-M15
org.apache.hadoop hadoop ek açıklamaları 2.7.3
org.apache.hadoop hadoop-auth 2.7.3
org.apache.hadoop hadoop-client 2.7.3
org.apache.hadoop hadoop-common 2.7.3
org.apache.hadoop hadoop-hdfs 2.7.3
org.apache.hadoop hadoop-mapreduce-client-app 2.7.3
org.apache.hadoop hadoop-mapreduce-client-common 2.7.3
org.apache.hadoop hadoop-mapreduce-client-core 2.7.3
org.apache.hadoop hadoop-mapreduce-client-jobclient 2.7.3
org.apache.hadoop hadoop-mapreduce-client-shuffle 2.7.3
org.apache.hadoop hadoop-yarn-api 2.7.3
org.apache.hadoop hadoop-yarn-client 2.7.3
org.apache.hadoop hadoop-yarn-common 2.7.3
org.apache.hadoop hadoop-yarn-server-common 2.7.3
org.apache.htrace htrace-core 3.1.0-incubating
org.apache.httpcomponents httpclient 4.5.4
org.apache.httpcomponents httpcore 4.4.8
org.apache.ivy sarmaşık 2.4.0
org.apache.orc orc-core-nohive 1.5.2
org.apache.orc orc-mapreduce-nohive 1.5.2
org.apache.orc orc-shims 1.5.2
org.apache.parquet parquet-column 1.10.1-databricks2
org.apache.parquet parquet-common 1.10.1-databricks2
org.apache.parquet parquet kodlaması 1.10.1-databricks2
org.apache.parquet parquet biçimi 2.4.0
org.apache.parquet parquet-hadoop 1.10.1-databricks2
org.apache.parquet parquet-jackson 1.10.1-databricks2
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.9.3
org.apache.xbean xbean-asm6 gölgeli 4.8
org.apache.zookeeper zookeeper 3.4.6
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-jaxrs 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.jackson jackson-xc 1.9.13
org.codehaus.janino commons-derleyici 3.0.9
org.codehaus.janino janino 3.0.9
org.datanucleus datanucleus-api-jdo 3.2.6
org.datanucleus datanucleus-core 3.2.10
org.datanucleus datanucleus-rdbms 3.2.9
org.eclipse.jetty jetty-client 9.3.20.v20170531
org.eclipse.jetty jetty-continuation 9.3.20.v20170531
org.eclipse.jetty jetty-http 9.3.20.v20170531
org.eclipse.jetty jetty-io 9.3.20.v20170531
org.eclipse.jetty jetty-jndi 9.3.20.v20170531
org.eclipse.jetty jetty-plus 9.3.20.v20170531
org.eclipse.jetty jetty-proxy 9.3.20.v20170531
org.eclipse.jetty jetty-security 9.3.20.v20170531
org.eclipse.jetty jetty-server 9.3.20.v20170531
org.eclipse.jetty jetty-servlet 9.3.20.v20170531
org.eclipse.jetty jetty-servlets 9.3.20.v20170531
org.eclipse.jetty jetty-util 9.3.20.v20170531
org.eclipse.jetty jetty-webapp 9.3.20.v20170531
org.eclipse.jetty jetty-xml 9.3.20.v20170531
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.4.0-b34
org.glassfish.hk2 hk2-bulucu 2.4.0-b34
org.glassfish.hk2 hk2-utils 2.4.0-b34
org.glassfish.hk2 osgi-resource-locator 1.0.1
org.glassfish.hk2.external aopalliance-repackaged 2.4.0-b34
org.glassfish.hk2.external javax.inject 2.4.0-b34
org.glassfish.jersey.bundles.repackaged jersey-guava 2.22.2
org.glassfish.jersey.containers jersey-container-servlet 2.22.2
org.glassfish.jersey.containers jersey-container-servlet-core 2.22.2
org.glassfish.jersey.core jersey-client 2.22.2
org.glassfish.jersey.core jersey-common 2.22.2
org.glassfish.jersey.core jersey-server 2.22.2
org.glassfish.jersey.media jersey-media-jaxb 2.22.2
org.hibernate hibernate-validator 5.1.1.Final
org.iq80.snappy Çabuk 0,2
org.javassist javassist 3.18.1-GA
org.jboss.logging jboss günlüğü 3.1.3.GA
org.jdbi jdbi 2.63.1
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.11 3.5.3
org.json4s json4s-core_2.11 3.5.3
org.json4s json4s-jackson_2.11 3.5.3
org.json4s json4s-scalap_2.11 3.5.3
org.lz4 lz4-java 1.4.0
org.mariadb.jdbc mariadb-java-client 2.1.2
org.mockito mockito-all 1.9.5
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.1.4
org.roaringbitmap RoaringBitmap 0.5.11
org.rocksdb rocksdbjni 5.2.1
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.11 2.11.8
org.scala-lang scala-library_2.11 2.11.8
org.scala-lang scala-reflect_2.11 2.11.8
org.scala-lang.modules scala-ayrıştırıcı-combinators_2.11 1.0.2
org.scala-lang.modules scala-xml_2.11 1.0.5
org.scala-sbt test arabirimi 1.0
org.scalacheck scalacheck_2.11 1.12.5
org.scalactic scalactic_2.11 3.0.3
org.scalanlp breeze-macros_2.11 0.13.2
org.scalanlp breeze_2.11 0.13.2
org.scalatest scalatest_2.11 3.0.3
org.slf4j jcl-over-slf4j 1.7.16
org.slf4j jul-to-slf4j 1.7.16
org.slf4j slf4j-api 1.7.16
org.slf4j slf4j-log4j12 1.7.16
org.spark-project.hive hive-beeline 1.2.1.spark2
org.spark-project.hive hive-cli 1.2.1.spark2
org.spark-project.hive hive-exec 1.2.1.spark2
org.spark-project.hive hive-jdbc 1.2.1.spark2
org.spark-project.hive hive-meta veri deposu 1.2.1.spark2
org.spark-project.spark Kullanılma -yan 1.0.0
org.spire-math spire-macros_2.11 0.13.0
org.spire-math spire_2.11 0.13.0
org.springframework spring-core 4.1.4.RELEASE
org.springframework spring-test 4.1.4.RELEASE
org.tukaani Xz 1.5
org.typelevel machinist_2.11 0.6.1
org.typelevel makro-compat_2.11 1.1.1
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.7.1
org.yaml snakeyaml 1.16
Oro Oro 2.0.8
software.amazon.ion ion-java 1.0.2
Stax stax-api 1.0.1
xmlenc xmlenc 0,52