Databricks Runtime 6.0 (desteklenmiyor)
Databricks bu görüntüyü Ekim 2019'da yayımladı.
Aşağıdaki sürüm notları, Apache Spark tarafından desteklenen Databricks Runtime 6.0 hakkında bilgi sağlar.
Yeni özellikler
Python ortamı
Databricks Runtime 6.0 Python'da büyük değişiklikler ve Python ortamlarının yapılandırılma şeklini içerir. Python'ı 3.7.3'e yükseltme, yüklü Python paketlerinin listesini iyileştirme ve bu yüklü paketleri daha yeni sürümlere yükseltme. Ayrıntılar için bkz . Yüklü Python kitaplıkları.
Ayrıca, daha önce duyurulmuş olduğu gibi Databricks Runtime 6.0, Python 2'yi desteklemez.
Önemli değişiklikler şunlardır:
- Python 3.5.2'den 3.7.3'e yükseltildi. Python paketlerinin bazı eski sürümleri, Python 3.7 ile uyumlu olmayan eski Cython sürümlerine bağlı olduğundan Python 3.7 ile ileriye doğru uyumlu olmayabilir. Böyle bir paketin yüklenmesi, benzeri
‘PyThreadState’ {‘struct _ts’} has no member named ‘exc_type’hataları tetikleyebilir (ayrıntılar için bkz . GitHub sorunu 1978 ). Bunun yerine Python paketlerinin Python 3.7 uyumlu sürümlerini yükleyin. - Ana paket yükseltmeleri:
- boto3 - 1.9.162
- ipython - 7.4.0
- matplotlib to 3.0.3
- numpy to 1.16.2
- pandas to 0.24.2
- pyarrow to 0.13.0
- Databricks Runtime 5.5 LTS (desteklenmeyen) ile karşılaştırıldığında, aşağıdaki Python paketleri yeni eklendi: asn1crypto, backcall, jedi, kiwisolver, parso ve PySocks.
- Databricks Runtime 5.5 LTS (desteklenmiyor) ile karşılaştırıldığında, şu Python paketleri yüklenmez: ansi2html, brewer2mpl, colorama, configobj, enum34, et-xmlfile, freetype-py, funcsigs, fusepy, ggplot, html5lib, ipaddress, jdcal, Jinja2, llvmlite, lxml, Markup Kasa, mpld3, msgpack-python, ndg-httpsclient, numba, openpyxl, pathlib2, Pillow, ply, pyasn1, pypng, python-geohash, scour, simplejson ve singledispatch.
displayPython ggplot nesnelerindeki işlev artık desteklenmiyor çünkü ggplot paketi pandas'ın daha yeni sürümüyle uyumlu değil.PYSPARK_PYTHON/databricks/python2/bin/pythonDatabricks Runtime 6.0 Python 2'yi desteklemediğinden ayarı desteklenmiyor. Bu ayara sahip bir küme yine de başlatılabilir. Ancak Python not defterleri ve Python komutları çalışmaz, yani Python komut hücreleri "İptal Edildi" hatasıyla başarısız olur ve sürücü günlüklerinde birPython shell failed to starthata görüntülenir.- Virtualenv tarafından yönetilen bir ortamda bulunan bir Python yürütülebilir dosyasını işaret ederse
PYSPARK_PYTHON, bu ortam başlatma betikleri ve not defterleri için etkinleştirilir. Etkinleştirilmiş ortamda tanımlanan vepipkomutlarını, bu komutların mutlak konumlarını belirtmek zorunda kalmadan doğrudan kullanabilirsinizpython. Varsayılan olarak olarakPYSPARK_PYTHONolarak ayarlanır/databricks/python3/bin/python. Bu nedenle, varsayılan olarak,pythonbaşlatma betikleri/databricks/python3/bin/pythonvepipnot defterleri için işaret eder ve işaret/databricks/python3/bin/pipeder.PYSPARK_PYTHONVirtualenv tarafından yönetilen bir ortamda olmayan bir Python yürütülebilir dosyasını işaret ediyorsanız veya tarafındanPYSPARK_PYTHONbelirtilen Python'ı oluşturmak için bir init betiği yazıyorsanız, doğrupythonvepipöğesine erişmek için mutlak yolları kullanmanız gerekir. Python kitaplığı yalıtımı etkinleştirildiğinde (varsayılan olarak etkindir), etkinleştirilmiş ortam hala ilişkili ortamdırPYSPARK_PYTHON. Bir Python not defteriyle ilişkili yalıtılmış ortamı değiştirmek için Kitaplık yardımcı programını (dbutils.library) (eski) kullanmanızı öneririz.
Delta Lake DML komutları için Scala ve Java API'leri
Artık silme, güncelleştirme ve birleştirme için programlı API'leri kullanarak Delta tablolarındaki verileri değiştirebilirsiniz. Bu API'ler, karşılık gelen SQL komutlarının söz dizimini ve semantiğini yansıtır ve boyut (SCD) işlemlerinin yavaş değişmesi, çoğaltma için değişiklik verilerinin birleştirilmesi ve akış sorgularındaki upsert'ler gibi birçok iş yükü için mükemmeldir.
Ayrıntılar için bkz . Delta Lake nedir?.
Delta Lake yardımcı programı komutları için Scala ve Java API'leri
Databricks Runtime'da artık ve history yardımcı programı komutları için vacuum programlı API'ler vardır. Bu API'ler, Databricks Runtime'ın önceki sürümlerinde kullanılabilen ilgili SQL komutlarının söz dizimini ve semantiğini yansıtır.
Delta tablosu tarafından artık başvurulmamış ve bekletme eşiğinden daha eski olan dosyaları tabloda çalıştırarak vacuum temizleyebilirsiniz. Komutu tabloda vacuum çalıştırmak, Delta tablosuyla ilişkili dizinleri yinelemeli olarak vakumlar. Dosyaların varsayılan saklama eşiği 7 gündür. bekletme süresinden daha eski bir sürüme zaman yolculuğu yapma özelliği çalıştırıldıktan vacuumsonra kaybolur. vacuum otomatik olarak tetiklenmiyor.
Komutunu çalıştırarak history Delta tablosuna yapılan her yazma işlemi, kullanıcı, zaman damgası vb. hakkında bilgi alabilirsiniz. İşlemler ters kronolojik sırayla döndürülür. Varsayılan olarak, tablo geçmişi 30 gün boyunca saklanır.
Ayrıntılar için bkz . Delta Lake nedir?.
Azure Lsv2 örnekleri için kullanılabilir disk önbelleği
[Disk önbelleğe alma]] (.. /.. /optimizations/disk-cache.md) artık tüm Lsv2 örnekleri için varsayılan olarak etkindir.
Yerel dosya API'lerini kullanarak iyileştirilmiş depolama
Yerel dosya API'leri, temel alınan dağıtılmış nesne depolama alanından dosyalara yerel dosyalar olarak erişmenizi sağlar. Databricks Runtime 6.0'da, yerel dosya API'lerinin önemli sınırlamaları ele aldırmasına olanak tanıyan FUSE bağlamasını geliştirdik. Databricks Runtime 6.0 okuma ve yazma hızını önemli ölçüde artırır ve 2 GB'tan büyük dosyaları destekler. Dağıtılmış model eğitimi gibi daha hızlı ve daha güvenilir okuma ve yazma işlemlerine ihtiyacınız varsa, bu geliştirmeyi özellikle yararlı bulabilirsiniz. Buna ek olarak, hem maliyet tasarrufu sağlayarak hem de üretkenliği artırarak iş yükleriniz için verileri yerel bir depolama alanına yüklemeniz gerekmez.
Ayrıntılar için bkz . Databricks Dosya Sistemi (DBFS) nedir?.
Not defteri hücresi başına birden çok matplotlib çizimi
Artık not defteri hücresi başına birden çok matplotlib çizimi görüntüleyebilirsiniz:
Birden çok Azure Data Lake Storage 1. Nesil hesabı için hizmet kimlik bilgileri
Artık tek bir Apache Spark oturumunda kullanılmak üzere Azure Databricks hesabından birden çok Azure Data Lake Storage 1. Nesil erişim için hizmet kimlik bilgilerini ayarlayabilirsiniz. Bunu yapmak için yapılandırma anahtarlarını ekleyin account.<account-name> . Örneğin, hesapların hem hem de adl://example1.azuredatalakestore.netadl://example2.azuredatalakestore.neterişimi için kimlik bilgilerini ayarlamak istiyorsanız, bunu aşağıdaki gibi yapabilirsiniz:
spark.conf.set("fs.adl.oauth2.access.token.provider.type", "ClientCredential")
spark.conf.set("fs.adl.account.example1.oauth2.client.id", "<application-id-example1>")
spark.conf.set("fs.adl.account.example1.oauth2.credential", dbutils.secrets.get(scope = "<scope-name>", key = "<key-name-for-service-credential-example1>"))
spark.conf.set("fs.adl.account.example1.oauth2.refresh.url", "https://login.microsoftonline.com/<directory-id-example1>/oauth2/token")
spark.conf.set("fs.adl.account.example2.oauth2.client.id", "<application-id-example2>")
spark.conf.set("fs.adl.account.example2.oauth2.credential", dbutils.secrets.get(scope = "<scope-name>", key = "<key-name-for-service-credential-example2>"))
spark.conf.set("fs.adl.account.example2.oauth2.refresh.url", "https://login.microsoftonline.com/<directory-id-example2>/oauth2/token")
Gelişmeler
- AWS SDK 1.11.596 sürümüne yükseltildi.
- WASB sürücüsündeki Azure Depolama SDK'sı 7.0'a yükseltildi.
OPTIMIZEartık eklenen dosya sayısı, kaldırılan dosya sayısı ve en büyük ve en küçük dosya boyutu gibi ölçümlerin bir özetini sağlar. Bkz. Delta Lake'te iyileştirme ile veri dosyalarını sıkıştırma
Kaldırma
Databricks ML Modeli Dışarı Aktarma kaldırıldı. Bunun yerine modelleri içeri ve dışarı aktarmak için MLeap kullanın.
Apache Spark
Not
Bu makale, Azure Databricks'in kullanmadığı bir terim olan bağımlı terimine başvurular içerir. Terim yazılımdan kaldırıldığında bu makaleden de kaldırılacak.
Databricks Runtime 6.0, Apache Spark 2.4.3'i içerir. Bu sürüm, Databricks Runtime 5.5 LTS'ye (desteklenmeyen) dahil olan tüm Spark düzeltmeleri ve iyileştirmelerinin yanı sıra Spark'ta yapılan aşağıdaki ek hata düzeltmelerini ve iyileştirmeleri içerir:
- [SPARK-27992][SPARK-28881][PYTHON] Python'ın hataları yaymak için bağlantı iş parçacığına katılmasına izin verme
- [SPARK-27330][SS]foreach yazıcısında görev durdurma desteği (6.0, 5.x)
- [SPARK-28642][SQL] SHOW CREATE TABLE'da kimlik bilgilerini gizleme
- [SPARK-28699][CORE] Belirsiz aşamayı durdurmak için köşedeki bir servis talebini düzeltme
- [SPARK-28647][WEBUI] Ek ölçüm özelliğini kurtarma
- [SPARK-28766][R] [DOC] Geçersiz URL'de CRAN gelen fizibilite uyarılarını düzeltme
- [SPARK-28486][CORE] [PYTHON] GC tarafından silinmesini önlemek için PythonBroadcast'ın veri dosyasını BroadcastBlock ile eşleme
- [SPARK-25035][CORE] Diskte depolanan bloklar çoğaltmasında bellek eşlemesini önleme
- [SPARK-27234][SS] [PYTHON] EpochTracker'daki geçerli dönem için InheritableThreadLocal kullanma (Python UDF'lerini desteklemek için)
- [SPARK-28638][WEBUI] Görev özeti yalnızca başarılı görevlerin ölçümlerini içermelidir
- [SPARK-28153][PYTHON] InputFileBlockHolder'da AtomicReference kullanma (Python UDF ile input_file_name desteklemek için)
- [SPARK-28564][CORE] Erişim geçmişi uygulaması varsayılan olarak son deneme kimliğini kullanır
- [SPARK-28260] Thriftserver sorgusu sonuçları almaya devam ederken küme otomatik olarak sonlandırılabilir
- [SPARK-26152][CORE] Çalışan Kapatma ile Çalışan Temizlemeyi Eşitle
- [SPARK-28545][SQL] ObjectAggregationIterator'ın yön günlüğüne karma eşleme boyutu ekleme
- [SPARK-28489][SS] KafkaOffsetRangeCalculator.getRanges'in uzaklıkları bırakabileceği hata düzeltildi
- [SPARK-28421][ML] SparseVector.apply performance optimization
- [SPARK-28156][SQL] Kendi kendine birleştirme önbelleğe alınmış görünümü kaçırmamalıdır
- [SPARK-28152][SQL] MsSqlServerDialect için ShortType ile SMALLINT ve FloatType ile REAL arasında eşlendi
- [SPARK-28054][SQL] Bölüm adı büyük harf olan Hive bölümlenmiş tablosunu dinamik olarak eklerken hata düzeltildi
- [SPARK-27159][SQL] ikili türünü destekleyecek şekilde mssql sunucu diyalekt güncelleştirme
- [SPARK-28355][CORE] [PYTHON] Spark conf'ı com'un bulunduğu eşik için kullan...
- [SPARK-27989][CORE] K8s için sürücü bağlantısında yeniden denemeler eklendi
- [SPARK-27416][SQL] UnsafeMapData &unsafeArrayData Kryo serileştirme ...
- [SPARK-28430][UI] Bazı görevlerin ölçümleri eksik olduğunda tablo işleme aşamasını düzeltme
- [SPARK-27485] EnsureRequirements.reorder yinelenen ifadeleri düzgün bir şekilde işlemelidir
- [SPARK-28404][SS] RateStreamContinuousPartitionReader'da negatif zaman aşımı değerini düzeltme
- [SPARK-28378][PYTHON] cgi.escape kullanımını kaldırma
- [SPARK-28371][SQL] Parquet "StartsWith" filtresini null güvenli hale getirme
- [SPARK-28015][SQL] stringToDate() öğesinin y ve yy-[m]m biçimleri için tüm girişi tükettiğinden emin olun
- [SPARK-28302][CORE] Windows'da SparkLauncher için benzersiz çıkış dosyası oluşturduğunuzdan emin olun
- [SPARK-28308][CORE] Ayrıştırmadan önce CalendarInterval alt saniye bölümü doldurulmalıdır
- [SPARK-28170][ML] [PYTHON] Tekdüzen Vektörler ve Matris belgeleri
- [SPARK-28160][CORE] Geri çağırma işlevinin işaretlenmemiş özel durum yanıtsız olduğunda yanıtsız kalma sorununu düzeltme
- [SPARK-27839][SQL] UTF8String.replace() değerini UTF8 bayt üzerinde çalışacak şekilde değiştirme
- [SPARK-28157][CORE] SHS'yi kara listeye alınan girdiler için KVStore LogInfo'nun işaretini kaldırın
- [SPARK-28128][PYTHON] [SQL] pandas Gruplandırılmış UDF'ler boş bölümleri atlar
- [SPARK-28012][SQL] Hive UDF yapı türü katlanabilir ifadeyi destekler
- [SPARK-28164] start-slave.sh kullanım açıklamasını düzeltme
- [SPARK-27100][SQL] StackOverflowError'ı önlemek için FilePartition'daSeq yerine Dizi kullanma
- [SPARK-28154][ML] GMM düzeltme çift önbelleğe alma
Bakım güncelleştirmeleri
Bkz . Databricks Runtime 6.0 bakım güncelleştirmeleri.
Sistem ortamı
- İşletim Sistemi: Ubuntu 16.04.6 LTS
- Java: 1.8.0_232
- Scala: 2.11.12
- Python: 3.7.3
- R: R sürüm 3.6.1 (2019-07-05)
- Delta Gölü: 0.3.0
Not
Scala 2.12, Apache Spark 2.4'te deneysel bir özellik olarak kullanılabilse de Databricks Runtime 6.0'da desteklenmez.
Yüklü Python kitaplıkları
| Kitaplık | Sürüm | Kitaplık | Sürüm | Kitaplık | Sürüm |
|---|---|---|---|---|---|
| asn1crypto | 0.24.0 | geri arama | 0.1.0 | Boto | 2.49.0 |
| boto3 | 1.9.162 | botocore | 1.12.163 | sertifikalı | 2019.3.9 |
| cffi | 1.12.2 | chardet | 3.0.4 | Şifreleme | 2.6.1 |
| Cycler | 0.10.0 | Cython | 0.29.6 | Dekoratör | 4.4.0 |
| docutils | 0,14 | ıdna | 2.8 | ipython | 7.4.0 |
| ipython-genutils | 0.2.0 | Jedi | 0.13.3 | jmespath | 0.9.4 |
| kiwisolver | 1.1.0 | matplotlib | 3.0.3 | numpy | 1.16.2 |
| pandas | 0.24.2 | parso | 0.3.4 | Patsy | 0.5.1 |
| pexpect | 4.6.0 | pickleshare | 0.7.5 | Pip | 19.0.3 |
| prompt-toolkit | 2.0.9 | psycopg2 | 2.7.6.1 | ptyprocess | 0.6.0 |
| serçe | 0.13.0 | pycparser | 2.19 | pycurl | 7.43.0 |
| Pygments | 2.3.1 | PyGObject | 3.20.0 | pyOpenSSL | 19.0.0 |
| pyparsing | 2.4.2 | PySocks | 1.6.8 | python-apt | 1.1.0.b1+ubuntu0.16.04.5 |
| python-dateutil | 2.8.0 | pytz | 2018.9 | istekler | 2.21.0 |
| s3transfer | 0.2.1 | scikit-learn | 0.20.3 | scipy | 1.2.1 |
| Sinan | 0.9.0 | kurulum araçları | 40.8.0 | Altı | 1.12.0 |
| ssh-import-id | 5.5 | statsmodeller | 0.9.0 | traitlets | 4.3.2 |
| katılımsız yükseltmeler | 0,1 | urllib3 | 1.24.1 | virtualenv | 16.4.1 |
| wcwidth | 0.1.7 | Tekerlek | 0.33.1 |
Yüklü R kitaplıkları
| Kitaplık | Sürüm | Kitaplık | Sürüm | Kitaplık | Sürüm |
|---|---|---|---|---|---|
| abind | 1.4-5 | askpass | 1.1 | assertthat | 0.2.1 |
| Backports | 1.1.3 | temel | 3.6.1 | base64enc | 0.1-3 |
| BH | 1.69.0-1 | bit | 1.1-14 | bit64 | 0.9-7 |
| bitops | 1.0-6 | blob | 1.1.1 | başlatma | 1.3-23 |
| Brew | 1.0-6 | çağıran | 3.2.0 | car | 3.0-2 |
| carData | 3.0-2 | şapka işareti | 6.0-82 | cellranger | 1.1.0 |
| chron | 2.3-53 | class | 7.3-15 | cli | 1.1.0 |
| küçük resim | 0.5.0 | clisymbols | 1.2.0 | cluster | 2.1.0 |
| codetools | 0.2-16 | renk alanı | 1.4-1 | commonmark | 1.7 |
| derleyicisi | 3.6.1 | config | 0.3 | Crayon | 1.3.4 |
| Curl | 3.3 | data.table | 1.12.0 | veri kümeleri | 3.6.1 |
| DBİ | 1.0.0 | dbplyr | 1.3.0 | Desc | 1.2.0 |
| geliştirici araçları | 2.0.1 | Özet | 0.6.18 | doMC | 1.3.5 |
| dplyr | 0.8.0.1 | üç nokta | 0.1.0 | fansi | 0.4.0 |
| forcats | 0.4.0 | foreach | 1.4.4 | Yabancı | 0.8-72 |
| Forge | 0.2.0 | Fs | 1.2.7 | gbm | 2.1.5 |
| Generics | 0.0.2 | ggplot2 | 3.1.0 | gh | 1.0.1 |
| git2r | 0.25.2 | glmnet | 2.0-16 | Tutkal | 1.3.1 |
| Gower | 0.2.0 | grafikler | 3.6.1 | grDevices | 3.6.1 |
| Kılavuz | 3.6.1 | gridExtra | 2.3 | gsubfn | 0.7 |
| gtable | 0.3.0 | h2o | 3.22.1.1 | Haven | 2.1.0 |
| Hms | 0.4.2 | htmltools | 0.3.6 | htmlwidgets | 1.3 |
| httr | 1.4.0 | hwriter | 1.3.2 | hwriterPlus | 1.0-3 |
| ını | 0.3.1 | ipred | 0.9-8 | Yineleyicilerde | 1.0.10 |
| jsonlite | 1.6 | KernSmooth | 2.23-15 | Etiketleme | 0.3 |
| Kafes | 0.20-38 | Lav | 1.6.5 | lazyeval | 0.2.2 |
| Littler | 0.3.7 | lme4 | 1.1-21 | lubridate | 1.7.4 |
| magrittr | 1.5 | mapproj | 1.2.6 | Haritalar | 3.3.0 |
| maptools | 0.9-5 | MASS | 7.3-51.4 | Matris | 1.2-17 |
| MatrixModels | 0.4-1 | not defteri | 1.1.0 | yöntemler | 3.6.1 |
| mgcv | 1.8-28 | Mıme | 0,6 | minqa | 1.2.4 |
| ModelMetrics | 1.2.2 | munsell | 0.5.0 | mvtnorm | 1.0-10 |
| nlme | 3.1-141 | nloptr | 1.2.1 | nnet | 7.3-12 |
| numDeriv | 2016.8-1 | openssl | 1.3 | openxlsx | 4.1.0 |
| parallel | 3.6.1 | pbkrtest | 0.4-7 | Ayağı | 1.3.1 |
| pkgbuild | 1.0.3 | pkgconfig | 2.0.2 | pkgKitten | 0.1.4 |
| pkgload | 1.0.2 | plogr | 0.2.0 | plyr | 1.8.4 |
| Övgü | 1.0.0 | prettyunits | 1.0.2 | Yordam | 1.14.0 |
| processx | 3.3.0 | prodlim | 2018.04.18 | ilerleme | 1.2.0 |
| Proto | 1.0.0 | Ps | 1.3.0 | purrr | 0.3.2 |
| quantreg | 5.38 | R.methodsS3 | 1.7.1 | R.oo | 1.22.0 |
| R.utils | 2.8.0 | r2d3 | 0.2.3 | R6 | 2.4.0 |
| randomForest | 4.6-14 | rappdirs | 0.3.1 | rcmdcheck | 1.3.2 |
| RColorBrewer | 1.1-2 | Rcpp | 1.0.1 | RcppEigen | 0.3.3.5.0 |
| RcppRoll | 0.3.0 | RCurl | 1.95-4.12 | readr | 1.3.1 |
| readxl | 1.3.1 | yemek tarifleri | 0.1.5 | Rövanş | 1.0.1 |
| Kumanda | 2.0.2 | yeniden şekillendirme2 | 1.4.3 | Rio | 0.5.16 |
| rlang | 0.3.3 | RODBC | 1.3-15 | roxygen2 | 6.1.1 |
| rpart | 4.1-15 | rprojroot | 1.3-2 | Rserve | 1.8-6 |
| RSQLite | 2.1.1 | rstudioapi | 0.10 | Terazi | 1.0.0 |
| sessioninfo | 1.1.1 | Sp | 1.3-1 | sparklyr | 1.0.0 |
| SparkR | 2.4.4 | Seyrek Bakış | 1.77 | Kayma | 7.3-11 |
| Splines | 3.6.1 | sqldf | 0.4-11 | KAREM | 2017.10-1 |
| statmod | 1.4.30 | Istatistik | 3.6.1 | istatistikler4 | 3.6.1 |
| stringi | 1.4.3 | dizeleyici | 1.4.0 | Hayatta kalma | 2.44-1.1 |
| sys | 3.1 | tcltk | 3.6.1 | TeachingDemos | 2.10 |
| test edin | 2.0.1 | Türk | 2.1.1 | derleyici | 0.8.3 |
| tidyselect | 0.2.5 | timeDate | 3043.102 | araçlar | 3.6.1 |
| usethis | 1.4.0 | utf8 | 1.1.4 | Yardımcılar | 3.6.1 |
| viridisLite | 0.3.0 | Bıyık | 0.3-2 | withr | 2.1.2 |
| xml2 | 1.2.0 | xopen | 1.0.0 | yaml | 2.2.0 |
| Zip | 2.0.1 |
Yüklü Java ve Scala kitaplıkları (Scala 2.11 küme sürümü)
| Grup Kimliği | Yapıt Kimliği | Sürüm |
|---|---|---|
| antlr | antlr | 2.7.7 |
| com.amazonaws | amazon-kinesis-client | 1.8.10 |
| com.amazonaws | aws-java-sdk-autoscaling | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudfront | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudhsm | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudsearch | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.11.595 |
| com.amazonaws | aws-java-sdk-codedeploy | 1.11.595 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.11.595 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.11.595 |
| com.amazonaws | aws-java-sdk-config | 1.11.595 |
| com.amazonaws | aws-java-sdk-core | 1.11.595 |
| com.amazonaws | aws-java-sdk-datapipeline | 1.11.595 |
| com.amazonaws | aws-java-sdk-directconnect | 1.11.595 |
| com.amazonaws | aws-java-sdk-directory | 1.11.595 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.11.595 |
| com.amazonaws | aws-java-sdk-ec2 | 1.11.595 |
| com.amazonaws | aws-java-sdk-ecs | 1.11.595 |
| com.amazonaws | aws-java-sdk-efs | 1.11.595 |
| com.amazonaws | aws-java-sdk-elasticache | 1.11.595 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.11.595 |
| com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.11.595 |
| com.amazonaws | aws-java-sdk-elastictranscoder | 1.11.595 |
| com.amazonaws | aws-java-sdk-emr | 1.11.595 |
| com.amazonaws | aws-java-sdk-glacier | 1.11.595 |
| com.amazonaws | aws-java-sdk-glue | 1.11.595 |
| com.amazonaws | aws-java-sdk-iam | 1.11.595 |
| com.amazonaws | aws-java-sdk-importexport | 1.11.595 |
| com.amazonaws | aws-java-sdk-kinesis | 1.11.595 |
| com.amazonaws | aws-java-sdk-kms | 1.11.595 |
| com.amazonaws | aws-java-sdk-lambda | 1.11.595 |
| com.amazonaws | aws-java-sdk-logs | 1.11.595 |
| com.amazonaws | aws-java-sdk-machinelearning | 1.11.595 |
| com.amazonaws | aws-java-sdk-opsworks | 1.11.595 |
| com.amazonaws | aws-java-sdk-rds | 1.11.595 |
| com.amazonaws | aws-java-sdk-redshift | 1.11.595 |
| com.amazonaws | aws-java-sdk-route53 | 1.11.595 |
| com.amazonaws | aws-java-sdk-s3 | 1.11.595 |
| com.amazonaws | aws-java-sdk-ses | 1.11.595 |
| com.amazonaws | aws-java-sdk-simpledb | 1.11.595 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.11.595 |
| com.amazonaws | aws-java-sdk-sns | 1.11.595 |
| com.amazonaws | aws-java-sdk-sqs | 1.11.595 |
| com.amazonaws | aws-java-sdk-ssm | 1.11.595 |
| com.amazonaws | aws-java-sdk-storagegateway | 1.11.595 |
| com.amazonaws | aws-java-sdk-sts | 1.11.595 |
| com.amazonaws | aws-java-sdk-support | 1.11.595 |
| com.amazonaws | aws-java-sdk-swf-libraries | 1.11.22 |
| com.amazonaws | aws-java-sdk-workspaces | 1.11.595 |
| com.amazonaws | jmespath-java | 1.11.595 |
| com.carrotsearch | hppc | 0.7.2 |
| com.chuusai | shapeless_2.11 | 2.3.2 |
| com.clearspring.analytics | akış | 2.7.0 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | dbml-local_2.11 | 0.5.0-db8-spark2.4 |
| com.databricks | dbml-local_2.11-tests | 0.5.0-db8-spark2.4 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | compilerplugin_2.11 | 0.4.15-9 |
| com.databricks.scalapb | scalapb-runtime_2.11 | 0.4.15-9 |
| com.esotericsoftware | kryo gölgeli | 4.0.2 |
| com.esotericsoftware | minlog | 1.3.0 |
| com.fasterxml | Classmate | 1.0.0 |
| com.fasterxml.jackson.core | jackson-annotations | 2.6.7 |
| com.fasterxml.jackson.core | jackson-core | 2.6.7 |
| com.fasterxml.jackson.core | jackson-databind | 2.6.7.1 |
| com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.6.7 |
| com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-scala_2.11 | 2.6.7.1 |
| com.github.fommil | jniloader | 1.1 |
| com.github.fommil.netlib | çekirdek | 1.1.2 |
| com.github.fommil.netlib | native_ref-java | 1.1 |
| com.github.fommil.netlib | native_ref-java-natives | 1.1 |
| com.github.fommil.netlib | native_system-java | 1.1 |
| com.github.fommil.netlib | native_system-java-natives | 1.1 |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1.1 |
| com.github.fommil.netlib | netlib-native_system-linux-x86_64-natives | 1.1 |
| com.github.luben | zstd-jni | 1.3.2-2 |
| com.github.rwl | jtransforms | 2.4.0 |
| com.google.code.findbugs | jsr305 | 2.0.1 |
| com.google.code.gson | gson | 2.2.4 |
| com.google.guava | Guava | 15.0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.googlecode.javaewah | JavaEWAH | 0.3.2 |
| com.h2database | h2 | 1.3.174 |
| com.jcraft | jsch | 0.1.50 |
| com.jolbox | bonecp | 0.8.0.RELEASE |
| com.microsoft.azure | azure-data-lake-store-sdk | 2.2.8 |
| com.microsoft.azure | azure-storage | 7.0.0 |
| com.microsoft.sqlserver | mssql-jdbc | 6.2.2.jre8 |
| com.ning | compress-lzf | 1.0.3 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.thoughtworks.paranamer | paranamer | 2.8 |
| com.trueaccord.lenses | lenses_2.11 | 0.3 |
| com.twitter | chill-java | 0.9.3 |
| com.twitter | chill_2.11 | 0.9.3 |
| com.twitter | parquet-hadoop-bundle | 1.6.0 |
| com.twitter | util-app_2.11 | 6.23.0 |
| com.twitter | util-core_2.11 | 6.23.0 |
| com.twitter | util-jvm_2.11 | 6.23.0 |
| com.typesafe | config | 1.2.1 |
| com.typesafe.scala-logging | scala-logging-api_2.11 | 2.1.2 |
| com.typesafe.scala-logging | scala-logging-slf4j_2.11 | 2.1.2 |
| com.univocity | univocity-ayrıştırıcıları | 2.7.3 |
| com.vlkan | flatbuffers | 1.2.0-3f79e055 |
| com.zaxxer | HikariCP | 3.1.0 |
| commons-beanutils | commons-beanutils | 1.9.3 |
| commons-cli | commons-cli | 1.2 |
| commons-codec | commons-codec | 1.10 |
| commons-collections | commons-collections | 3.2.2 |
| commons-configuration | commons-configuration | 1.6 |
| commons-dbcp | commons-dbcp | 1.4 |
| commons-digester | commons-digester | 1.8 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2.4 |
| commons-lang | commons-lang | 2,6 |
| commons-logging | commons-logging | 1.1.3 |
| commons-net | commons-net | 3.1 |
| commons-pool | commons-pool | 1.5.4 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.7 |
| io.airlift | aircompressor | 0.10 |
| io.dropwizard.metrics | metrics-core | 3.1.5 |
| io.dropwizard.metrics | metrics-ganglia | 3.1.5 |
| io.dropwizard.metrics | metrics-graphite | 3.1.5 |
| io.dropwizard.metrics | metrics-healthchecks | 3.1.5 |
| io.dropwizard.metrics | metrics-jetty9 | 3.1.5 |
| io.dropwizard.metrics | metrics-json | 3.1.5 |
| io.dropwizard.metrics | metrics-jvm | 3.1.5 |
| io.dropwizard.metrics | metrics-log4j | 3.1.5 |
| io.dropwizard.metrics | metrics-servlets | 3.1.5 |
| io.netty | netty | 3.9.9.Final |
| io.netty | netty-all | 4.1.17.Final |
| javax.activation | etkinleştirme | 1.1.1 |
| javax.annotation | javax.annotation-api | 1.2 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.servlet | javax.servlet-api | 3.1.0 |
| javax.servlet.jsp | jsp-api | 2.1 |
| javax.transaction | jta | 1.1 |
| javax.validation | validation-api | 1.1.0.Final |
| javax.ws.rs | javax.ws.rs-api | 2.0.1 |
| javax.xml.bind | jaxb-api | 2.2.2 |
| javax.xml.stream | stax-api | 1.0-2 |
| javolution | javolution | 5.5.1 |
| jline | jline | 2.14.6 |
| joda-time | joda-time | 2.9.3 |
| Junit | Junit | 4.12 |
| log4j | apache-log4j-extras | 1.2.17 |
| log4j | log4j | 1.2.17 |
| net.hydromatic | eigenbase-properties | 1.1.5 |
| net.razorvine | pirolit | 4.13 |
| net.sf.jpam | jpam | 1.1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | süper csv | 2.2.0 |
| net.snowflake | snowflake-ingest-sdk | 0.9.5 |
| net.snowflake | snowflake-jdbc | 3.6.15 |
| net.snowflake | spark-snowflake_2.11 | 2.4.10-spark_2.4 |
| net.sourceforge.f2j | arpack_combined_all | 0,1 |
| org.acplt | oncrpc | 1.0.7 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | antlr-runtime | 3.4 |
| org.antlr | antlr4-runtime | 4.7 |
| org.antlr | stringtemplate | 3.2.1 |
| org.apache.ant | ant | 1.9.2 |
| org.apache.ant | ant-jsch | 1.9.2 |
| org.apache.ant | ant-launcher | 1.9.2 |
| org.apache.arrow | ok biçimi | 0.10.0 |
| org.apache.arrow | ok-bellek | 0.10.0 |
| org.apache.arrow | ok-vektör | 0.10.0 |
| org.apache.avro | avro | 1.8.2 |
| org.apache.avro | avro-ipc | 1.8.2 |
| org.apache.avro | avro-mapred-hadoop2 | 1.8.2 |
| org.apache.calcite | calcite-avatica | 1.2.0-incubating |
| org.apache.calcite | calcite-core | 1.2.0-incubating |
| org.apache.calcite | calcite-linq4j | 1.2.0-incubating |
| org.apache.commons | commons-compress | 1.8.1 |
| org.apache.commons | commons-crypto | 1.0.0 |
| org.apache.commons | commons-lang3 | 3.5 |
| org.apache.commons | commons-math3 | 3.4.1 |
| org.apache.curator | curator-client | 2.7.1 |
| org.apache.curator | küratör çerçevesi | 2.7.1 |
| org.apache.curator | curator-recipes | 2.7.1 |
| org.apache.derby | Derby | 10.12.1.1 |
| org.apache.directory.api | api-asn1-api | 1.0.0-M20 |
| org.apache.directory.api | api-util | 1.0.0-M20 |
| org.apache.directory.server | apacheds-i18n | 2.0.0-M15 |
| org.apache.directory.server | apacheds-kerberos-codec | 2.0.0-M15 |
| org.apache.hadoop | hadoop ek açıklamaları | 2.7.3 |
| org.apache.hadoop | hadoop-auth | 2.7.3 |
| org.apache.hadoop | hadoop-client | 2.7.3 |
| org.apache.hadoop | hadoop-common | 2.7.3 |
| org.apache.hadoop | hadoop-hdfs | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-app | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-common | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-core | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-jobclient | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-shuffle | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-api | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-client | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-common | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-server-common | 2.7.3 |
| org.apache.htrace | htrace-core | 3.1.0-incubating |
| org.apache.httpcomponents | httpclient | 4.5.6 |
| org.apache.httpcomponents | httpcore | 4.4.10 |
| org.apache.ivy | sarmaşık | 2.4.0 |
| org.apache.orc | orc-core-nohive | 1.5.5 |
| org.apache.orc | orc-mapreduce-nohive | 1.5.5 |
| org.apache.orc | orc-shims | 1.5.5 |
| org.apache.parquet | parquet-column | 1.10.1.2-databricks3 |
| org.apache.parquet | parquet-common | 1.10.1.2-databricks3 |
| org.apache.parquet | parquet kodlaması | 1.10.1.2-databricks3 |
| org.apache.parquet | parquet biçimi | 2.4.0 |
| org.apache.parquet | parquet-hadoop | 1.10.1.2-databricks3 |
| org.apache.parquet | parquet-jackson | 1.10.1.2-databricks3 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.9.3 |
| org.apache.xbean | xbean-asm6 gölgeli | 4.8 |
| org.apache.zookeeper | zookeeper | 3.4.6 |
| org.codehaus.jackson | jackson-core-asl | 1.9.13 |
| org.codehaus.jackson | jackson-jaxrs | 1.9.13 |
| org.codehaus.jackson | jackson-mapper-asl | 1.9.13 |
| org.codehaus.jackson | jackson-xc | 1.9.13 |
| org.codehaus.janino | commons-derleyici | 3.0.10 |
| org.codehaus.janino | janino | 3.0.10 |
| org.datanucleus | datanucleus-api-jdo | 3.2.6 |
| org.datanucleus | datanucleus-core | 3.2.10 |
| org.datanucleus | datanucleus-rdbms | 3.2.9 |
| org.eclipse.jetty | jetty-client | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-continuation | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-http | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-io | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-jndi | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-plus | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-proxy | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-security | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-server | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-servlet | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-servlets | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-util | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-webapp | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-xml | 9.3.27.v20190418 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-bulucu | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-utils | 2.4.0-b34 |
| org.glassfish.hk2 | osgi-resource-locator | 1.0.1 |
| org.glassfish.hk2.external | aopalliance-repackaged | 2.4.0-b34 |
| org.glassfish.hk2.external | javax.inject | 2.4.0-b34 |
| org.glassfish.jersey.bundles.repackaged | jersey-guava | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet-core | 2.22.2 |
| org.glassfish.jersey.core | jersey-client | 2.22.2 |
| org.glassfish.jersey.core | jersey-common | 2.22.2 |
| org.glassfish.jersey.core | jersey-server | 2.22.2 |
| org.glassfish.jersey.media | jersey-media-jaxb | 2.22.2 |
| org.hamcrest | hamcrest-core | 1.3 |
| org.hamcrest | hamcrest-library | 1.3 |
| org.hibernate | hibernate-validator | 5.1.1.Final |
| org.iq80.snappy | Çabuk | 0,2 |
| org.javassist | javassist | 3.18.1-GA |
| org.jboss.logging | jboss günlüğü | 3.1.3.GA |
| org.jdbi | jdbi | 2.63.1 |
| org.joda | joda-convert | 1.7 |
| org.jodd | jodd-core | 3.5.2 |
| org.json4s | json4s-ast_2.11 | 3.5.3 |
| org.json4s | json4s-core_2.11 | 3.5.3 |
| org.json4s | json4s-jackson_2.11 | 3.5.3 |
| org.json4s | json4s-scalap_2.11 | 3.5.3 |
| org.lz4 | lz4-java | 1.4.0 |
| org.mariadb.jdbc | mariadb-java-client | 2.1.2 |
| org.mockito | mockito-core | 1.10.19 |
| org.objenesis | objenesis | 2.5.1 |
| org.postgresql | postgresql | 42.1.4 |
| org.roaringbitmap | RoaringBitmap | 0.7.45 |
| org.roaringbitmap | dolgular | 0.7.45 |
| org.rocksdb | rocksdbjni | 6.2.2 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | scala-compiler_2.11 | 2.11.12 |
| org.scala-lang | scala-library_2.11 | 2.11.12 |
| org.scala-lang | scala-reflect_2.11 | 2.11.12 |
| org.scala-lang.modules | scala-ayrıştırıcı-combinators_2.11 | 1.1.0 |
| org.scala-lang.modules | scala-xml_2.11 | 1.0.5 |
| org.scala-sbt | test arabirimi | 1.0 |
| org.scalacheck | scalacheck_2.11 | 1.12.5 |
| org.scalactic | scalactic_2.11 | 3.0.3 |
| org.scalanlp | breeze-macros_2.11 | 0.13.2 |
| org.scalanlp | breeze_2.11 | 0.13.2 |
| org.scalatest | scalatest_2.11 | 3.0.3 |
| org.slf4j | jcl-over-slf4j | 1.7.16 |
| org.slf4j | jul-to-slf4j | 1.7.16 |
| org.slf4j | slf4j-api | 1.7.16 |
| org.slf4j | slf4j-log4j12 | 1.7.16 |
| org.spark-project.hive | hive-beeline | 1.2.1.spark2 |
| org.spark-project.hive | hive-cli | 1.2.1.spark2 |
| org.spark-project.hive | hive-jdbc | 1.2.1.spark2 |
| org.spark-project.hive | hive-meta veri deposu | 1.2.1.spark2 |
| org.spark-project.spark | Kullanılma -yan | 1.0.0 |
| org.spire-math | spire-macros_2.11 | 0.13.0 |
| org.spire-math | spire_2.11 | 0.13.0 |
| org.springframework | spring-core | 4.1.4.RELEASE |
| org.springframework | spring-test | 4.1.4.RELEASE |
| org.tukaani | Xz | 1.5 |
| org.typelevel | machinist_2.11 | 0.6.1 |
| org.typelevel | makro-compat_2.11 | 1.1.1 |
| org.xerial | sqlite-jdbc | 3.8.11.2 |
| org.xerial.snappy | snappy-java | 1.1.7.3 |
| org.yaml | snakeyaml | 1.16 |
| Oro | Oro | 2.0.8 |
| software.amazon.ion | ion-java | 1.0.2 |
| Stax | stax-api | 1.0.1 |
| xmlenc | xmlenc | 0,52 |