Databricks Runtime 5,3 (не поддерживается)

Кирпичные выпустили этот образ в апреле 2019.

В следующих заметках о выпуске содержатся сведения о Databricks Runtime 5,3, на базе Apache Spark.

Новые возможности

Databricks Delta

Время командировки

Разностное перемещение по времени превысило общую доступность. Он добавляет возможность выполнения запросов к моментальному снимку таблицы с помощью строки отметок времени или версии, с использованием синтаксиса SQL, а также DataFrameReader параметров для выражений отметок времени.

SELECT count(*) FROM events TIMESTAMP AS OF timestamp_expression
SELECT count(*) FROM events VERSION AS OF version

Время командировки имеет много вариантов использования, включая:

  • Повторное создание анализа, отчетов или выходов (например, выходных данных модели машинного обучения), которое полезно для отладки или аудита, особенно в регулируемых отраслях.
  • Написание сложных темпоральных запросов.
  • Устранение ошибок в данных.
  • Изоляция моментальных снимков для набора запросов для быстро меняющихся таблиц.

Время командировки Дельта

См. статью запрос старого моментального снимка таблицы (путешествие по времени), Выбори Слияние в (Дельта Lake on Azure Databricks).

Репликация таблиц MySQL до разностной общедоступной предварительной версии

Потоковая передача данных из таблицы MySQL непосредственно в разность для подчиненного использования в рабочих процессах аналитики Spark или обработки и анализа данных. Используя ту же стратегию, которую MySQL использует для репликации в другие экземпляры, компонент binlog используется для обнаружения обновлений, которые затем обрабатываются и передаются в потоки обработки, следующим образом:

  • Считывает события изменения из журнала базы данных.
  • Потоковая передача событий в кирпичы.
  • Записывает данные в том же порядке в разностную таблицу.
  • Сохраняет состояние в случае отключения от источника.

Функции закрытой предварительной версии

Этот выпуск содержит следующие функции закрытой предварительной версии для Delta Lake:

  • Добавлена экспериментальная команда, позволяющая Presto напрямую запрашивать разностные таблицы.
  • Функция автоматического оптимизации оптимизирует макет файла во время отдельных операций записи в разностную таблицу и предотвращает накопление небольших файлов в разностных таблицах для поддержания высокоскоростной производительности запросов. Кроме того, операции записи и операции Upsert в секционированных разностных таблицах могут помешать увеличению скорости Благодаря адаптивному случайному воссозданию, введенному для записи.

Если вы хотите участвовать в предварительной версии, обратитесь к своему партнеру по учетным записям в модулях.

Оптимизированная папка DBFS ПРЕДОХРАНИТЕЛей для рабочих нагрузок глубокого обучения

Azure Databricks теперь предлагает оптимизированное подключение ПРЕДОХРАНИТЕЛя. Вы можете использовать высокопроизводительный доступ к данным во время обучения и вывода без применения скриптов инициализации. Данные, хранящиеся в dbfs:/ml локальной среде и доступные локально в file:/dbfs/ml , теперь поддерживаются этим оптимизированным ПОДКЛЮЧЕНИЕм предохранителей. См. раздел Загрузка данных.

Улучшения

  • Библиотеки с областью действия записной книжки:

    • Поддержка дополнений в dbutils.library.installPyPI .
    • Поддержка установки библиотеки с областью действия записной книжки для библиотек в файловой системе Azure, включая wasbs , adls и abfss .
    • Улучшены сообщения об ошибках библиотек с областью записной книжки в неподдерживаемых целевых объектах. Например: "программы библиотеки недоступны в Databricks Runtime для Машинное обучение".
  • Подключитесь к Azure Data Lake Storage 2-го поколения (ADLS 2-го поколения), не выполняя роль "участник данных большого двоичного объекта хранилища" на уровне учетной записи для субъекта-службы.

  • Помощник по работе с модулями данных имеет дополнительные указания для повышения производительности запросов.

    • При наличии большого числа маленьких файлов на секцию > преобразовать таблицу в разностную и выполнение OPTIMIZE .
    • При наличии очень избирательного фильтра > преобразовать в разностный и используемый ZORDER BY .
    • Когда получение метаданных из Hive становится узким местом, > преобразуйте таблицу в разностную.
  • Обновление Ubuntu с 16.04.5 LTS до 16.04.6 LTS.

  • Обновление Scala 2,11 с 2.11.8 на 2.11.12.

  • Обновлены некоторые установленные библиотеки Python:

    • PIP: 18,1 19.0.3.
    • setuptools: 40.6.3 в 40.8.0
    • wheel: 0.32.3 в 0.33.1
  • Обновлен R с 3.4.4 до 3.5.2.

  • Обновлены несколько установленных библиотек R. См. раздел установленные библиотеки R.

Устаревшее

  • Соединитель Apache Kafka 0,8 для структурированной потоковой передачи больше не поддерживается. Он включен в Databricks Runtime 5,3, но будет удален из будущих Databricks Runtime выпуска.
  • Экспорт модели ML является устаревшим и будет удален в Databricks Runtime 6,0. Вместо этого используйте млеап для импорта и экспорта моделей.
  • Удалено spark.databricks.pyspark.enableExecutorFsPerms в качестве параметра конфигурации.

Исправления ошибок

  • Исправлена установка библиотеки Python Egg на уровне кластера для кластеров, для которых включены списки ACL таблиц.
  • Улучшена Отмена команды Python путем исправления ситуации, когда отмена вызывается до выполнения команды.
  • Исправлена ошибка в таблицах управления доступом. Теперь при перечислении объектов в базе данных или каталоге отображаются только те объекты, на просмотр которых у вас есть разрешение.

Apache Spark

Databricks Runtime 5,3 включает Apache Spark 2.4.0. Этот выпуск включает в себя все исправления и улучшения Spark, включенные в Databricks Runtime 5,2 (не поддерживается), а также следующие дополнительные исправления ошибок и усовершенствования в Spark:

  • [Spark-27134][SQL] array_distinct функция не работает правильно со столбцами, содержащими массив массива
  • [Spark-24669][SQL] делает недействительными таблицы в случае удаления КАСКАДНЫХ баз данных
  • [Spark-26572][SQL] исправьте статистическую вычисление результатов CodeGen
  • [Spark-27046][DSTREAMS] удалите связанные ссылки из SPARK-19185 из документации
  • [Spark-26449][Python] Добавление метода преобразования в API кадров данных
  • [Spark-26740][SQL] Статистика по столбцам меток времени и дат, записанная Spark 3,0
  • [Spark-26909][SQL] используйте Унсаферов. хэш () в качестве хэш-значения в хашаггрегате
  • [Spark-26990][SQL] филеиндекс: используйте указанные пользователем имена полей, если это возможно.
  • [Spark-26851][SQL] Исправление блокировки с двойным контролем в качедрддбуилдер
  • [Spark-26864][SQL] запрос может вернуть неверный результат, если UDF Python используется в качестве условия левого объединения
  • [Spark-26887][SQL] [Python] создайте datetime.date непосредственно вместо создания datetime64 в качестве промежуточных данных.
  • [Spark-26859][SQL] ошибка индекса модуля записи полей исправления в невекторном десериализаторе ORC
  • [Spark-26864][SQL] запрос может возвращать неверный результат, если UDF Python используется в качестве условия объединения, а в UDF используются атрибуты из обоих элементов левого частичного объединения.
  • [Spark-24360][Spark-26091][номер_порта] [SQL] Поддержка Hive 3,1 хранилище метаданных
  • [Spark-26873][SQL] используйте одинаковую отметку времени для создания идентификаторов заданий Hadoop.
  • [Spark-26734][Streaming] исправление стакковерфловеррор с большой очередью блоков
  • [Spark-26758][Core] простаивающие исполнители не будут уничтожены после spark.dynamiAllocation.exeзначения куторидлетимеаут
  • [Spark-26751][SQL] устранение утечки памяти при выполнении инструкции в фоновом режиме и вызов исключения, которое не хивесклексцептион
  • [Spark-26806][СС] евенттиместатс. Merge должен правильно обменяться нулями
  • [Spark-26745][Spark-24959][SQL] оптимизация счетчика изменений в источнике данных JSON
  • [Spark-26757][GRAPHX] возвращает значение 0 для Count на пустом пограничном или вершинном RDD
  • [Spark-26726] Синхронизация объема памяти, используемого широковещательной переменной, к отображению пользовательского интерфейса
  • [Spark-26718][СС] фиксированное целочисленное переполнение в SS Kafka рателимит вычисление
  • [Spark-26708][SQL] неверный результат вызван несоответствием кэшированного RDD кэша SQL и его физическим планом
  • [Spark-26735][SQL] Проверка целостности плана для специальных выражений
  • [Spark-26619][SQL] удаление неиспользуемых сериализаторов из сериализефромобжект
  • [Spark-26379][SS] используйте фиктивный тимезонеид, чтобы избежать Унресолведексцептион в куррентбатчтиместамп
  • [Spark-26495][SQL] Упростите средство извлечения селектедфиелд
  • [Spark-26379][СС] устранение проблемы при добавлении current_timestamp и CURRENT_DATE в потоковый запрос
  • [Spark-26709][SQL] оптимиземетадатаонликуери неправильно обрабатывает пустые записи
  • [Spark-26680][SQL] Создайте инпутварс, когда условия подходят.
  • [Spark-26682][SQL] используйте Таскаттемптид вместо AttemptNumber для Hadoop.
  • [Spark-26706][SQL] исправление иллегалнумерикпрецеденце для битетипе
  • [Spark-26228][MLLIB] возникла ошибка при вычислении матрицы грамиан
  • [Spark-26665][Core] исправьте ошибку, которую Блокктрансферсервице. фетчблокксинк может зависнуть в неограниченное время
  • [Spark-26549][PYSPARK] исправление для повторного использования рабочих ролей Python не оказывает влияния для параллелизации Lazy Iterable Range
  • [Spark-26351][MLLIB] обновление документа и незначительное исправление в метриках оценки MLLIB
  • [Spark-26450] Старайтесь не перестраивать схему схемы для каждого столбца в проекции
  • [Spark-26638][PYSPARK] [ml] PYSPARK классы Vector всегда возвращают ошибку для унарного отрицания
  • [Spark-26633][REPL] Добавление Ексекуторкласслоадер. жетресаурцеасстреам
  • [Spark-26629][SS] Исправлена ошибка с несколькими файловыми потоками в запросе и перезапуске в пакете, не имеющем данных для одного файлового потока
  • [Spark-25992][Python] SparkContext документов нельзя совместно использовать для многопроцессорной обработки
  • [Spark-26615][Core] устранение утечек ресурсов транспортного сервера или клиента в основной UnitTests
  • [Spark-26350][SS] разрешить переопределение идентификатора группы для потребителя Kafka
  • [Spark-26538][SQL] Установка точности и масштаба по умолчанию для элементов числового массива postgres
  • [Spark-26586][СС] исправьте состояние гонки, вызывающее запуск потоков с непредвиденными разрешениями
  • [Spark-26551][SQL] ошибка исправления схемы при выборе одного сложного поля и наличия предиката, не имеющего значение null, в другом
  • [Spark-26576][SQL] подсказка о широковещательной рассылке не применена к секционированной таблице
  • [Spark-26571][SQL] Обновление сопоставления Serde Hive с каноническим именем Parquet и ORC FileFormat
  • [Spark-26267][SS] повторить попытку при обнаружении неверных смещений от Kafka (2,4)
  • [Spark-26559][ml] [PYSPARK] образ машинного обучения не может работать с версиями NumPy, выпущенными до 1,9
  • [Spark-26078][SQL] атрибуты дедупликации самосоединения для во вложенных запросах

Обновления в рамках обслуживания

См. статью обновление Databricks Runtime 5,3.

Системная среда

  • Операционная система: Ubuntu 16.04.6 LTS
  • Java: 1.8.0 _191
  • Scala: 2.11.12
  • Python: 2.7.12 для кластеров Python 2 и 3.5.2 для кластеров Python 3. Дополнительные сведения см. в разделе Версия Python.
  • R: r версии 3.5.2 (2018-12-20)
  • Кластеры GPU: устанавливаются следующие библиотеки GPU для NVIDIA:
    • Драйвер Tesla 375,66
    • CUDA 9,0
    • cuDNN 7,0

Примечание

Хотя Scala 2,12 поддерживается в Apache Spark 2,4, она не поддерживается в Databricks Runtime 5,3.

Установленные библиотеки Python

Библиотека Version Библиотека Version Библиотека Version
ansi2html 1.1.1 argparse 1.2.1 недопорты-ABC 0,5
бото 2.42.0 boto3 1.4.1 ботокоре 1.4.70
brewer2mpl 1.4.1 сертификации 2016.2.28 cffi 1.7.0
чардет 2.3.0 колорама 0.3.7 конфигобж 5.0.6
шифрование 1.5 цикл 0.10.0 Cython 0.24.1
декоратора 4.0.10 докутилс 0,14 enum34 1.1.6
ET-XmlFile 1.0.1 фритипе-копировать 1.0.2 функсигс 1.0.2
фусепи 2.0.4 фьючерсы 3.2.0 ggplot 0.6.8
html5lib 0,999 стандарт 2.1 ipaddress 1.0.16
IPython Notebook 2.2.0 IPython Notebook — женутилс 0.1.0 ждкал 1.2
Jinja2 2.8 jmespath 0.9.0 ллвмлите 0.13.0
лксмл 3.6.4 маркупсафе 0,23 matplotlib 1.5.3
mpld3 0.2 мсгпакк-Python 0.4.7 НДг — хттпсклиент 0.3.3
нумба 0.28.1 numpy 1.11.1 опенпиксл 2.3.2
pandas 0.19.2 pathlib2 2.1.0 патси 0.4.1
пекспект 4.0.1 пикклешаре 0.7.4 пиллов 3.3.1
pip 19.0.3 открытом 3.9 набор средств командной строки 1.0.7
psycopg2 2.6.2 птипроцесс 0.5.1 py4j 0.10.3
pyarrow 0.8.0 pyasn1 0.1.9 пикпарсер 2.14
пигментс 2.1.3 пигобжект 3.20.0 pyOpenSSL 16.0.0
пипарсинг 2.2.0 пипнг 0.0.18 Python 2.7.12
python-dateutil 2.5.3 Python — геохэш 0.8.5 питз 2016.6.1
requests 2.11.1 s3transfer 0.1.9 scikit-learn 0.18.1
scipy 0.18.1 искать 0,32 seaborn 0.7.1
setuptools 40.8.0 симплежсон 3.8.2 simples3 1.0
сингледиспатч 3.4.0.3 метр 1.10.0 statsmodels 0.6.1
Торнадо 5.1.1 траитлетс 4.3.0 urllib3 1.19.1
Virtualenv 16.1.0 вквидс 0.1.7 wheel 0.33.1
всгиреф 0.1.2

Установленные библиотеки R

Библиотека Version Библиотека Version Библиотека Version
abind 1.4–5 askpass 1,1 assertthat 0.2.0
backports 1.1.3 base 3.5.2 base64enc 0.1–3
BH 1.69.0-1 bit 1.1 – 14 bit64 0.9–7
bitops 1.0–6 blob 1.1.1 boot 1.3–20
brew 1.0–6 callr 3.1.1 car 3.0–2
carData 3.0–2 знак вставки 6.0 – 81 cellranger 1.1.0
chron 2.3 — 53 class 7.3-15 cli 1.0.1
clipr 0.5.0 клисимболс 1.2.0 cluster 2.0.7-1
codetools 0.2-16 colorspace 1.4–0 commonmark 1.7
compiler 3.5.2 config 0.3 crayon 1.3.4
curl 3.3 data.table 1.12.0 наборы данных 3.5.2
DBI 1.0.0 dbplyr 1.3.0 desc 1.2.0
devtools 2.0.1 digest 0.6.18 домк 1.3.5
dplyr 0.8.0.1 ellipsis 0.1.0 fansi 0.4.0
forcats 0.4.0 foreach 1.4.4 foreign 0.8-71
Forge 0.2.0 fs 1.2.6 gbm 2.1.5
универсальные шаблоны 0.0.2 ggplot2 3.1.0 GH 1.0.1
git2r 0.24.0 glmnet 2.0 — 16 glue 1.3.0
gower 0.1.2 графика 3.5.2 grDevices 3.5.2
Сетка 3.5.2 gridExtra 2.3 gsubfn 0.7
gtable 0.2.0 H2O 3.22.1.1 haven 2.1.0
hms 0.4.2 htmltools 0.3.6 htmlwidgets 1.3
httr 1.4.0 хвритер 1.3.2 хвритерплус 1.0–3
ссылки 0.3.1 ipred 0.9–8 iterators 1.0.10
jsonlite 1.6 KernSmooth 2.23–15 labeling 0.3
lattice 0.20-38 lava 1.6.5 lazyeval 0.2.1
маленький 0.3.6 lme4 1.1-20 lubridate 1.7.4
magrittr 1.5 mapproj 1.2.6 maps 3.3.0
maptools 0.9–5 MASS 7.3 — 51.1 Матрица 1.2–15
MatrixModels 0.4–1 memoise 1.1.0 methods 3.5.2
mgcv 1.8-27 mime 0,6 minqa 1.2.4
ModelMetrics 1.2.2 munsell 0.5.0 mvtnorm 1.0–9
nlme 3.1-137 nloptr 1.2.1 nnet 7.3–12
numDeriv 2016.8–1 openssl 1.2.2 опенкслскс 4.1.0
parallel 3.5.2 pbkrtest 0.4–7 pillar 1.3.1
пкгбуилд 1.0.2 pkgconfig 2.0.2 пкгкиттен 0.1.4
пкглоад 1.0.2 plogr 0.2.0 plyr 1.8.4
praise 1.0.0 prettyunits 1.0.2 pROC 1.13.0
processx 3.2.1 prodlim 2018.04.18 progress 1.2.0
proto 1.0.0 ps 1.3.0 purrr 0.3.0
quantreg 5,38 R.methodsS3 1.7.1 R.oo 1.22.0
R.utils 2.8.0 r2d3 0.2.3 R6 2.4.0
randomForest 4.6-14 rappdirs 0.3.1 ркмдчекк 1.3.2
RColorBrewer 1.1–2 Rcpp 1.0.0 RcppEigen 0.3.3.5.0
RcppRoll 0.3.0 RCurl 1.95 — 4.11 readr 1.3.1
readxl 1.3.0 recipes 0.1.4 rematch 1.0.1
удаленными ветвями 2.0.2 reshape2 1.4.3 Рио 0.5.16
rlang 0.3.1 RODBC 1.3–15 roxygen2 6.1.1
rpart 4.1-13 rprojroot 1.3–2 рсерве 1.8–6
RSQLite 2.1.1 rstudioapi 0.9.0 scales 1.0.0
sessioninfo 1.1.1 sp 1.3-1 sparklyr 1.0.0
SparkR 2.4.2 SparseM 1.77 spatial 7.3–11
splines 3.5.2 sqldf 0.4–11 SQUAREM 2017.10-1
statmod 1.4.30 stats 3.5.2 stats4 3.5.2
stringi 1.3.1 stringr 1.4.0 survival 2.43-3
sys 3.0 tcltk 3.5.2 TeachingDemos 2,10
testthat 2.0.1 tibble 2.0.1 tidyr 0.8.3
tidyselect 0.2.5 timeDate 3043.102 средства 3.5.2
усесис 1.4.0 utf8 1.1.4 utils 3.5.2
viridisLite 0.3.0 whisker 0.3–2 withr 2.1.2
xml2 1.2.0 XOPEN 1.0.0 yaml 2.2.0
zip 2.0.0

Установленные библиотеки Java и Scala (версия кластера Scala 2,11)

Идентификатор группы. Идентификатор артефакта Version
ANTLR ANTLR 2.7.7
com. амазонавс Amazon-Кинесис-Client 1.8.10
com. амазонавс AWS-Java-SDK — Автомасштабирование 1.11.313
com. амазонавс AWS-Java-SDK-cloudformation 1.11.313
com. амазонавс AWS-Java-SDK-клаудфронт 1.11.313
com. амазонавс AWS-Java-SDK-клаудхсм 1.11.313
com. амазонавс AWS-Java-SDK-клаудсеарч 1.11.313
com. амазонавс AWS-Java-SDK-клаудтраил 1.11.313
com. амазонавс AWS-Java-SDK-cloudwatch 1.11.313
com. амазонавс AWS-Java-SDK-клаудватчметрикс 1.11.313
com. амазонавс AWS-Java-SDK-кодедеплой 1.11.313
com. амазонавс AWS-Java-SDK-когнитоидентити 1.11.313
com. амазонавс AWS-Java-SDK-когнитосинк 1.11.313
com. амазонавс AWS-Java-SDK-config 1.11.313
com. амазонавс AWS-Java-SDK-Core 1.11.313
com. амазонавс AWS-Java-SDK-конвейер 1.11.313
com. амазонавс AWS-Java-SDK-директконнект 1.11.313
com. амазонавс AWS-Java-SDK-каталог 1.11.313
com. амазонавс AWS-Java-SDK-dynamodb 1.11.313
com. амазонавс AWS-Java-SDK-EC2 1.11.313
com. амазонавс AWS-Java-SDK — ECS 1.11.313
com. амазонавс AWS-Java-SDK-EFS 1.11.313
com. амазонавс AWS-Java-SDK-еластикаче 1.11.313
com. амазонавс AWS-Java-SDK-еластикбеансталк 1.11.313
com. амазонавс AWS-Java-SDK-еластиклоадбаланЦинг 1.11.313
com. амазонавс AWS-Java-SDK-еластиктранскодер 1.11.313
com. амазонавс AWS-Java-SDK-EMR 1.11.313
com. амазонавс AWS-Java-SDK-Glacier 1.11.313
com. амазонавс AWS-Java-SDK-IAM 1.11.313
com. амазонавс AWS-Java-SDK-ImportExport 1.11.313
com. амазонавс AWS-Java-SDK-Кинесис 1.11.313
com. амазонавс AWS-Java-SDK — KMS 1.11.313
com. амазонавс AWS-Java-SDK-лямбда 1.11.313
com. амазонавс AWS-Java-SDK — журналы 1.11.313
com. амазонавс AWS-Java-SDK-machinelearning 1.11.313
com. амазонавс AWS-Java-SDK-опсворкс 1.11.313
com. амазонавс AWS-Java-SDK — RDS 1.11.313
com. амазонавс AWS-Java-SDK-RedShift 1.11.313
com. амазонавс AWS-Java-SDK-route53 1.11.313
com. амазонавс AWS-Java-SDK-S3 1.11.313
com. амазонавс AWS-Java-SDK-SES 1.11.313
com. амазонавс AWS-Java-SDK-SimpleDB 1.11.313
com. амазонавс AWS-Java-SDK-симплеворкфлов 1.11.313
com. амазонавс AWS-Java-SDK-SNS 1.11.313
com. амазонавс AWS-Java-SDK-СКС 1.11.313
com. амазонавс AWS-Java-SDK-SSM 1.11.313
com. амазонавс AWS-Java-SDK-сторажегатевай 1.11.313
com. амазонавс AWS-Java-SDK — STS 1.11.313
com. амазонавс AWS-Java-SDK-поддержка 1.11.313
com. амазонавс AWS-Java-SDK-SWF-библиотеки 1.11.22
com. амазонавс AWS-Java-SDK — рабочие области 1.11.313
com. амазонавс jmespath — Java 1.11.313
com. карротсеарч хппк 0.7.2
com. чуусаи shapeless_2.11 2.3.2
com. клеарспринг. Analytics поток 2.7.0
com. кирпичные рсерве 1.8 – 3
com. кирпичные DBML-local_2.11 0.5.0-db8-Spark 2.4
com. кирпичные DBML-local_2.11 — тесты 0.5.0-db8-Spark 2.4
com. кирпичные jets3t 0.7.1-0
com. скалапб. compilerplugin_2.11 0.4.15-9
com. скалапб. скалапб-runtime_2.11 0.4.15-9
com. есотериксофтваре Kryo-затененный 4.0.2
com. есотериксофтваре минлог 1.3.0
com. фастерксмл классмате 1.0.0
com. фастерксмл. Jackson. Core Jackson-аннотации 2.6.7
com. фастерксмл. Jackson. Core Jackson-Core 2.6.7
com. фастерксмл. Jackson. Core Jackson-DataBind 2.6.7.1
com. фастерксмл. Jackson. формат. Jackson-кбор 2.6.7
com. фастерксмл. Jackson. DataType Jackson-DataType-Жода 2.6.7
com. фастерксмл. Jackson. Module Jackson-имя модуля 2.6.7
com. фастерксмл. Jackson. Module Jackson-Module-scala_2.11 2.6.7.1
com. GitHub. фоммил жнилоадер 1.1
com. GitHub. фоммил. Библиотека netlib core 1.1.2
com. GitHub. фоммил. Библиотека netlib native_ref — Java 1.1
com. GitHub. фоммил. Библиотека netlib native_ref-Java-Native 1.1
com. GitHub. фоммил. Библиотека netlib native_system — Java 1.1
com. GitHub. фоммил. Библиотека netlib native_system-Java-Native 1.1
com. GitHub. фоммил. Библиотека netlib Библиотека netlib-native_ref-Linux-x86_64-собственные 1.1
com. GitHub. фоммил. Библиотека netlib Библиотека netlib-native_system-Linux-x86_64-собственные 1.1
com. GitHub. Лубен зстд — JNI 1.3.2-2
com. GitHub. RWL жтрансформс 2.4.0
com. Google. Code. FindBugs jsr305 2.0.1
com. Google. Code. gson gson 2.2.4
com. Google. гуава гуава 15.0
com. Google. protobuf protobuf — Java 2.6.1
com. гуглекоде. жаваевах JavaEWAH 0.3.2
com. h2database H2 1.3.174
com. жкрафт жсч 0.1.50
com. жолбокс бонекп 0.8.0. RELEASE
com.microsoft.azure Azure-Data-Lake-Store-SDK 2.2.8
com.microsoft.azure azure-storage 5.2.0
com. Microsoft. SqlServer MSSQL-JDBC 6.2.2. jre8
com. Нинг Сжатие — лзф 1.0.3
com. Sun. mail javax. mail 1.5.2
com. ThoughtWorks. имя paranamer 2.8
com. труеаккорд. lenses lenses_2.11 0.3
com. Twitter подогрева — Java 0.9.3
com. Twitter chill_2.11 0.9.3
com. Twitter Parquet-Hadoop — пакет 1.6.0
com. Twitter util-app_2.11 6.23.0
com. Twitter util-core_2.11 6.23.0
com. Twitter util-jvm_2.11 6.23.0
com. типесафе config 1.2.1
com. типесафе. Scala — ведение журнала Scala-Logging-api_2.11 2.1.2
com. типесафе. Scala — ведение журнала Scala-Logging-slf4j_2.11 2.1.2
com. унивоЦити унивоЦити-парсеры 2.7.3
com. влкан флатбуфферс 1.2.0 — 3f79e055
com. заксксер HikariCP 3.1.0
Commons Attribution — беанутилс Commons Attribution — беанутилс 1.7.0
Commons Attribution — беанутилс Commons Attribution-беанутилс-Core 1.8.0
Commons Attribution-CLI Commons Attribution-CLI 1.2
файла Commons-Codec файла Commons-Codec 1,10
Commons Attribution — коллекции Commons Attribution — коллекции 3.2.2
Commons Attribution — конфигурация Commons Attribution — конфигурация 1.6
commons-dbcp commons-dbcp 1.4
Commons Attribution — дайджест Commons Attribution — дайджест 1.8
Commons Attribution — HttpClient Commons Attribution — HttpClient 3.1
Commons Attribution-IO Commons Attribution-IO 2.4
Commons Attribution-lang Commons Attribution-lang 2.6
Commons Attribution — ведение журнала Commons Attribution — ведение журнала 1.1.3
Commons Attribution-NET Commons Attribution-NET 3.1
Commons Attribution — пул Commons Attribution — пул 1.5.4
info. ganglia. gmetric4j gmetric4j 1.0.7
IO. аирлифт аиркомпрессор 0,10
IO. дропвизард. метрики метрики — ядро 3.1.5.
IO. дропвизард. метрики метрики — ganglia 3.1.5.
IO. дропвизард. метрики метрики — GRAPHITE 3.1.5.
IO. дропвизард. метрики метрики — healthchecks 3.1.5.
IO. дропвизард. метрики метрики — jetty9 3.1.5.
IO. дропвизард. метрики метрики — JSON 3.1.5.
IO. дропвизард. метрики метрики — виртуальной машины Java 3.1.5.
IO. дропвизард. метрики метрики — log4j 3.1.5.
IO. дропвизард. метрики метрики — сервлеты 3.1.5.
IO. NETTY NETTY 3.9.9. Final
IO. NETTY NETTY — все 4.1.17. Final
IO. Prometheus симплеклиент 0.0.16
IO. Prometheus simpleclient_common 0.0.16
IO. Prometheus simpleclient_dropwizard 0.0.16
IO. Prometheus simpleclient_servlet 0.0.16
IO. Prometheus. JMX сборщик 0,7
javax. Activation activation 1.1.1
javax. Аннотация javax. Аннотация — API 1.2
javax. El javax. El-API 2.2.4
javax. Ждо jdo-api 3.0.1
javax. сервлета javax. сервлета — API 3.1.0
javax.servlet.jsp JSP — API 2.1
javax. Transaction jta 1.1
javax. Проверка Проверка — API 1.1.0. Final
javax.ws.rs javax.ws.rs — API 2.0.1
javax.xml. Bind jaxb-api 2.2.2
javax.xml. Stream stax-api 1,0 – 2
javolution javolution 5.5.1
жлине жлине 2.14.6
Жода — время Жода — время 2.9.3
log4j Apache-log4j — дополнительные возможности 1.2.17
log4j log4j 1.2.17
NET. хидроматик eigenbase-properties 1.1.5
NET. разорвине пиролите 4.13
NET. SF. жпам jpam 1.1
NET. SF. опенксв опенксв 2.3
NET. SF. суперксв супер-CSV 2.2.0
NET. Снежинка снежинка — прием-пакет SDK 0.9.5
NET. Снежинка снежинки — JDBC 3.6.15
NET. Снежинка Spark-snowflake_2.11 2.4.10-spark_2.4
NET. sourceforge. f2j arpack_combined_all 0.1
org. акплт онкрпк 1.0.7
org. ANTLR ST4 4.0.4
org. ANTLR ANTLR-Runtime 3.4
org. ANTLR antlr4-Runtime 4,7
org. ANTLR stringtemplate 3.2.1
org. Apache. Ant ant 1.9.2
org. Apache. Ant Ant — жсч 1.9.2
org. Apache. Ant ant-launcher 1.9.2
org. Apache. стрелка формат стрелки 0.10.0
org. Apache. стрелка стрелка — память 0.10.0
org. Apache. стрелка стрелка — вектор 0.10.0
org. Apache. Avro avro 1.8.2
org. Apache. Avro Avro — IPC 1.8.2
org. Apache. Avro Avro — mapred — hadoop2 1.8.2
org. Apache. Calcite Calcite — аватика 1.2.0 — инкубация
org. Apache. Calcite Calcite-Core 1.2.0 — инкубация
org. Apache. Calcite Calcite — linq4j 1.2.0 — инкубация
org. Apache. Commons Attribution Commons Attribution — сжатие 1.8.1
org. Apache. Commons Attribution Commons Attribution — шифрование 1.0.0
org. Apache. Commons Attribution Commons Attribution — lang3 3.5
org. Apache. Commons Attribution commons-math3 3.4.1
org. Apache. пленку пленку — клиент 2.7.1
org. Apache. пленку пленку — платформа 2.7.1
org. Apache. пленку пленку-рецепты 2.7.1
org. Apache. Дерби дерби 10.12.1.1
org. Apache. Directory. API API-ASN1-API 1.0.0 — M20
org. Apache. Directory. API API-util 1.0.0 — M20
org. Apache. Directory. Server апачедс — i18n 2.0.0 — M15
org. Apache. Directory. Server апачедс-Kerberos-кодек 2.0.0 — M15
org. Apache. Hadoop Hadoop — аннотации 2.7.3
org. Apache. Hadoop Hadoop — проверка подлинности 2.7.3
org. Apache. Hadoop Hadoop — клиент 2.7.3
org. Apache. Hadoop Hadoop — общие 2.7.3
org. Apache. Hadoop Hadoop-HDFS 2.7.3
org. Apache. Hadoop Hadoop-MapReduce-Client-App 2.7.3
org. Apache. Hadoop Hadoop-MapReduce-Client-Common 2.7.3
org. Apache. Hadoop Hadoop-MapReduce-Client-Core 2.7.3
org. Apache. Hadoop Hadoop-MapReduce-Client-жобклиент 2.7.3
org. Apache. Hadoop Hadoop-MapReduce-Client-случайный выбор 2.7.3
org. Apache. Hadoop Hadoop-Yarn — API 2.7.3
org. Apache. Hadoop Hadoop-Yarn — клиент 2.7.3
org. Apache. Hadoop Hadoop-Yarn-Common 2.7.3
org. Apache. Hadoop Hadoop-Yarn-Server-Common 2.7.3
org. Apache. хтраце хтраце-Core 3.1.0 — инкубация
org. Apache. хттпкомпонентс HttpClient 4.5.4
org. Apache. хттпкомпонентс хттпкоре 4.4.8
org. Apache. Ivy ivy 2.4.0
org. Apache. ORC ORC-Core-Hive 1.5.2
org. Apache. ORC ORC-MapReduce-Hive 1.5.2
org. Apache. ORC ORC-оболочки 1.5.2
org. Apache. Parquet Parquet — столбец 1.10.1.1 — databricks3
org. Apache. Parquet Parquet — общие 1.10.1.1 — databricks3
org. Apache. Parquet Parquet-кодирование 1.10.1.1 — databricks3
org. Apache. Parquet Parquet-формат 2.4.0
org. Apache. Parquet Parquet-Hadoop 1.10.1.1 — databricks3
org. Apache. Parquet Parquet — Jackson 1.10.1.1 — databricks3
org. Apache. Thrift libfb303 0.9.3
org. Apache. Thrift либсрифт 0.9.3
org. Apache. ксбеан ксбеан-asm6-с тенью 4.8
org. Apache. Zookeeper Zookeeper 3.4.6
org. Codehaus. Jackson Jackson-Core-АСЛ 1.9.13
org. Codehaus. Jackson Jackson — жаксрс 1.9.13
org. Codehaus. Jackson Jackson-сопоставитель-АСЛ 1.9.13
org. Codehaus. Jackson Jackson — КСК 1.9.13
org. Codehaus. жанино commons-compiler 3.0.10
org. Codehaus. жанино janino 3.0.10
org. датануклеус датануклеус-API-Ждо 3.2.6
org. датануклеус датануклеус-Core 3.2.10
org. датануклеус датануклеус-РСУБД 3.2.9
org. Eclipse. Jetty Jetty — клиент 9.3.20. v20170531
org. Eclipse. Jetty Jetty — продолжение 9.3.20. v20170531
org. Eclipse. Jetty Jetty-HTTP 9.3.20. v20170531
org. Eclipse. Jetty Jetty-IO 9.3.20. v20170531
org. Eclipse. Jetty Jetty — JNDI 9.3.20. v20170531
org. Eclipse. Jetty Jetty-Plus 9.3.20. v20170531
org. Eclipse. Jetty Jetty — прокси 9.3.20. v20170531
org. Eclipse. Jetty Jetty — безопасность 9.3.20. v20170531
org. Eclipse. Jetty Jetty — сервер 9.3.20. v20170531
org. Eclipse. Jetty Jetty — сервлета 9.3.20. v20170531
org. Eclipse. Jetty Jetty — сервлеты 9.3.20. v20170531
org. Eclipse. Jetty Jetty-util 9.3.20. v20170531
org. Eclipse. Jetty Jetty — webapp 9.3.20. v20170531
org. Eclipse. Jetty Jetty-XML 9.3.20. v20170531
org. фусесаурце. левелдбжни leveldbjni-all 1.8
org. GlassFish. hk2 hk2 — API 2.4.0 — B34
org. GlassFish. hk2 hk2-Локатор 2.4.0 — B34
org. GlassFish. hk2 hk2-utils 2.4.0 — B34
org. GlassFish. hk2 OSGi-Resource-Locator 1.0.1
org. GlassFish. hk2. external аопаллианце — переупаковано 2.4.0 — B34
org. GlassFish. hk2. external javax.inject 2.4.0 — B34
org. GlassFish. Джерси. пакеты. переупакованные Джерси — гуава 2.22.2
org. GlassFish. Джерси. Containers Джерси — контейнер — сервлета 2.22.2
org. GlassFish. Джерси. Containers Джерси — контейнер — сервлета — Core 2.22.2
org. GlassFish. Джерси. Core jersey-client 2.22.2
org. GlassFish. Джерси. Core Джерси — общие 2.22.2
org. GlassFish. Джерси. Core Джерси — сервер 2.22.2
org. GlassFish. Джерси. Media Джерси-Media-жаксб 2.22.2
org. режим гибернации режим гибернации — проверяющий элемент управления 5.1.1. Final
org. iq80. привязка snappy 0.2
org. жавассист жавассист 3.18.1-GA
org. JBoss. ведение журнала JBoss — ведение журнала 3.1.3.GA
org. ждби ждби 2.63.1
org. Жода Жода — преобразование 1.7
org. жодд жодд-Core 3.5.2
org.json4s json4s-ast_2.11 3.5.3
org.json4s json4s-core_2.11 3.5.3
org.json4s json4s-jackson_2.11 3.5.3
org.json4s json4s-scalap_2.11 3.5.3
org. lz4 lz4 — Java 1.4.0
org. MariaDB. JDBC MariaDB-Java-Client 2.1.2
org. моккито моккито — все 1.9.5
org. обженесис обженесис 2.5.1
org. PostgreSQL postgresql 42.1.4
org. роарингбитмап роарингбитмап 0.5.11
org. рокксдб рокксдбжни 5.2.1
org. росуда. Ренгине ренгине 2.1.0
org. Scala-lang Scala-compiler_2.11 2.11.12
org. Scala-lang Scala-library_2.11 2.11.12
org. Scala-lang Scala-reflect_2.11 2.11.12
org. Scala-lang. modules Scala-Parser-combinators_2.11 1.1.0
org. Scala-lang. modules Scala-xml_2.11 1.0.5
org. Scala — SBT тестовый интерфейс 1.0
org. скалачекк scalacheck_2.11 1.12.5
org. скалактик scalactic_2.11 3.0.3
org. скаланлп с macros_2.11 0.13.2
org. скаланлп breeze_2.11 0.13.2
org. скалатест scalatest_2.11 3.0.3
org. slf4j жкл-over-slf4j 1.7.16
org. slf4j jul-to-slf4j 1.7.16
org. slf4j slf4j — API 1.7.16
org. slf4j slf4j — log4j12 1.7.16
org. Spark-Project. Hive Hive — Beeline 1.2.1. spark2
org. Spark-Project. Hive Hive-CLI 1.2.1. spark2
org. Spark-Project. Hive Hive-Exec 1.2.1. spark2
org. Spark-Project. Hive Hive — JDBC 1.2.1. spark2
org. Spark-Project. Hive Hive — хранилище метаданных 1.2.1. spark2
org. Spark-Project. Spark unused 1.0.0
org. Спире-Math Спире-macros_2.11 0.13.0
org. Спире-Math spire_2.11 0.13.0
org. спрингфрамеворк пружинное ядро 4.1.4. RELEASE
org. спрингфрамеворк Пружинный тест 4.1.4. RELEASE
org. тукаани ксз 1.5
org. типелевел machinist_2.11 0.6.1
org. типелевел макрос — compat_2.11 1.1.1
org. ксериал SQLite-JDBC 3.8.11.2
org. ксериал. привязка snappy-java 1.1.7.1
org. YAML снакэйамл 1.16
Оро Оро 2.0.8
программное обеспечение. Amazon. литий литий-Java 1.0.2
StAX stax-api 1.0.1
ксмленк ксмленк 0,52