Databricks Runtime 7,5 (не поддерживается)

Выпустили этот образ в течение декабря 2020.

В следующих заметках о выпуске содержатся сведения о Databricks Runtime 7,5, на базе Apache Spark 3,0.

новые функции;

Функции и усовершенствования дельты Lake

В этом выпуске реализованы следующие функции и усовершенствования дельты Lake:

Асинхронная контрольная точка устраняет пиковые пики длительности пакетной передачи

Дельта Lake выполняет контрольные точки каждые 10 фиксаций по умолчанию. В потоковой нагрузке контрольные точки могут вызвать незначительные пиковые нагрузки в микропакетах каждые 10 фиксаций. Асинхронная контрольная точка устраняет эти пиковые нагрузки.

Асинхронная контрольная точка включена по умолчанию для всех потоковых рабочих нагрузок, не являющихся триггерами. Благодаря асинхронной контрольной точке модули записи потоковой передачи также пишут Расширенные контрольные точки , поэтому вам не нужно явно участвовать в расширенных контрольных точках.

чтобы отключить асинхронную контрольную точку, задайте конфигурацию SQL spark.databricks.delta.checkpoint.async.enabled false .

Рабочие нагрузки пакетной службы продолжают записывать контрольные точки синхронно, и мы советуем включить асинхронную контрольную точку для рабочих нагрузок пакетной службы.

Последние сведения о таблице теперь распространяются в каталоги

Разностная версия Lake теперь распространяет последние сведения о таблице, такие как свойства схемы и таблицы, в каталоги, такие как хранилище метаданных Hive, на наиболее эффективном уровне. Такие сведения помогут вам использовать средства каталогизации для анализа схемы разностных таблиц.

Разностная версия Lake не зависит от этой информации, но пытается ее актуальность. Кроме того, разностные магазины сохраняют свойства таблицы delta.lastUpdateVersion и delta.lastCommitTimestamp обозначают версию и отметку времени фиксации, которая последний раз отправил изменения в хранилище метаданных. Хранилище метаданных обновляется только в том случае, если схема таблицы или свойства в таблице не совпадают. Поэтому вышеупомянутые свойства таблицы не обязательно соответствуют последней версии таблицы.

Если сведения о таблице и хранилище метаданных не синхронизированы, можно выполнить команду, например, DESCRIBE <table> чтобы обновить хранилище метаданных.

Примечание

Поскольку Hive не допускает изменение столбцов секционирования, но разностные таблицы могут изменить их секционирование, разностные таблицы не отображаются как секционированные в Hive.

MERGE INTO Операция теперь поддерживает развитие схем для вложенных столбцов

Развитие схемы вложенных столбцов теперь имеет ту же семантику, что и столбцы верхнего уровня. Например, новые вложенные столбцы могут автоматически добавляться в StructType столбец. Дополнительные сведения см. в разделе Автоматическое развитие схемы в Merge .

MERGE INTO Операция теперь автоматически использует оптимизированные операции записи

Оптимизированные операции записи могут обеспечить гораздо лучшую производительность для MERGE INTO готовых к работе, особенно для MERGE INTO секционированных таблиц. Чтобы отключить оптимизированные операции записи, задайте для конфигурации Spark значение spark.databricks.delta.optimizeWrite.enabled false .

MERGE INTO````UPDATEоперации и теперь разрешают вложенные столбцы структуры по имени

Операции обновления UPDATE и MERGE INTO команды теперь разрешают вложенные столбцы структуры по имени. Иными словами, при сравнении или присваивании столбцов типа Структтипе порядок вложенных столбцов не имеет значения (точно так же, как и порядок столбцов верхнего уровня). Чтобы вернуться к разрешению по положению, установите для конфигурации Spark значение spark.databricks.delta.resolveMergeUpdateStructsByName.enabled false .

CLONE является общедоступным, и теперь можно переопределить свойства таблицы.

CLONEТеперь команда доступна в общедоступной области. См. раздел клонирование (Дельта Lake на Azure Databricks). Кроме того, теперь можно указать переопределения свойств таблицы при использовании CLONE . Примеры см. в разделе варианты использования клонирования.

RESTORE общедоступная версия

RESTOREТеперь команда доступна в общедоступной области. См. раздел Restore (Delta Lake на Azure Databricks).

Scala Implicit упрощают API-интерфейсы чтения и записи Spark

Вы можете импортировать, io.delta.implicits._ чтобы использовать delta метод с API-интерфейсами чтения и записи Spark.

import io.delta.implicits._

spark.read.delta("/my/table/path")
df.write.delta("/my/table/path")
spark.readStream.delta("/my/table/path")
df.writeStream.delta("/my/table/path")

Повышение пропускной способности потоковой передачи с помощью fetchParallelism параметра соединителя

Соединитель АКС теперь поддерживает новый параметр fetchParallelism для указания параллелизма для выборки сообщений из службы очередей.

Отслеживать ход выполнения потока с помощью новых метрик автоматического загрузчика

Автозагрузчик теперь сообщает, сколько файлов существует в невыполненной работе, и как размер невыполненной работы составляет после каждого пакета. Эти метрики можно использовать для отслеживания хода выполнения потока. Дополнительные сведения о том, как просмотреть метрики, см. в разделе Auto Loader.

Улучшения

Расширенная поддержка библиотек с областью записной книжки с помощью %pip и %conda волшебных команд

Теперь вы можете устанавливать библиотеки с областью записной книжки с помощью %pip и %conda волшебных команд в кластерах с высоким уровнем параллелизма с включенными списками ACL таблицы или транзитом учетных данных

точный вывод SQL Spark DECIMAL

DECIMALтип данных Spark SQL теперь отображается в таблицах без потери точности и масштаба.

Соединитель хранилища ADLS Gen 2 на основе Hadoop 3,3 для АБФС

Обновленная версия соединителя хранилища ADLS Gen 2 основана на Hadoop 3,3 для АБФС. Обновленный соединитель содержит множество улучшений стабильности (см. стабильность Hadoop) и включает поддержку проверки подлинности маркера SAS.

Другие исправления

Соединитель Kafka для потоковой передачи Spark был удален. Используйте соединитель Apache Spark.

Обновления библиотеки

  • Обновленные библиотеки Python:
    • коалас обновлен с 1.3.0 на 1.4.0.
  • Обновлены несколько установленных библиотек R. См. раздел установленные библиотеки R.
  • Сборка OpenJDK 8 обновлена до Zulu 8.50.0.51-CA-Linux64 (сборка 1.8.0 _275-B01).

Apache Spark

Databricks Runtime 7,5 включает Apache Spark 3.0.1. Этот выпуск включает в себя все исправления и улучшения Spark, включенные в Databricks Runtime 7,4 (не поддерживается), а также следующие дополнительные исправления ошибок и усовершенствования в Spark:

  • [Spark-33611] [UI] Избегайте кодирования дважды в параметре запроса перезаписанного URL-адреса прокси
  • [Spark-33587] [Core] прервать работу исполнителя во вложенных неустранимых ошибках (7. x)
  • [SPARK-33140] [SQL] выполните откат кода, который не использует переданный SparkSession для получения склконф.
  • [SPARK-33472] [SQL] настройка порядка правил ремовередундантсортс
  • [Spark-33422] [doc] исправьте правильное отображение пункта меню слева
  • [SPARK-27421] [SQL] исправление фильтра для столбца int и класса значений java. lang. String при очистке столбца секционирования
  • [Spark-33483] [модуль] [тесты] исправьте шаблоны исключений Rat и добавьте лицензию.
  • [SPARK-33464] [yaml] добавление или удаление (отмена) необходимого кэша и реструктуризация GitHub действий
  • [Spark-33407] [Python] [7. X] Упростите сообщение об исключении из пользовательских функций Python (отключено по умолчанию)
  • [SPARK-33435] [SQL] DSv2: обновление таблицы должно сделать кэши, ссылающиеся на таблицу, недействительными
  • [SPARK-33358] [SQL] код возврата при сбое процесса выполнения команды
  • [Spark-33183] [Дбконнект] добавьте ремовередундантсортс. scala в ALLOW_LIST.txt
  • [SPARK-33290] [SQL] обновление таблицы должно сделать кэш недействительным, несмотря на то, что сама таблица может быть не кэширована
  • [SPARK-33140] [SQL] исправить дельта-компиляцию
  • [SPARK-33316] [SQL] добавьте модульные тесты для from_avro и to_avro с реестром схем и предоставленными пользователем схемами avro, допускающими значение null
  • [SPARK-33404] [SQL] исправьте неправильные результаты в date_trunc выражении
  • [Spark-33339] [Python] Pyspark приложение зависает из-за ошибки, отличной от исключения
  • [SPARK-33412] [SQL] овервритебекспрессион должен разрешить его условие удаления на основе связи таблицы, а не входного запроса
  • [SPARK-33391] [SQL] element_at с функцию createarray не учитывает один индекс на основе.
  • [SPARK-33316] [SQL] поддерживает предоставленную пользователем схему Avro, допускающую значение null, для схемы catalyst, не допускающей значения null, в записи Avro
  • [SPARK-33372] [SQL] исправление очистки сегмента
  • [Spark-33371] [Python] обновление Setup.py и тесты для Python 3,9
  • [SPARK-33140] [SQL] удалите склконф и SparkSession во всех подклассах правила [куериплан]
  • [SPARK-33338] [SQL] группа с использованием литеральной схемы не должна завершаться ошибкой
  • [SPARK-33306] [SQL] Timezone требуется при приведении даты к строке
  • [SPARK-33284] [WEB-UI] на странице пользовательского интерфейса служба хранилища если щелкнуть любое поле для сортировки таблицы, содержимое заголовка будет потеряно.
  • [SPARK-33362] [SQL] скипсчемаресолутион по-прежнему должен требовать разрешения запроса
  • [SPARK-32257] [SQL] сообщает о явных ошибках при недопустимом использовании команды SET/RESET
  • [SPARK-32406] [SQL] синтаксис сброса поддерживает однозначный сброс конфигурации
  • [SPARK-32376] [SQL] обеспечение унионбинаме поведения при заполнении со столбцами структуры
  • [SPARK-32308] [SQL] перемещение по логике разрешения имен унионбинаме из кода API в фазу анализа
  • [Spark-20044] [UI] Поддержка пользовательского интерфейса Spark за интерфейсным обратным прокси с использованием префикса пути восстановить URL-адрес прокси-сервера
  • [SPARK-33268] [SQL] [PYTHON] исправьте ошибки для приведения данных из в писонусердефинедтипе
  • [SPARK-33292] [SQL] сделать литеральное представление строки аррайбаседмапдата ненеоднозначным
  • [SPARK-33183] [SQL] исправьте правило оптимизатора елиминатесортс и добавьте физическое правило для удаления избыточных сортировок
  • [SPARK-33272] [SQL] удаление сопоставления атрибутов в куериплан. трансформупвисневаутпут
  • [SPARK-32090] [SQL] улучшение UserDefinedType. equals (), чтобы сделать его симметричным
  • [SPARK-33267] [SQL] исправьте ошибку нпе в фильтре "In", если одно из значений содержит значение null
  • [SPARK-33208] [SQL] обновите документ SparkSession # SQL
  • [SPARK-33260] [SQL] исправляет неверные результаты из сортексек, когда sortOrder является потоком
  • [spark-33230] [SQL] фиксации Hadoop для получения уникального идентификатора задания в SPARK. SQL. sources. вритежобууид
  • [spark-33197] [SQL] внесение изменений в SPARK. SQL. analyzer. maxIterations вступит в силу во время выполнения
  • [SPARK-33228] [SQL] не разкэшировать данные при замене представления, имеющего тот же логический план
  • [Spark-32557] [Core] ведение журнала и проглатывание исключение для каждой записи на сервере журнала
  • [Spark-32436] [Core] инициализируйте Нумнонемптиблоккс в Хигхликомпресседмапстатус. реадекстернал
  • [SPARK-33131] [SQL] исправление наборов группирования с помощью предложения having не может разрешить полное имя столбца
  • [SPARK-32761] [SQL] разрешить статистическую обработку нескольких выражений свертываемые distinct
  • [SPARK-33094] [SQL] сделайте формат ORC распространять конфигурацию Hadoop из параметров DS в базовую файловую систему HDFS

Обновления в рамках обслуживания

См. статью обновление Databricks Runtime 7,5.

Системная среда

  • Операционная система: Ubuntu 18.04.5 LTS
  • Java: Zulu 8.50.0.51-CA-Linux64 (сборка 1.8.0 _275-B01)
  • Scala: 2.12.10
  • Python: 3.7.5
  • R: r версии 3.6.3 (2020-02-29)
  • Дельта Lake 0.7.0

Установленные библиотеки Python

Библиотека Версия Библиотека Версия Библиотека Версия
asn1crypto 1.3.0 вызов 0.1.0 boto3 1.12.0
ботокоре 1.15.0 сертификации 2020.6.20 cffi 1.14.0
чардет 3.0.4 шифрование 2.8 цикл 0.10.0
Cython 0.29.15 декоратора 4.4.1 докутилс 0.15.2
EntryPoint 0.3 стандарт 2.8 ипикернел 5.1.4
IPython Notebook 7.12.0 IPython Notebook — женутилс 0.2.0 джедая 0.17.2
jmespath 0.10.0 жоблиб 0.14.1 jupyter — клиент 5.3.4
jupyter-Core 4.6.1 кивисолвер 1.1.0 коалас 1.4.0
matplotlib 3.1.3 numpy 1.18.1 pandas 1.0.1
парсо 0.7.0 патси 0.5.1 пекспект 4.8.0
пикклешаре 0.7.5 pip 20.0.2 набор средств командной строки 3.0.3
psycopg2 2.8.4 птипроцесс 0.6.0 pyarrow 1.0.1
пикпарсер 2.19 пигментс 2.5.2 пигобжект 3.26.1
pyOpenSSL 19.1.0 пипарсинг 2.4.6 писоккс 1.7.1
Python — APT 1.6.5 + Ubuntu 0,3 python-dateutil 2.8.1 питз 2019,3
пизмк 18.1.1 requests 2.22.0 s3transfer 0.3.3
scikit-learn 0.22.1 scipy 1.4.1 seaborn 0.10.0
setuptools 45.2.0 метр 1.14.0 SSH-Import-ID 5.7
statsmodels 0.11.0 Торнадо 6.0.3 траитлетс 4.3.3
Автоматическое обновление 0.1 urllib3 1.25.8 Virtualenv 16.7.10
вквидс 0.1.8 wheel 0.34.2

Установленные библиотеки R

Библиотеки R устанавливаются из моментального снимка Microsoft Cran на 2020-11-02.

Библиотека Версия Библиотека Версия Библиотека Версия
askpass 1,1 assertthat 0.2.1 backports 1.1.10
base 3.6.3 base64enc 0.1–3 BH 1.72.0-3
bit 4.0.4 bit64 4.0.5 большой двоичный объект 1.2.1
boot 1.3 – 25 brew 1.0–6 брио 1.1.0
broom 0.7.2 callr 3.5.1 знак вставки 6.0 – 86
cellranger 1.1.0 chron 2.3 — 56 class 7.3 – 17
cli 2.1.0 clipr 0.7.1 cluster 2.1.0
codetools 0,2-18 colorspace 1.4–1 commonmark 1.7
compiler 3.6.3 config 0.3 covr 3.5.1
cpp11 0.2.3 crayon 1.3.4 crosstalk 1.1.0.1
curl 4.3 data.table 1.13.2 наборы данных 3.6.3
DBI 1.1.0 dbplyr 1.4.4 desc 1.2.0
devtools 2.3.2 диффобж 0.3.2 digest 0.6.27
dplyr 0.8.5 DT 0,16 ellipsis 0.3.1
evaluate 0,14 fansi 0.4.1 farver 2.0.3
фастмап 1.0.1 forcats 0.5.0 foreach 1.5.1
foreign 0,8 – 76 Forge 0.2.0 fs 1.5.0
универсальные шаблоны 0.1.0 ggplot2 3.3.2 GH 1.1.0
git2r 0.27.1 glmnet 3.0–2 Globals 0.13.1
glue 1.4.2 gower 0.2.2 графика 3.6.3
grDevices 3.6.3 Сетка 3.6.3 gridExtra 2.3
gsubfn 0.7 gtable 0.3.0 haven 2.3.1
highr 0,8 hms 0.5.3 htmltools 0.5.0
htmlwidgets 1.5.2 httpuv 1.5.4 httr 1.4.2
хвритер 1.3.2 хвритерплус 1.0–3 ссылки 0.3.1
ipred 0.9-9 исобанд 0.2.2 iterators 1.0.13
jsonlite 1.7.1 KernSmooth 23E-18 knitr 1,30
labeling 0.4.2 более поздней версии 1.1.0.1 lattice 0,20 — 41
lava 1.6.8 lazyeval 0.2.2 жизненный цикл 0.2.0
lubridate 1.7.9 magrittr 1.5 markdown 1.1
MASS 7.3-53 Матрица 1.2-18 memoise 1.1.0
methods 3.6.3 mgcv 1,8 – 33 mime 0,9
ModelMetrics 1.2.2.2 modelr 0.1.8 munsell 0.5.0
nlme 3.1 – 150 nnet 7.3–14 numDeriv 2016.8-1.1
openssl 1.4.3 parallel 3.6.3 pillar 1.4.6
пкгбуилд 1.1.0 pkgconfig 2.0.3 пкглоад 1.1.0
plogr 0.2.0 plyr 1.8.6 praise 1.0.0
prettyunits 1.1.1 pROC 1.16.2 processx 3.4.4
prodlim 2019.11.13 progress 1.2.2 обеща 1.1.1
proto 1.0.0 ps 1.4.0 purrr 0.3.4
r2d3 0.2.3 R6 2.5.0 randomForest 4.6-14
rappdirs 0.3.1 ркмдчекк 1.3.3 RColorBrewer 1.1–2
Rcpp 1.0.5 readr 1.4.0 readxl 1.3.1
recipes 0.1.14 rematch 1.0.1 rematch2 2.1.2
удаленными ветвями 2.2.0 reprex 0.3.0 reshape2 1.4.4
rex 1.2.0 rjson 0.2.20 rlang 0.4.8
rmarkdown 2.5 RODBC 1.3 — 16 roxygen2 7.1.1
rpart 4.1-15 rprojroot 1.3–2 рсерве 1,8 – 7
RSQLite 2.2.1 rstudioapi 0,11 рверсионс 2.0.2
rvest 0.3.6 scales 1.1.1 selectr 0.4–2
sessioninfo 1.1.1 shape 1.4.4 shiny 1.5.0
sourcetools 0.1.7 sparklyr 1.4.0 SparkR 3.0.0
spatial 7.3–11 splines 3.6.3 sqldf 0.4–11
SQUAREM 2020,5 stats 3.6.3 stats4 3.6.3
stringi 1.5.3 stringr 1.4.0 survival 3.2 — 7
sys 3.4 tcltk 3.6.3 TeachingDemos 2,10
testthat 3.0.0 tibble 3.0.4 tidyr 1.1.2
tidyselect 1.1.0 tidyverse 1.3.0 timeDate 3043.102
tinytex 0,27 средства 3.6.3 усесис 1.6.3
utf8 1.1.4 utils 3.6.3 uuid 0.1–4
vctrs 0.3.4 viridisLite 0.3.0 валдо 0.2.2
whisker 0,4 withr 2.3.0 xfun 0,19
xml2 1.3.2 XOPEN 1.0.0 xtable 1.8-4
yaml 2.2.1

Установленные библиотеки Java и Scala (версия кластера Scala 2,12)

Идентификатор группы. Идентификатор артефакта Версия
ANTLR ANTLR 2.7.7
com. амазонавс Amazon-Кинесис-Client 1.12.0
com. амазонавс AWS-Java-SDK — Автомасштабирование 1.11.655
com. амазонавс AWS-Java-SDK-cloudformation 1.11.655
com. амазонавс AWS-Java-SDK-клаудфронт 1.11.655
com. амазонавс AWS-Java-SDK-клаудхсм 1.11.655
com. амазонавс AWS-Java-SDK-клаудсеарч 1.11.655
com. амазонавс AWS-Java-SDK-клаудтраил 1.11.655
com. амазонавс AWS-Java-SDK-cloudwatch 1.11.655
com. амазонавс AWS-Java-SDK-клаудватчметрикс 1.11.655
com. амазонавс AWS-Java-SDK-кодедеплой 1.11.655
com. амазонавс AWS-Java-SDK-когнитоидентити 1.11.655
com. амазонавс AWS-Java-SDK-когнитосинк 1.11.655
com. амазонавс AWS-Java-SDK-config 1.11.655
com. амазонавс AWS-Java-SDK-Core 1.11.655
com. амазонавс AWS-Java-SDK-конвейер 1.11.655
com. амазонавс AWS-Java-SDK-директконнект 1.11.655
com. амазонавс AWS-Java-SDK-каталог 1.11.655
com. амазонавс AWS-Java-SDK-dynamodb 1.11.655
com. амазонавс AWS-Java-SDK-EC2 1.11.655
com. амазонавс AWS-Java-SDK — ECS 1.11.655
com. амазонавс AWS-Java-SDK-EFS 1.11.655
com. амазонавс AWS-Java-SDK-еластикаче 1.11.655
com. амазонавс AWS-Java-SDK-еластикбеансталк 1.11.655
com. амазонавс AWS-Java-SDK-еластиклоадбаланЦинг 1.11.655
com. амазонавс AWS-Java-SDK-еластиктранскодер 1.11.655
com. амазонавс AWS-Java-SDK-EMR 1.11.655
com. амазонавс AWS-Java-SDK-Glacier 1.11.655
com. амазонавс AWS-Java-SDK-IAM 1.11.655
com. амазонавс AWS-Java-SDK-ImportExport 1.11.655
com. амазонавс AWS-Java-SDK-Кинесис 1.11.655
com. амазонавс AWS-Java-SDK — KMS 1.11.655
com. амазонавс AWS-Java-SDK-лямбда 1.11.655
com. амазонавс AWS-Java-SDK — журналы 1.11.655
com. амазонавс AWS-Java-SDK-machinelearning 1.11.655
com. амазонавс AWS-Java-SDK-опсворкс 1.11.655
com. амазонавс AWS-Java-SDK — RDS 1.11.655
com. амазонавс AWS-Java-SDK-RedShift 1.11.655
com. амазонавс AWS-Java-SDK-route53 1.11.655
com. амазонавс AWS-Java-SDK-S3 1.11.655
com. амазонавс AWS-Java-SDK-SES 1.11.655
com. амазонавс AWS-Java-SDK-SimpleDB 1.11.655
com. амазонавс AWS-Java-SDK-симплеворкфлов 1.11.655
com. амазонавс AWS-Java-SDK-SNS 1.11.655
com. амазонавс AWS-Java-SDK-СКС 1.11.655
com. амазонавс AWS-Java-SDK-SSM 1.11.655
com. амазонавс AWS-Java-SDK-сторажегатевай 1.11.655
com. амазонавс AWS-Java-SDK — STS 1.11.655
com. амазонавс AWS-Java-SDK-поддержка 1.11.655
com. амазонавс AWS-Java-SDK-SWF-библиотеки 1.11.22
com. амазонавс AWS-Java-SDK — рабочие области 1.11.655
com. амазонавс jmespath — Java 1.11.655
com. чуусаи shapeless_2.12 2.3.3
com. клеарспринг. Analytics поток 2.9.6
com. кирпичные рсерве 1.8 – 3
com. кирпичные jets3t 0.7.1-0
com. скалапб. compilerplugin_2.12 0.4.15-10
com. скалапб. скалапб-runtime_2.12 0.4.15-10
com. есотериксофтваре Kryo-затененный 4.0.2
com. есотериксофтваре минлог 1.3.0
com. фастерксмл классмате 1.3.4
com. фастерксмл. Jackson. Core Jackson-аннотации 2.10.0
com. фастерксмл. Jackson. Core Jackson-Core 2.10.0
com. фастерксмл. Jackson. Core Jackson-DataBind 2.10.0
com. фастерксмл. Jackson. формат. Jackson-кбор 2.10.0
com. фастерксмл. Jackson. DataType Jackson-DataType-Жода 2.10.0
com. фастерксмл. Jackson. Module Jackson-имя модуля 2.10.0
com. фастерксмл. Jackson. Module Jackson-Module-scala_2.12 2.10.0
com. GitHub. Бен-Манес. каффеине каффеине 2.3.4
com. GitHub. фоммил жнилоадер 1.1
com. GitHub. фоммил. Библиотека netlib core 1.1.2
com. GitHub. фоммил. Библиотека netlib native_ref — Java 1.1
com. GitHub. фоммил. Библиотека netlib native_ref-Java-Native 1.1
com. GitHub. фоммил. Библиотека netlib native_system — Java 1.1
com. GitHub. фоммил. Библиотека netlib native_system-Java-Native 1.1
com. GitHub. фоммил. Библиотека netlib Библиотека netlib-native_ref-Linux-x86_64-собственные 1.1
com. GitHub. фоммил. Библиотека netlib Библиотека netlib-native_system-Linux-x86_64-собственные 1.1
com. GitHub. жошелсер дропвизард — метрики — Hadoop-metrics2-Reporter 0.1.2
com. GitHub. Лубен зстд — JNI 1.4.4-3
com. GitHub. вендикиерп жтрансформс 3.1
com. Google. Code. FindBugs jsr305 3.0.0
com. Google. Code. gson gson 2.2.4
com. Google. флатбуфферс флатбуфферс — Java 1.9.0
com. Google. гуава гуава 15.0
com. Google. protobuf protobuf — Java 2.6.1
com. h2database H2 1.4.195
com. хелжер профилировщик 1.1.1
com. жкрафт жсч 0.1.50
com. жолбокс бонекп 0.8.0. RELEASE
com. лихаойи sourcecode_2.12 0.1.9
com. Microsoft. SqlServer MSSQL-JDBC 8.2.1. jre8
com.microsoft.azure Azure-Data-Lake-Store-SDK 2.3.8
com. Нинг Сжатие — лзф 1.0.3
com. Sun. mail javax. mail 1.5.2
com. тдуннинг json 1.8
com. ThoughtWorks. имя paranamer 2.8
com. труеаккорд. lenses lenses_2.12 0.4.12
com. Twitter подогрева — Java 0.9.5
com. Twitter chill_2.12 0.9.5
com. Twitter util-app_2.12 7.1.0
com. Twitter util-core_2.12 7.1.0
com. Twitter util-function_2.12 7.1.0
com. Twitter util-jvm_2.12 7.1.0
com. Twitter util-lint_2.12 7.1.0
com. Twitter util-registry_2.12 7.1.0
com. Twitter util-stats_2.12 7.1.0
com. типесафе config 1.2.1
com. типесафе. Scala — ведение журнала Scala-logging_2.12 3.7.2
com. унивоЦити унивоЦити-парсеры 2.9.0
com. заксксер HikariCP 3.1.0
Commons Attribution — беанутилс Commons Attribution — беанутилс 1.9.4
Commons Attribution-CLI Commons Attribution-CLI 1.2
файла Commons-Codec файла Commons-Codec 1,10
Commons Attribution — коллекции Commons Attribution — коллекции 3.2.2
Commons Attribution — конфигурация Commons Attribution — конфигурация 1.6
commons-dbcp commons-dbcp 1.4
Commons Attribution — дайджест Commons Attribution — дайджест 1.8
Commons Attribution — FileUpload Commons Attribution — FileUpload 1.3.3
Commons Attribution — HttpClient Commons Attribution — HttpClient 3.1
Commons Attribution-IO Commons Attribution-IO 2.4
Commons Attribution-lang Commons Attribution-lang 2.6
Commons Attribution — ведение журнала Commons Attribution — ведение журнала 1.1.3
Commons Attribution-NET Commons Attribution-NET 3.1
Commons Attribution — пул Commons Attribution — пул 1.5.4
info. ganglia. gmetric4j gmetric4j 1.0.10
IO. аирлифт аиркомпрессор 0,10
IO. дропвизард. метрики метрики — ядро 4.1.1
IO. дропвизард. метрики метрики — GRAPHITE 4.1.1
IO. дропвизард. метрики метрики — healthchecks 4.1.1
IO. дропвизард. метрики метрики — jetty9 4.1.1
IO. дропвизард. метрики метрики — JMX 4.1.1
IO. дропвизард. метрики метрики — JSON 4.1.1
IO. дропвизард. метрики метрики — виртуальной машины Java 4.1.1
IO. дропвизард. метрики метрики — сервлеты 4.1.1
IO. NETTY NETTY — все 4.1.47. Final
IO. Prometheus симплеклиент 0.7.0
IO. Prometheus simpleclient_common 0.7.0
IO. Prometheus simpleclient_dropwizard 0.7.0
IO. Prometheus simpleclient_pushgateway 0.7.0
IO. Prometheus simpleclient_servlet 0.7.0
IO. Prometheus. JMX сборщик 0.12.0
Джакарта. Аннотация Джакарта. Аннотация — API 1.3.5
Джакарта. Проверка Джакарта. Validation — API 2.0.2
jakarta.ws.rs jakarta.ws.rs — API 2.1.6
javax. Activation activation 1.1.1
javax. El javax. El-API 2.2.4
javax. Ждо jdo-api 3.0.1
javax. сервлета javax. сервлета — API 3.1.0
javax.servlet.jsp JSP — API 2.1
javax. Transaction jta 1.1
javax. Transaction API транзакции 1.1
javax.xml. Bind jaxb-api 2.2.2
javax.xml. Stream stax-api 1,0 – 2
javolution javolution 5.5.1
жлине жлине 2.14.6
Жода — время Жода — время 2.10.5
log4j Apache-log4j — дополнительные возможности 1.2.17
log4j log4j 1.2.17
NET. разорвине пиролите 4,30
NET. SF. жпам jpam 1.1
NET. SF. опенксв опенксв 2.3
NET. SF. суперксв супер-CSV 2.2.0
NET. Снежинка снежинка — прием-пакет SDK 0.9.6
NET. Снежинка снежинки — JDBC 3.12.8
NET. Снежинка Spark-snowflake_2.12 2.8.1-spark_3.0
NET. sourceforge. f2j arpack_combined_all 0.1
org. акплт. ремотетеа ремотетеа — онкрпк 1.1.2
org. ANTLR ST4 4.0.4
org. ANTLR ANTLR-Runtime 3.5.2
org. ANTLR antlr4-Runtime 4.7.1
org. ANTLR stringtemplate 3.2.1
org. Apache. Ant ant 1.9.2
org. Apache. Ant Ant — жсч 1.9.2
org. Apache. Ant ant-launcher 1.9.2
org. Apache. стрелка формат стрелки 0.15.1
org. Apache. стрелка стрелка — память 0.15.1
org. Apache. стрелка стрелка — вектор 0.15.1
org. Apache. Avro avro 1.8.2
org. Apache. Avro Avro — IPC 1.8.2
org. Apache. Avro Avro — mapred — hadoop2 1.8.2
org. Apache. Commons Attribution Commons Attribution — сжатие 1.8.1
org. Apache. Commons Attribution Commons Attribution — шифрование 1.0.0
org. Apache. Commons Attribution Commons Attribution — lang3 3.9
org. Apache. Commons Attribution commons-math3 3.4.1
org. Apache. Commons Attribution Commons Attribution — текст 1.6
org. Apache. пленку пленку — клиент 2.7.1
org. Apache. пленку пленку — платформа 2.7.1
org. Apache. пленку пленку-рецепты 2.7.1
org. Apache. Дерби дерби 10.12.1.1
org. Apache. Directory. API API-ASN1-API 1.0.0 — M20
org. Apache. Directory. API API-util 1.0.0 — M20
org. Apache. Directory. Server апачедс — i18n 2.0.0 — M15
org. Apache. Directory. Server апачедс-Kerberos-кодек 2.0.0 — M15
org. Apache. Hadoop Hadoop — аннотации 2.7.4
org. Apache. Hadoop Hadoop — проверка подлинности 2.7.4
org. Apache. Hadoop Hadoop — клиент 2.7.4
org. Apache. Hadoop Hadoop — общие 2.7.4
org. Apache. Hadoop Hadoop-HDFS 2.7.4
org. Apache. Hadoop Hadoop-MapReduce-Client-App 2.7.4
org. Apache. Hadoop Hadoop-MapReduce-Client-Common 2.7.4
org. Apache. Hadoop Hadoop-MapReduce-Client-Core 2.7.4
org. Apache. Hadoop Hadoop-MapReduce-Client-жобклиент 2.7.4
org. Apache. Hadoop Hadoop-MapReduce-Client-случайный выбор 2.7.4
org. Apache. Hadoop Hadoop-Yarn — API 2.7.4
org. Apache. Hadoop Hadoop-Yarn — клиент 2.7.4
org. Apache. Hadoop Hadoop-Yarn-Common 2.7.4
org. Apache. Hadoop Hadoop-Yarn-Server-Common 2.7.4
org. Apache. Hive Hive — Beeline 2.3.7
org. Apache. Hive Hive-CLI 2.3.7
org. Apache. Hive Hive — общий 2.3.7
org. Apache. Hive Hive — Exec-Core 2.3.7
org. Apache. Hive Hive — JDBC 2.3.7
org. Apache. Hive Hive-llap — клиент 2.3.7
org. Apache. Hive Hive-llap — Common 2.3.7
org. Apache. Hive Hive — хранилище метаданных 2.3.7
org. Apache. Hive Hive — serde 2.3.7
org. Apache. Hive оболочки Hive 2.3.7
org. Apache. Hive Hive — хранилище — API 2.7.1
org. Apache. Hive Hive — Vector — код — Gen 2.3.7
org. Apache. Hive. оболочки оболочка Hive — оболочки — 0,23 2.3.7
org. Apache. Hive. оболочки Hive-оболочки — общие 2.3.7
org. Apache. Hive. оболочки Hive-оболочки — планировщик 2.3.7
org. Apache. хтраце хтраце-Core 3.1.0 — инкубация
org. Apache. хттпкомпонентс HttpClient 4.5.6
org. Apache. хттпкомпонентс хттпкоре 4.4.12
org. Apache. Ivy ivy 2.4.0
org. Apache. Mesos Mesos-с тенью — protobuf 1.4.0
org. Apache. ORC ORC-Core 1.5.10
org. Apache. ORC ORC-MapReduce 1.5.10
org. Apache. ORC ORC-оболочки 1.5.10
org. Apache. Parquet Parquet — столбец 1.10.1 — databricks6
org. Apache. Parquet Parquet — общие 1.10.1 — databricks6
org. Apache. Parquet Parquet-кодирование 1.10.1 — databricks6
org. Apache. Parquet Parquet-формат 2.4.0
org. Apache. Parquet Parquet-Hadoop 1.10.1 — databricks6
org. Apache. Parquet Parquet — Jackson 1.10.1 — databricks6
org. Apache. Thrift libfb303 0.9.3
org. Apache. Thrift либсрифт 0.12.0
org. Apache. скорость скорость 1.5
org. Apache. ксбеан ксбеан-asm7-с тенью 4.15
org. Apache. етус заметки аудитории 0.5.0
org. Apache. Zookeeper Zookeeper 3.4.14
org. Codehaus. Jackson Jackson-Core-АСЛ 1.9.13
org. Codehaus. Jackson Jackson — жаксрс 1.9.13
org. Codehaus. Jackson Jackson-сопоставитель-АСЛ 1.9.13
org. Codehaus. Jackson Jackson — КСК 1.9.13
org. Codehaus. жанино commons-compiler 3.0.16
org. Codehaus. жанино janino 3.0.16
org. датануклеус датануклеус-API-Ждо 4.2.4
org. датануклеус датануклеус-Core 4.1.17
org. датануклеус датануклеус-РСУБД 4.1.19
org. датануклеус javax. Ждо 3.2.0-m3
org. Eclipse. Jetty Jetty — клиент 9.4.18. v20190429
org. Eclipse. Jetty Jetty — продолжение 9.4.18. v20190429
org. Eclipse. Jetty Jetty-HTTP 9.4.18. v20190429
org. Eclipse. Jetty Jetty-IO 9.4.18. v20190429
org. Eclipse. Jetty Jetty — JNDI 9.4.18. v20190429
org. Eclipse. Jetty Jetty-Plus 9.4.18. v20190429
org. Eclipse. Jetty Jetty — прокси 9.4.18. v20190429
org. Eclipse. Jetty Jetty — безопасность 9.4.18. v20190429
org. Eclipse. Jetty Jetty — сервер 9.4.18. v20190429
org. Eclipse. Jetty Jetty — сервлета 9.4.18. v20190429
org. Eclipse. Jetty Jetty — сервлеты 9.4.18. v20190429
org. Eclipse. Jetty Jetty-util 9.4.18. v20190429
org. Eclipse. Jetty Jetty — webapp 9.4.18. v20190429
org. Eclipse. Jetty Jetty-XML 9.4.18. v20190429
org. фусесаурце. левелдбжни leveldbjni-all 1.8
org. GlassFish. hk2 hk2 — API 2.6.1
org. GlassFish. hk2 hk2-Локатор 2.6.1
org. GlassFish. hk2 hk2-utils 2.6.1
org. GlassFish. hk2 OSGi-Resource-Locator 1.0.3
org. GlassFish. hk2. external аопаллианце — переупаковано 2.6.1
org. GlassFish. hk2. external Джакарта. внедрить 2.6.1
org. GlassFish. Джерси. Containers Джерси — контейнер — сервлета 2,30
org. GlassFish. Джерси. Containers Джерси — контейнер — сервлета — Core 2,30
org. GlassFish. Джерси. Core jersey-client 2,30
org. GlassFish. Джерси. Core Джерси — общие 2,30
org. GlassFish. Джерси. Core Джерси — сервер 2,30
org. GlassFish. Джерси. Вставка Джерси — hk2 2,30
org. GlassFish. Джерси. Media Джерси-Media-жаксб 2,30
org. Гибернация. проверяющий элемент управления режим гибернации — проверяющий элемент управления 6.1.0. Final
org. жавассист жавассист 3.25.0-GA
org. JBoss. ведение журнала JBoss — ведение журнала 3.3.2. Final
org. ждби ждби 2.63.1
org. Жода Жода — преобразование 1.7
org. жодд жодд-Core 3.5.2
org.json4s json4s-ast_2.12 3.6.6
org.json4s json4s-core_2.12 3.6.6
org.json4s json4s-jackson_2.12 3.6.6
org.json4s json4s-scalap_2.12 3.6.6
org. lz4 lz4 — Java 1.7.1
org. MariaDB. JDBC MariaDB-Java-Client 2.1.2
org. обженесис обженесис 2.5.1
org. PostgreSQL postgresql 42.1.4
org. роарингбитмап роарингбитмап 0.7.45
org. роарингбитмап оболочек совместимости 0.7.45
org. рокксдб рокксдбжни 6.2.2
org. росуда. Ренгине ренгине 2.1.0
org. Scala-lang Scala-compiler_2.12 2.12.10
org. Scala-lang Scala-library_2.12 2.12.10
org. Scala-lang Scala-reflect_2.12 2.12.10
org. Scala-lang. modules Scala-Collection-compat_2.12 2.1.1
org. Scala-lang. modules Scala-Parser-combinators_2.12 1.1.2
org. Scala-lang. modules Scala-xml_2.12 1.2.0
org. Scala — SBT тестовый интерфейс 1,0
org. скалачекк scalacheck_2.12 1.14.2
org. скалактик scalactic_2.12 3.0.8
org. скаланлп с-macros_2.12 1,0
org. скаланлп breeze_2.12 1,0
org. скалатест scalatest_2.12 3.0.8
org. slf4j жкл-over-slf4j 1.7.30
org. slf4j jul-to-slf4j 1.7.30
org. slf4j slf4j — API 1.7.30
org. slf4j slf4j — log4j12 1.7.30
org. Spark-Project. Spark unused 1.0.0
org. спрингфрамеворк пружинное ядро 4.1.4. RELEASE
org. спрингфрамеворк Пружинный тест 4.1.4. RELEASE
org. сритен сритен — дополнительный 1.5.0
org. тукаани ксз 1.5
org. типелевел algebra_2.12 2.0.0-m2
org. типелевел кошки — kernel_2.12 2.0.0 — M4
org. типелевел machinist_2.12 0.6.8
org. типелевел макрос — compat_2.12 1.1.1
org. типелевел Спире-macros_2.12 0.17.0-M1
org. типелевел Спире-platform_2.12 0.17.0-M1
org. типелевел Спире-util_2.12 0.17.0-M1
org. типелевел spire_2.12 0.17.0-M1
org. вилдфли. OpenSSL вилдфли-OpenSSL 1.0.7. Final
org. ксериал SQLite-JDBC 3.8.11.2
org. ксериал. привязка snappy-java 1.1.7.5
org. YAML снакэйамл 1,24
Оро Оро 2.0.8
PL. edu. ICM жларжеаррайс 1.5
программное обеспечение. Amazon. литий литий-Java 1.0.2
StAX stax-api 1.0.1
ксмленк ксмленк 0,52