Databricks Runtime 8.1

Databricks divulgou esta imagem em março de 2021.

As seguintes notas de lançamento fornecem informações sobre databricks Runtime 8.1, alimentado por Apache Spark 3.1.1.

Novas funcionalidades e melhorias

Novos operadores SQL reduzem complexo ETL nas cordas JSON

Dois novos operadores SQL :: permitem : extrair facilmente dados das cordas JSON.

  • Para lançar a sua expressão a um tipo de dados, utilize um cólon :: duplo. Por exemplo, em vez de especificar cast(col as int) , pode agora dizer col::int .
  • Para extrair campos de dados semi-estruturados, utilize um único : cólon. Se tiver uma STRING coluna que contenha dados JSON, pode extrair um campo dessa corda JSON utilizando a sintaxe <json-column>:<field> que extrai a chave do seu field JSON como um <json-column> STRING . Pode combinar isto com a :: sintaxe para lançar os dados a um tipo específico.

Por exemplo, se tiver os dados do JSON:

{
  "store":{
    "bicycle":{
      "price":19.95,
      "color":"red"
    }
  }
}

e cria uma tabela store_data a partir dos dados:

CREATE TABLE store_data AS SELECT
'{
   "store":{
      "bicycle":{
        "price":19.95,
        "color":"red"
      }
    }
 }' as raw

A declaração SELECT raw:store.bicycle.price::double FROM store_data devolve:

+--------+
| price  |
+--------+
| 19.95  |
+--------+

Para mais detalhes, consulte os dados semi-estruturados da Consulta em SQL.

Controle a visibilidade das listas de controlo de acesso à mesa

Para evitar fugas de informação, enumerando todas as permissões definidas numa tabela, só pode executar SHOW GRANTS [<user>] <object> a declaração se estiver:

  • Um administrador SQL da Databricks ou o proprietário de <object> .
  • O utilizador especificado em [<user>] .

Novas opções de Carregamento Automático permitem um melhor desempenho

O Auto Loader suporta agora uma nova opção cloudFiles.fetchParallelism para especificar o paralelismo para recolher mensagens do serviço de fila.

Ver Configuração do Carregador Automático.

Autenticar para Azure Synapse Analytics com OAuth 2.0 e um diretor de serviço (Visualização pública)

O conector Azure Synapse Analytics suporta agora a autenticação com o OAuth 2.0 e um diretor de serviço Azure Ative, permitindo aplicações que requerem autenticação com um principal de serviço em vez de um nome de utilizador e senha. Para saber mais, consulte autenticação para o conector Azure Synapse Analytics.

Insira manualmente IDENTITY colunas em tabelas Azure Synapse Analytics

O conector Azure Synapse Analytics suporta agora explicitamente inserir valores IDENTITY em colunas nas tabelas Azure Synapse Analytics com base nos valores definidos nos DataFrames. Esta capacidade é suportada para inserções de lote e streaming e permite a utilização de casos que exijam valores de IDENTITY colunas personalizadas. Para mais detalhes, consulte o identityInsert parâmetro na Configuraçãodo conector Azure Synapse Analytics .

Azure Auto Loader agora suporta a autenticação com um diretor de serviço para operações de fila

Agora pode autenticar com um diretor de serviço Azure Ative Directory que concede permissões relacionadas com a fila para operações de fila com o Auto Loader. Esta alteração elimina o requisito anterior de utilizar uma cadeia de ligação para operações de fila e um principal de serviço para operações de eventos e permite-lhe utilizar um principal de serviço para ambos os tipos de operação. Para mais detalhes, consulte permissões.

Progresso do fluxo de pista com métricas kafka

A fonte de streaming kafka informa agora quantas compensações um consumidor está a ficar para trás do mais recente após cada lote. Pode usar estas métricas para acompanhar o progresso do fluxo. Para mais detalhes sobre como ver as métricas, consulte métricas.

Track stream progresso com métricas de fonte de streaming Delta Lake

Uma fonte de streaming do Delta Lake relata agora o tamanho do atraso e quantos ficheiros existem no atraso após cada lote. Pode usar estas métricas para acompanhar o progresso do fluxo. Para mais detalhes sobre como ver as métricas, consulte métricas.

Atualizações da biblioteca

  • Biblioteca Python atualizada:
    • Koalas atualizado de 1.5.0 para 1.6.0.
  • Bibliotecas Python recentemente instaladas:
    • plotly 4.14.3
    • re-agem 1.3.3
  • R atualizado para 4.0.4 de 4.0.3.
  • Atualizou várias bibliotecas R instaladas. Ver Bibliotecas R instaladas.
  • Biblioteca java melhorada:
    • molhe de 9.4.34.v20201102 a 9.4.36.v20210114
  • Construção OpenJDK 8 atualizada para Zulu 8.52.0.23-CA-linux64 (construção 1.8.0_282-b08)

Faísca Apache

Databricks Runtime 8.1 inclui Apache Spark 3.1.1. Esta versão inclui todas as correções e melhorias da Spark incluídas no Databricks Runtime 8.0,bem como as seguintes correções adicionais de bugs e melhorias feitas à Spark:

  • [SPARK-34534] Corrija a ordem de bloqueios quando utilizar o FetchShuffleBlocks para ir buscar blocos
  • [SPARK-34613] [SQL] A vista de correção não captura desativar a sugestão config
  • [SPARK-34392] [SQL] Support ZoneOffset +h:mm in DateTimeUtils. getZoneId
  • [SPARK-34436] [SQL] DPP suporte COMO QUALQUER/QUALQUER expressão
  • [SPARK-34497] [SQL] Fix fornecedores de conexão JDBC incorporados para restaurar as alterações de contexto de segurança JVM
  • [SPARK-34543] [SQL] Respeite o spark.sql.caseSensitive config enquanto resolve a especificação de partição em v1 SET LOCATION
  • [SPARK-34550] [SQL] Ignore o valor nulo durante o filtro push para a metásta da Colmeia
  • [SPARK-34531] [CORE] Remove API Experimental tag in PrometheusServlet

Atualizações de manutenção

Consulte as atualizações de manutenção do Databricks Runtime 8.1.

Ambiente do sistema

  • Sistema Operativo: Ubuntu 18.04.5 LTS
  • Java: Zulu 8.52.0.23-CA-linux64 (construção 1.8.0_282-b08)
  • Scala: 2.12.10
  • Python: 3.8.8 (atualizado a partir de 3.8.6 em 18 de maio de 2021 atualização de manutenção)
  • R: Versão R 4.0.4 (2021-02-15)
  • Delta Lake 0.8.0

Bibliotecas python instaladas

Biblioteca Versão Biblioteca Versão Biblioteca Versão
appdirs 1.4.4 asn1crypto 1.4.0 backcall 0.2.0
boto3 1.16.7 botocore 1.19.7 brotlipy 0.7.0
certificado 2020.12.5 cffi 1.14.3 cari de contradeta 3.0.4
criptografia 3.1.1 ciclor 0.10.0 Rio Cython 0.29.21
decorador 4.4.2 distlib 0.3.1 docutils 0.15.2
pontos de entrada 0.3 filelock 3.0.12 idna 2,10
ipykernel 5.3.4 ipython 7.19.0 ipython-genutils 0.2.0
jedi 0.17.2 jmespath 0.10.0 joblib 0.17.0
jupyter-cliente 6.1.7 jupyter-core 4.6.3 kiwisolver 1.3.0
koalas 1.6.0 matplotlib 3.2.2 numpy 1.19.2
pandas 1.1.3 parso 0.7.0 Patsy 0.5.1
pexpect 4.8.0 pickleshare 0.7.5 pip 20.2.4
plotly 4.14.3 kit de ferramentas de pronta 3.0.8 psycopg2 2.8.5
ptyprocess 0.6.0 pyarrow 1.0.1 pycparser 2.20
Pigmeus 2.7.2 pyOpenSSL 19.1.0 pyparsing 2.4.7
PySocks 1.7.1 python-dateutil 2.8.1 pytz 2020.5
pyzmq 19.0.2 pedidos 2.24.0 retagem 1.3.3
s3transfer 0.3.4 scikit-learn 0.23.2 scipy 1.5.2
nascidos no mar 0.10.0 armações de configuração 50.3.1 Seis 1.15.0
statsmodels 0.12.0 threadpoolctl 2.1.0 tornado 6.0.4
traços 5.0.5 urllib3 1.25.11 virtualenv 20.2.1
wcwidth 0.2.5 roda 0.35.1

Bibliotecas R instaladas

As bibliotecas R são instaladas a partir do instantâneo microsoft CRAN em 2020-11-02.

Biblioteca Versão Biblioteca Versão Biblioteca Versão
askpass 1.1 assertthat 0.2.1 backports 1.2.1
base 4.0.4 base64enc 0.1-3 BH 1.72.0-3
bit 4.0.4 bit64 4.0.5 blob 1.2.1
boot 1.3-27 brew 1.0-6 brio 1.1.0
broom 0.7.2 callr 3.5.1 acento circunflexo 6.0-86
cellranger 1.1.0 chron 2.3-56 classe 7.3-18
cli 2.2.0 clipr 0.7.1 cluster 2.1.1
codetools 0.2-18 colorspace 2.0-0 commonmark 1.7
compiler 4.0.4 config 0.3 covr 3.5.1
cpp11 0.2.4 crayon 1.3.4 credenciais 1.3.0
crosstalk 1.1.0.1 curl 4.3 data.table 1.13.4
conjuntos de dados 4.0.4 DBI 1.1.0 dbplyr 2.0.0
desc 1.2.0 devtools 2.3.2 diffobj 0.3.2
digest 0.6.27 dplyr 1.0.2 DT 0.16
ellipsis 0.3.1 evaluate 0.14 fansi 0.4.1
farver 2.0.3 fastmap 1.0.1 forcats 0.5.0
foreach 1.5.1 foreign 0.8-81 forjar 0.2.0
fs 1.5.0 futuro 1.21.0 genéricos 0.1.0
gert 1.0.2 ggplot2 3.3.2 gh 1.2.0
gitcreds 0.1.1 glmnet 4.0-2 globais 0.14.0
glue 1.4.2 gower 0.2.2 gráficos 4.0.4
grDevices 4.0.4 grid 4.0.4 gridExtra 2.3
gsubfn 0.7 gtable 0.3.0 haven 2.3.1
highr 0,8 hms 0.5.3 htmltools 0.5.0
htmlwidgets 1.5.3 httpuv 1.5.4 httr 1.4.2
hwriter 1.3.2 hwriterPlus 1.0-3 ini 0.3.1
ipred 0.9-9 isoband 0.2.3 iterators 1.0.13
jsonlite 1.7.2 KernSmooth 2.23-18 knitr 1.30
labeling 0.4.2 mais tarde 1.1.0.1 lattice 0.20-41
lava 1.6.8.1 lazyeval 0.2.2 ciclo de vida 0.2.0
ouvir 0.8.0 lubridate 1.7.9.2 magrittr 2.0.1
markdown 1.1 MASS 7.3-53.1 Matriz 1.3-2
memoise 1.1.0 methods 4.0.4 mgcv 1.8-33
mime 0,9 ModelMetrics 1.2.2.2 modelr 0.1.8
munsell 0.5.0 nlme 3.1-152 nnet 7.3-15
numDeriv 2016.8-1.1 openssl 1.4.3 parallel 4.0.4
paralelamente 1.22.0 pillar 1.4.7 pkgbuild 1.1.0
pkgconfig 2.0.3 pkg carga 1.1.0 plogr 0.2.0
plyr 1.8.6 praise 1.0.0 prettyunits 1.1.1
pROC 1.16.2 processx 3.4.5 prodlim 2019.11.13
progress 1.2.2 promessas 1.1.1 proto 1.0.0
ps 1.5.0 purrr 0.3.4 r2d3 0.2.3
R6 2.5.0 randomForest 4.6-14 rappdirs 0.3.1
rcmdcheck 1.3.3 RColorBrewer 1.1-2 Rcpp 1.0.5
readr 1.4.0 readxl 1.3.1 recipes 0.1.15
rematch 1.0.1 desforra2 2.1.2 remotos 2.2.0
reprex 0.3.0 reshape2 1.4.4 rex 1.2.0
rlang 0.4.9 rmarkdown 2,6 RODBC 1.3-17
roxygen2 7.1.1 rpart 4.1-15 rprojroot 2.0.2
Rio Rserve 1.8-7 RSQLite 2.2.1 rstudioapi 0.13
rversões 2.0.2 rvest 0.3.6 scales 1.1.1
selectr 0.4-2 sessioninfo 1.1.1 shape 1.4.5
shiny 1.5.0 sourcetools 0.1.7 sparklyr 1.5.2
SparkR 3.1.0 spatial 7.3-11 splines 4.0.4
sqldf 0.4-11 SQUAREM 2020.5 stats 4.0.4
stats4 4.0.4 stringi 1.5.3 stringr 1.4.0
survival 3.2-7 sys 3.4 tcltk 4.0.4
TeachingDemos 2,10 testthat 3.0.0 tibble 3.0.4
tidyr 1.1.2 tidyselect 1.1.0 tidyverse 1.3.0
timeDate 3043.102 tinytex 0.28 tools 4.0.4
usar este 2.0.0 utf8 1.1.4 utils 4.0.4
uuid 0.1-4 vctrs 0.3.5 viridisLite 0.3.0
waldo 0.2.3 whisker 0,4 withr 2.3.0
xfun 0.19 xml2 1.3.2 xopen 1.0.0
xtable 1.8-4 yaml 2.2.1 zip 2.1.1

Bibliotecas instaladas java e scala (versão de cluster Scala 2.12)

ID do Grupo ID de artefacto Versão
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-cliente 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.11.655
com.amazonaws aws-java-sdk-cloudformation 1.11.655
com.amazonaws aws-java-sdk-cloudfront 1.11.655
com.amazonaws aws-java-sdk-cloudhsm 1.11.655
com.amazonaws aws-java-sdk-cloudsearch 1.11.655
com.amazonaws aws-java-sdk-cloudtrail 1.11.655
com.amazonaws aws-java-sdk-cloudwatch 1.11.655
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.11.655
com.amazonaws aws-java-sdk-codedeploy 1.11.655
com.amazonaws aws-java-sdk-cognitoidentity 1.11.655
com.amazonaws aws-java-sdk-cognitosync 1.11.655
com.amazonaws aws-java-sdk-config 1.11.655
com.amazonaws aws-java-sdk-core 1.11.655
com.amazonaws aws-java-sdk-datapipeline 1.11.655
com.amazonaws aws-java-sdk-directconnect 1.11.655
com.amazonaws aws-java-sdk-diretório 1.11.655
com.amazonaws aws-java-sdk-dynamodb 1.11.655
com.amazonaws aws-java-sdk-ec2 1.11.655
com.amazonaws aws-java-sdk-ecs 1.11.655
com.amazonaws aws-java-sdk-efs 1.11.655
com.amazonaws aws-java-sdk-elasticache 1.11.655
com.amazonaws aws-java-sdk-elasticbeanstalk 1.11.655
com.amazonaws aws-java-sdk-elasticloadbalancing 1.11.655
com.amazonaws aws-java-sdk-elastictranscoder 1.11.655
com.amazonaws aws-java-sdk-emr 1.11.655
com.amazonaws aws-java-sdk-glaciar 1.11.655
com.amazonaws aws-java-sdk-iam 1.11.655
com.amazonaws aws-java-sdk-importexport 1.11.655
com.amazonaws aws-java-sdk-kinesis 1.11.655
com.amazonaws aws-java-sdk-kms 1.11.655
com.amazonaws aws-java-sdk-lambda 1.11.655
com.amazonaws aws-java-sdk-logs 1.11.655
com.amazonaws aws-java-sdk-machinelearning 1.11.655
com.amazonaws aws-java-sdk-opsworks 1.11.655
com.amazonaws aws-java-sdk-rds 1.11.655
com.amazonaws aws-java-sdk-redshift 1.11.655
com.amazonaws aws-java-sdk-route53 1.11.655
com.amazonaws aws-java-sdk-s3 1.11.655
com.amazonaws aws-java-sdk-ses 1.11.655
com.amazonaws aws-java-sdk-simpledb 1.11.655
com.amazonaws aws-java-sdk-simpleworkflow 1.11.655
com.amazonaws aws-java-sdk-sns 1.11.655
com.amazonaws aws-java-sdk-sqs 1.11.655
com.amazonaws aws-java-sdk-ssm 1.11.655
com.amazonaws aws-java-sdk-storagegateway 1.11.655
com.amazonaws aws-java-sdk-sts 1.11.655
com.amazonaws aws-java-sdk-support 1.11.655
com.amazonaws aws-java-sdk-swf-bibliotecas 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.11.655
com.amazonaws jmespath-java 1.11.655
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics transmissão 2.9.6
com.databricks Rio Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esoftware kryo-sombreado 4.0.2
com.esoftware minlog 1.3.0
com.fasterxml colega de turma 1.3.4
com.fasterxml.jackson.core jackson-anotações 2.10.0
com.fasterxml.jackson.core jackson-core 2.10.0
com.fasterxml.jackson.core jackson-databind 2.10.0
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.10.0
com.fasterxml.jackson.datatype jackson-datatype-joda 2.10.0
com.fasterxml.jackson.module jackson-módulo-paranamer 2.10.0
com.fasterxml.jackson.module jackson-módulo-scala_2.12 2.10.0
com.github.ben-manes.cafeína cafeína 2.3.4
com.github.fommil jniloader 1.1
com.github.fommil.netlib núcleo 1.1.2
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java-nativos 1.1
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java-nativos 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-nativos 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64-nativos 1.1
com.github.joshelser dropwizard-metrics-hadoop-metrics2-reporter 0.1.2
com.github.luben zstd-jni 1.4.8-1
com.github.wendykierp JTransforms 3,1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.2.4
com.google.flatbuffers flatbuffers-java 1.9.0
com.google.guava goiaba 15,0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 1.4.195
com.helger perfis 1.1.1
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.sqlserver mssql-jdbc 9.2.1.jre8
com.microsoft.azure azure-data-lago-store-sdk 2.3.9
com.ning compress-lzf 1.0.3
com.sun.mail javax.mail 1.5.2
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2,8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.9.5
com.twitter chill_2.12 0.9.5
com.twitter app_2.12 7.1.0
com.twitter core_2.12 7.1.0
com.twitter function_2.12 7.1.0
com.twitter jvm_2.12 7.1.0
com.twitter lint_2.12 7.1.0
com.twitter registry_2.12 7.1.0
com.twitter stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.univocity univocity-parsers 2.9.0
com.zaxxer HikariCP 3.1.0
comuns-beanutils comuns-beanutils 1.9.4
commons-cli commons-cli 1.2
commons-codec commons-codec 1.10
comuns-coleções comuns-coleções 3.2.2
configuração dos comuns configuração dos comuns 1.6
commons-dbcp commons-dbcp 1.4
commons-digester commons-digester 1.8
commons-fileupload commons-fileupload 1.3.3
comuns-httpclient comuns-httpclient 3,1
commons-io commons-io 2,4
commons-lang commons-lang 2,6
registo de comuns registo de comuns 1.1.3
commons-net commons-net 3,1
comuns-pool comuns-pool 1.5.4
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0,10
io.dropwizard.metrics métricas-núcleo 4.1.1
io.dropwizard.metrics métricas-grafite 4.1.1
io.dropwizard.metrics verificações métricas-saúde 4.1.1
io.dropwizard.metrics métricas-jetty9 4.1.1
io.dropwizard.metrics métricas-jmx 4.1.1
io.dropwizard.metrics métricas-json 4.1.1
io.dropwizard.metrics métricas-jvm 4.1.1
io.dropwizard.metrics métricas-servidões 4.1.1
io.netty netty-all 4.1.51.Final
io.prometheus simplescliente 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx colecionador 0.12.0
jakarta.anotação jakarta.annotation-api 1.3.5
jakarta.validação jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.ativação ativação 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.servlet javax.servlet-api 3.1.0
javax.servlet.jsp jsp-api 2.1
javax.transação jta 1.1
javax.transação transação-api 1.1
javax.xml.ligar jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
javolução javolução 5.5.1
jline jline 2.14.6
joda-tempo joda-tempo 2.10.5
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
net.razorvine pirolito 4.30
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake floco de neve-ingest-sdk 0.9.6
net.snowflake floco de neve-jdbc 3.12.8
net.snowflake snowflake_2 faísca.12 2.8.1-spark_3.0
net.sourceforge.f2j arpack_combined_all 0.1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.8-1
org.antlr stringtemplate 3.2.1
org.apache.formiga formiga 1.9.2
org.apache.formiga ant-jsch 1.9.2
org.apache.formiga lança-formigas 1.9.2
org.apache.seta seta-formato 2.0.0
org.apache.seta seta-memória-núcleo 2.0.0
org.apache.seta seta-memória-netty 2.0.0
org.apache.seta seta-vetor 2.0.0
org.apache.avro avro 1.8.2
org.apache.avro avro-ipc 1.8.2
org.apache.avro avro-mapred-hadoop2 1.8.2
org.apache.commons comuns-compress 1.20
org.apache.commons comuns-cripto 1.1.0
org.apache.commons commons-lang3 3.10
org.apache.commons commons-math3 3.4.1
org.apache.commons comuns-texto 1.6
org.apache.curator curador-cliente 2.7.1
org.apache.curator curador-quadro 2.7.1
org.apache.curator curador-receitas 2.7.1
org.apache.derby derby 10.12.1.1
org.apache.direy.api api-asn1-api 1.0.0-M20
org.apache.direy.api api-util 1.0.0-M20
org.apache.directy.server apacheds-i18n 2.0.0-M15
org.apache.directy.server apacheds-kerberos-codec 2.0.0-M15
org.apache.hadoop hadoop-anotações 2.7.4
org.apache.hadoop hadoop-auth 2.7.4
org.apache.hadoop hadoop-cliente 2.7.4
org.apache.hadoop hadoop-comum 2.7.4
org.apache.hadoop hadoop-hdfs 2.7.4
org.apache.hadoop hadoop-mapreduce-cliente-app 2.7.4
org.apache.hadoop hadoop-mapreduce-cliente-comum 2.7.4
org.apache.hadoop hadoop-mapreduce-cliente-core 2.7.4
org.apache.hadoop hadoop-mapreduce-cliente-jobclient 2.7.4
org.apache.hadoop hadoop-mapreduce-cliente-shuffle 2.7.4
org.apache.hadoop hadoop-yarn-api 2.7.4
org.apache.hadoop hadoop-yarn-cliente 2.7.4
org.apache.hadoop hadoop-yarn-comum 2.7.4
org.apache.hadoop hadoop-yarn-servidor-comum 2.7.4
org.apache.hive colmeia-beeline 2.3.7
org.apache.hive colmeia-cli 2.3.7
org.apache.hive colmeia-comum 2.3.7
org.apache.hive colmeia-exec-core 2.3.7
org.apache.hive hive-jdbc 2.3.7
org.apache.hive hive-llap-cliente 2.3.7
org.apache.hive colmeia-llap-comum 2.3.7
org.apache.hive colmeia-metastore 2.3.7
org.apache.hive hive-serde 2.3.7
org.apache.hive colmeia-shims 2.3.7
org.apache.hive colmeia-armazenamento-api 2.7.2
org.apache.hive hive-vector-code-gen 2.3.7
org.apache.hive.shims colmeia-shims-0.23 2.3.7
org.apache.hive.shims colmeia-shims-comum 2.3.7
org.apache.hive.shims hive-shims-scheduler 2.3.7
org.apache.htrace htrace-core 3.1.0 incubação
org.apache.httpcomponents httpclient 4.5.6
org.apache.httpcomponents httpcore 4.4.12
org.apache.ivy hera 2.4.0
org.apache.mesos mesos-sombreado-protobuf 1.4.0
org.apache.orc orc-core 1.5.12
org.apache.orc orc-mapreduce 1.5.12
org.apache.orc orc-shims 1.5.12
org.apache.parquet parquet-coluna 1.10.1-databricks6
org.apache.parquet parquet-comum 1.10.1-databricks6
org.apache.parquet parquet-codificação 1.10.1-databricks6
org.apache.parquet parquet-formato 2.4.0
org.apache.parquet parquet-hadoop 1.10.1-databricks6
org.apache.parquet parquet-jackson 1.10.1-databricks6
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.velocidade velocidade 1.5
org.apache.xbean xbean-asm7-sombreado 4.15
org.apache.yetus anotações de público 0.5.0
org.apache.zookeeper zookeeper 3.4.14
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-jaxrs 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.jackson jackson-xc 1.9.13
org.codehaus.janino compilador de comuns 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-cliente 9.4.36.v20210114
org.eclipse.jetty molhe-continuação 9.4.36.v20210114
org.eclipse.jetty cais-http 9.4.36.v20210114
org.eclipse.jetty jetty-io 9.4.36.v20210114
org.eclipse.jetty jetty-jndi 9.4.36.v20210114
org.eclipse.jetty jetty-plus 9.4.36.v20210114
org.eclipse.jetty jett--se 9.4.36.v20210114
org.eclipse.jetty molhe-segurança 9.4.36.v20210114
org.eclipse.jetty jetty-servidor 9.4.36.v20210114
org.eclipse.jetty jett--- 9.4.36.v20210114
org.eclipse.jetty jett---- 9.4.36.v20210114
org.eclipse.jetty jetty-util 9.4.36.v20210114
org.eclipse.jetty jetty-util-ajax 9.4.36.v20210114
org.eclipse.jetty jetty webapp 9.4.36.v20210114
org.eclipse.jetty jetty-xml 9.4.36.v20210114
org.fusesource.leveldbjni niveladobjni-todos 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-localizador 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-localização de recursos 1.0.3
org.glassfish.hk2.external aopalliance-reembalado 2.6.1
org.glassfish.hk2.external jakarta.injetar 2.6.1
org.glassfish.jersey.containers jersey-contentor-servlet 2.30
org.glassfish.jersey.containers jersey-contentor-servlet-core 2.30
org.glassfish.jersey.core jersey-cliente 2.30
org.glassfish.jersey.core jersey-comum 2.30
org.glassfish.jersey.core jersey-servidor 2.30
org.glassfish.jersey.injetar jersey-hk2 2.30
org.glassfish.jersey.media jersey-media-jaxb 2.30
org.hibernate.validor hibernante-validador 6.1.0.Final
org.javassista javassista 3.25.0-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.joda joda-convertido 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M5
org.json4s json4s-core_2.12 3.7.0-M5
org.json4s json4s-jackson_2.12 3.7.0-M5
org.json4s json4s-scalap_2.12 3.7.0-M5
org.lz4 Lz4-java 1.7.1
org.mariadb.jdbc mariadb-java-cliente 2.1.2
org.objenesis objenese 2.5.1
org.postgresql postgresql 42.1.4
org.roaringbitmap RoaringBitmap 0.9.0
org.roaringbitmap calços 0.9.0
org.rocksdb rocksdbjni 6.2.2
org.rosuda.REngine Rio REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.10
org.scala-lang scala-library_2.12 2.12.10
org.scala-lang scala-reflect_2.12 2.12.10
módulos org.scala-lang scala-coleção-compat_2.12 2.1.1
módulos org.scala-lang scala-parser-combinators_2.12 1.1.2
módulos org.scala-lang scala-xml_2.12 1.2.0
org.scala-sbt interface de teste 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp brisa-macros_2.12 1.0
org.scalanlp breeze_2.12 1.0
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.30
org.slf4j jul-to-slf4j 1.7.30
org.slf4j slf4j-api 1.7.30
org.slf4j slf4j-log4j12 1.7.30
org.spark-project.spark não éused 1.0.0
org.springframework mola-núcleo 4.1.4.RELEASE
org.springframework teste de primavera 4.1.4.RELEASE
org.threeten threeten-extra 1.5.0
org.tukaani xz 1.5
org.typelevel algebra_2.12 2.0.0-M2
org.typelevel gatos-kernel_2.12 2.0.0-M4
org.typelevel machinist_2.12 0.6.8
org.typelevel macro-compat_2.12 1.1.1
org.typelevel spire-macros_2.12 0.17.0-M1
org.typelevel spire-platform_2.12 0.17.0-M1
org.typelevel spire-util_2.12 0.17.0-M1
org.typelevel spire_2.12 0.17.0-M1
org.wildfly.openssl wildfly-openssl 1.0.7.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.8.2
org.yaml snakeyaml 1.24
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1
xmlenco xmlenco 0.52