Databricks Runtime 7.6

Databricks divulgou esta imagem em fevereiro de 2021.

As seguintes notas de lançamento fornecem informações sobre databricks Runtime 7.6, alimentado por Apache Spark 3.0.

Para obter ajuda com a migração de Databricks Runtime 6.x, consulte databricks Runtime 7.x guia de migração.

Novas funcionalidades

Melhor manipulação da evolução do esquema JSON no Carregador Automático

Ao carregar dados JSON, o comportamento padrão é que os campos que não fazem parte do esquema original são silenciosamente largados. Agora com o Carregador Automático, pode definir a opção JSON unparsedDataColumn para especificar o nome de uma coluna, que será usada para armazenar todos os novos campos como uma cadeia JSON. Por exemplo, ao definir

.option("unparsedDataColumn", "_unparsed_data")

o resultado terá uma _unparsed_data coluna, onde novos campos são armazenados como uma corda JSON. Estes novos campos podem ser analisados mais tarde para posterior processamento. Se não houver novos campos, o valor da coluna é null .

Suporte para ler ficheiros sobreescritos em Carregador Automático

Agora pode configurar fluxos para permitir alterações nos ficheiros de diretório de entrada para substituir os dados existentes. Definir .option("cloudFiles.allowOverwrites", "true") . Para mais detalhes, consulte a configuração do Carregador Automático.

Melhorias

Melhor clustering multidimensional e desempenho de salto de dados com OPTIMIZE ZORDER

A OPTIMIZE ZORDER operação utiliza agora, por defeito, curvas de enchimento de espaço Hilbert. Esta abordagem proporciona melhores características de agrupamento do que a ordem Z em dimensões mais elevadas. Para as tabelas Delta usando OPTIMIZE ZORDER com muitas colunas, as curvas de Hilbert podem acelerar as consultas de leitura, ignorando mais dados do que a ordem Z. Para mais detalhes, consulte z-ordering (agrupamento multidimensional).

Melhorias de desempenho para algumas MERGE operações com MATCHED apenas cláusulas

Poderá obter um melhor desempenho em MERGE operações que só tenham MATCHED cláusulas com condições de cláusula.

Tamanhos de ficheiro de afinação automática para MERGE tabelas Delta pesadas (Visualização pública)

As tabelas Delta que são submetidas a MERGE operações repetidas (por exemplo, aumentos contínuos de dados de mudança de nível de linha) reescrevem repetidamente ficheiros para atualizar dados. Estas tabelas podem beneficiar de ficheiros menores do que os produzidos por padrão por operações de layout de dados como OPTIMIZE , Escrita Otimizada e Compactação Automática. Com databricks Runtime 7.6, pode detetar automaticamente MERGE tabelas pesadas e sintonizar tamanhos de ficheiro. Contacte o suporte databricks ou o seu representante databricks para obter mais informações sobre como ativar esta funcionalidade.

Atualizações da biblioteca

  • Bibliotecas python atualizadas:
    • certificado atualizado de 2020.6.20 para 2020.12.5.
    • Koalas atualizado de 1.4.0 para 1.5.0.
    • python-apt atualizado de 1.6.5+ubuntu0.3 para 1.6.5+ubuntu0.4
  • Biblioteca R atualizada:
    • nlme de 3.1-150 a 3.1-151.
  • Biblioteca java melhorada:
    • azure-data-lake-store-sdk atualizado de 2.3.8 para 2.3.9.
  • Construção OpenJDK 8 atualizada para Zulu 8.50.0.51-CA-linux64 (construção 1.8.0_275-b01).

Faísca Apache

Databricks Runtime 7.6 inclui Apache Spark 3.0.1. Esta versão inclui todas as correções e melhorias da Spark incluídas no Databricks Runtime 7.5 (Não suportado), bem como as seguintes correções adicionais de bugs e melhorias feitas à Spark:

  • [SPARK-33740] [SQL]hadoop configs em hive-site.xml pode sobrepor-se a hadoop pré-existentes
  • [SPARK-33822] [SQL] Use o CastSupport.cast método em HashJoin
  • [SPARK-33398] Fixar modelos de árvores de carregamento antes da Faísca 3.0
  • [SPARK-33029] [CORE][WEBUI] Fix to UI executor page incorretamente marcando o controlador como listado
  • [SPARK-34012] [SQL] Mantenha o comportamento consistente quando conf spark.sqllegacy.parser.havingWithoutGroupByAsWhere é verdade com guia de migração
  • [SPARK-33635] [SS] Ajuste a ordem de verificação em KafkaTokenUtil.needTokenUpdate para remediar a regressão perf
  • [SPARK-33900] [WEBUI] Mostrar o tamanho/registos de leitura de shuffle corretamente quando apenas o remotebytesread está disponível
  • [SPARK-33593] [SQL] Leitor de vetor obteve dados incorretos com valor binário de partição
  • [SPARK-31170] [SQL] Spark SQL Cli deve respeitar hive-site.xml e spark.sql.warehouse.dir
  • [SPARK-33853] [SQL] EXPLAIN CODEGEN e BenchmarkQueryTest não mostram código de subquery
  • [SPARK-33786] [SQL] O nível de armazenamento de uma cache deve ser respeitado quando uma nomeação de mesa é alterada.
  • [SPARK-33841] [PROBLEMA CORE] Fix com empregos desaparecendo intermitentemente do SHS sob alta carga
  • [SPARK-33480] [SQL] não expõe os dados dos utilizadores em mensagem de erro
  • [SPARK-33756] [SQL] Make BytesToBytesMpotent
  • [SPARK-33774] [UI][CORE]"Back to Master" devolve 500 erros no cluster autónomo
  • [SPARK-33733] [SQL] PullOutNondeterministic deve verificar e recolher campo determinístico
  • [SPARK-33670] [SQL] Verifique se o fornecedor de partição é Hive em v1 SHOW TABLE EXTENDED
  • [SPARK-33788] [SQL][3.1][2.4] Throw NoSuchPartitionsExcepção da HiveExternalCatalog.dropPartitions()
  • [SPARK-33819] [CORE] SingleFileventLogFileReader/RollingEventLogFileReader deve ser package private
  • [SPARK-33742] [SQL] Throw PartitionsAlreadyExistException from HiveExternalCatalog.createPartitions()
  • [SPARK-32110] [SQL] normalizam números flutuantes especiais em HyperLogLog++
  • [SPARK-33071] [SPARK-33536] [SQL] Não mude o construtor de Alias para não quebrar o conector do floco de neve
  • [SPARK-32680] [SQL] Não preprocesse V2 CTAS com consulta não resolvida
  • [SPARK-33520] [ML][PYSPARK] Cherry-pick: make CrossValidator/TrainValidateSplit/OneVsRest Reader/Writer support Python backend estimador/avaliador
  • [SPARK-33592] [ML][PYTHON]Pyspark ML Validador params no estimadorParamMaps pode ser perdido após a poupança e recarregamento
  • [SPARK-33667] [SQL] Respeite o spark.sql.caseSensitive config enquanto resolve a especificação de partição em v1 SHOW PARTITIONS
  • [SPARK-33141] [SQL] Capture SQL configs ao criar vistas permanentes
  • [SPARK-33636] [PYTHON][ML] Adicionar rótulosArray a PySpark StringIndexer
  • [SPARK-33629] [PYTHON]Faça a configuração spark.buffer.size visível no lado do condutor
  • [SPARK-33389] [SQL] Faça classes internas de SparkSession sempre usando SQLConf ativa
  • [SPARK-33071] [SPARK-33536] [SQL] Evite alterar dataset_id do Plano Lógico em união() para não quebrar DetectAmbiguousSelfJoin
  • [SPARK-33551] [SQL] Não utilize o leitor de baralhar personalizado para repartição
  • [SPARK-33432] [SQL] SQL parser deve usar SQLConf ativo
  • [SPARK-33588] [SQL] Respeite o spark.sql.caseSensitive config enquanto resolve a especificação de partição em v1 SHOW TABLE EXTENDED
  • [SPARK-33440] [CORE] Utilize o tempotamos atual com registo de aviso em HadoopFSDelegationTokenProvider quando a data de emissão para token não estiver configurada corretamente
  • [SPARK-33494] [SQL][AQE] Não utilize o leitor local de baralhar para repartição

Atualizações de manutenção

Consulte as atualizações de manutenção do Databricks Runtime 7.6.

Ambiente do sistema

  • Sistema Operativo: Ubuntu 18.04.5 LTS
  • Java: Zulu 8.50.0.51-CA-linux64 (construção 1.8.0_275-b01)
  • Scala: 2.12.10
  • Python: 3.7.5
  • R: Versão R 3.6.3 (2020-02-29)
  • Delta Lake 0.7.0

Bibliotecas python instaladas

Biblioteca Versão Biblioteca Versão Biblioteca Versão
asn1crypto 1.3.0 backcall 0.1.0 boto3 1.12.0
botocore 1.15.0 certificado 2020.12.5 cffi 1.14.0
cari de contradeta 3.0.4 criptografia 2,8 ciclor 0.10.0
Rio Cython 0.29.15 decorador 4.4.1 docutils 0.15.2
pontos de entrada 0.3 idna 2,8 ipykernel 5.1.4
ipython 7.12.0 ipython-genutils 0.2.0 jedi 0.17.2
jmespath 0.10.0 joblib 0.14.1 jupyter-cliente 5.3.4
jupyter-core 4.6.1 kiwisolver 1.1.0 koalas 1.5.0
matplotlib 3.1.3 numpy 1.18.1 pandas 1.0.1
parso 0.7.0 Patsy 0.5.1 pexpect 4.8.0
pickleshare 0.7.5 pip 20.0.2 kit de ferramentas de pronta 3.0.3
psycopg2 2.8.4 ptyprocess 0.6.0 pyarrow 1.0.1
pycparser 2.19 Pigmeus 2.5.2 PyGObject 3.26.1
pyOpenSSL 19.1.0 pyparsing 2.4.6 PySocks 1.7.1
python-apt 1.6.5+ubuntu0.4 python-dateutil 2.8.1 pytz 2019.3
pyzmq 18.1.1 pedidos 2.22.0 s3transfer 0.3.3
scikit-learn 0.22.1 scipy 1.4.1 nascidos no mar 0.10.0
armações de configuração 45.2.0 Seis 1.14.0 ssh-import-id 5.7
statsmodels 0.11.0 tornado 6.0.3 traços 4.3.3
atualizações sem supervisão 0.1 urllib3 1.25.8 virtualenv 16.7.10
wcwidth 0.1.8 roda 0.34.2

Bibliotecas R instaladas

As bibliotecas R são instaladas a partir do instantâneo microsoft CRAN em 2020-11-02.

Biblioteca Versão Biblioteca Versão Biblioteca Versão
askpass 1.1 assertthat 0.2.1 backports 1.1.10
base 3.6.3 base64enc 0.1-3 BH 1.72.0-3
bit 4.0.4 bit64 4.0.5 blob 1.2.1
boot 1.3-25 brew 1.0-6 brio 1.1.0
broom 0.7.2 callr 3.5.1 acento circunflexo 6.0-86
cellranger 1.1.0 chron 2.3-56 classe 7.3-17
cli 2.1.0 clipr 0.7.1 cluster 2.1.0
codetools 0.2-18 colorspace 1.4-1 commonmark 1.7
compiler 3.6.3 config 0.3 covr 3.5.1
cpp11 0.2.3 crayon 1.3.4 crosstalk 1.1.0.1
curl 4.3 data.table 1.13.2 conjuntos de dados 3.6.3
DBI 1.1.0 dbplyr 1.4.4 desc 1.2.0
devtools 2.3.2 diffobj 0.3.2 digest 0.6.27
dplyr 0.8.5 DT 0.16 ellipsis 0.3.1
evaluate 0.14 fansi 0.4.1 farver 2.0.3
fastmap 1.0.1 forcats 0.5.0 foreach 1.5.1
foreign 0.8-76 forjar 0.2.0 fs 1.5.0
genéricos 0.1.0 ggplot2 3.3.2 gh 1.1.0
git2r 0.27.1 glmnet 3.0-2 globais 0.13.1
glue 1.4.2 gower 0.2.2 gráficos 3.6.3
grDevices 3.6.3 grid 3.6.3 gridExtra 2.3
gsubfn 0.7 gtable 0.3.0 haven 2.3.1
highr 0,8 hms 0.5.3 htmltools 0.5.0
htmlwidgets 1.5.2 httpuv 1.5.4 httr 1.4.2
hwriter 1.3.2 hwriterPlus 1.0-3 ini 0.3.1
ipred 0.9-9 isoband 0.2.2 iterators 1.0.13
jsonlite 1.7.1 KernSmooth 2.23-18 knitr 1.30
labeling 0.4.2 mais tarde 1.1.0.1 lattice 0.20-41
lava 1.6.8 lazyeval 0.2.2 ciclo de vida 0.2.0
lubridate 1.7.9 magrittr 1.5 markdown 1.1
MASS 7.3-53 Matriz 1.2-18 memoise 1.1.0
methods 3.6.3 mgcv 1.8-33 mime 0,9
ModelMetrics 1.2.2.2 modelr 0.1.8 munsell 0.5.0
nlme 3.1-151 nnet 7.3-14 numDeriv 2016.8-1.1
openssl 1.4.3 parallel 3.6.3 pillar 1.4.6
pkgbuild 1.1.0 pkgconfig 2.0.3 pkg carga 1.1.0
plogr 0.2.0 plyr 1.8.6 praise 1.0.0
prettyunits 1.1.1 pROC 1.16.2 processx 3.4.4
prodlim 2019.11.13 progress 1.2.2 promessas 1.1.1
proto 1.0.0 ps 1.4.0 purrr 0.3.4
r2d3 0.2.3 R6 2.5.0 randomForest 4.6-14
rappdirs 0.3.1 rcmdcheck 1.3.3 RColorBrewer 1.1-2
Rcpp 1.0.5 readr 1.4.0 readxl 1.3.1
recipes 0.1.14 rematch 1.0.1 desforra2 2.1.2
remotos 2.2.0 reprex 0.3.0 reshape2 1.4.4
rex 1.2.0 rjson 0.2.20 rlang 0.4.8
rmarkdown 2.5 RODBC 1.3-16 roxygen2 7.1.1
rpart 4.1-15 rprojroot 1.3-2 Rio Rserve 1.8-7
RSQLite 2.2.1 rstudioapi 0.11 rversões 2.0.2
rvest 0.3.6 scales 1.1.1 selectr 0.4-2
sessioninfo 1.1.1 shape 1.4.4 shiny 1.5.0
sourcetools 0.1.7 sparklyr 1.4.0 SparkR 3.0.0
spatial 7.3-11 splines 3.6.3 sqldf 0.4-11
SQUAREM 2020.5 stats 3.6.3 stats4 3.6.3
stringi 1.5.3 stringr 1.4.0 survival 3.2-7
sys 3.4 tcltk 3.6.3 TeachingDemos 2,10
testthat 3.0.0 tibble 3.0.4 tidyr 1.1.2
tidyselect 1.1.0 tidyverse 1.3.0 timeDate 3043.102
tinytex 0.27 tools 3.6.3 usar este 1.6.3
utf8 1.1.4 utils 3.6.3 uuid 0.1-4
vctrs 0.3.4 viridisLite 0.3.0 waldo 0.2.2
whisker 0,4 withr 2.3.0 xfun 0.19
xml2 1.3.2 xopen 1.0.0 xtable 1.8-4
yaml 2.2.1

Bibliotecas instaladas java e scala (versão de cluster Scala 2.12)

ID do Grupo ID de artefacto Versão
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-cliente 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.11.655
com.amazonaws aws-java-sdk-cloudformation 1.11.655
com.amazonaws aws-java-sdk-cloudfront 1.11.655
com.amazonaws aws-java-sdk-cloudhsm 1.11.655
com.amazonaws aws-java-sdk-cloudsearch 1.11.655
com.amazonaws aws-java-sdk-cloudtrail 1.11.655
com.amazonaws aws-java-sdk-cloudwatch 1.11.655
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.11.655
com.amazonaws aws-java-sdk-codedeploy 1.11.655
com.amazonaws aws-java-sdk-cognitoidentity 1.11.655
com.amazonaws aws-java-sdk-cognitosync 1.11.655
com.amazonaws aws-java-sdk-config 1.11.655
com.amazonaws aws-java-sdk-core 1.11.655
com.amazonaws aws-java-sdk-datapipeline 1.11.655
com.amazonaws aws-java-sdk-directconnect 1.11.655
com.amazonaws aws-java-sdk-diretório 1.11.655
com.amazonaws aws-java-sdk-dynamodb 1.11.655
com.amazonaws aws-java-sdk-ec2 1.11.655
com.amazonaws aws-java-sdk-ecs 1.11.655
com.amazonaws aws-java-sdk-efs 1.11.655
com.amazonaws aws-java-sdk-elasticache 1.11.655
com.amazonaws aws-java-sdk-elasticbeanstalk 1.11.655
com.amazonaws aws-java-sdk-elasticloadbalancing 1.11.655
com.amazonaws aws-java-sdk-elastictranscoder 1.11.655
com.amazonaws aws-java-sdk-emr 1.11.655
com.amazonaws aws-java-sdk-glaciar 1.11.655
com.amazonaws aws-java-sdk-iam 1.11.655
com.amazonaws aws-java-sdk-importexport 1.11.655
com.amazonaws aws-java-sdk-kinesis 1.11.655
com.amazonaws aws-java-sdk-kms 1.11.655
com.amazonaws aws-java-sdk-lambda 1.11.655
com.amazonaws aws-java-sdk-logs 1.11.655
com.amazonaws aws-java-sdk-machinelearning 1.11.655
com.amazonaws aws-java-sdk-opsworks 1.11.655
com.amazonaws aws-java-sdk-rds 1.11.655
com.amazonaws aws-java-sdk-redshift 1.11.655
com.amazonaws aws-java-sdk-route53 1.11.655
com.amazonaws aws-java-sdk-s3 1.11.655
com.amazonaws aws-java-sdk-ses 1.11.655
com.amazonaws aws-java-sdk-simpledb 1.11.655
com.amazonaws aws-java-sdk-simpleworkflow 1.11.655
com.amazonaws aws-java-sdk-sns 1.11.655
com.amazonaws aws-java-sdk-sqs 1.11.655
com.amazonaws aws-java-sdk-ssm 1.11.655
com.amazonaws aws-java-sdk-storagegateway 1.11.655
com.amazonaws aws-java-sdk-sts 1.11.655
com.amazonaws aws-java-sdk-support 1.11.655
com.amazonaws aws-java-sdk-swf-bibliotecas 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.11.655
com.amazonaws jmespath-java 1.11.655
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics transmissão 2.9.6
com.databricks Rio Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esoftware kryo-sombreado 4.0.2
com.esoftware minlog 1.3.0
com.fasterxml colega de turma 1.3.4
com.fasterxml.jackson.core jackson-anotações 2.10.0
com.fasterxml.jackson.core jackson-core 2.10.0
com.fasterxml.jackson.core jackson-databind 2.10.0
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.10.0
com.fasterxml.jackson.datatype jackson-datatype-joda 2.10.0
com.fasterxml.jackson.module jackson-módulo-paranamer 2.10.0
com.fasterxml.jackson.module jackson-módulo-scala_2.12 2.10.0
com.github.ben-manes.cafeína cafeína 2.3.4
com.github.fommil jniloader 1.1
com.github.fommil.netlib núcleo 1.1.2
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java-nativos 1.1
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java-nativos 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-nativos 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64-nativos 1.1
com.github.joshelser dropwizard-metrics-hadoop-metrics2-reporter 0.1.2
com.github.luben zstd-jni 1.4.4-3
com.github.wendykierp JTransforms 3,1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.2.4
com.google.flatbuffers flatbuffers-java 1.9.0
com.google.guava goiaba 15,0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 1.4.195
com.helger perfis 1.1.1
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.sqlserver mssql-jdbc 8.2.1.jre8
com.microsoft.azure azure-data-lago-store-sdk 2.3.9
com.ning compress-lzf 1.0.3
com.sun.mail javax.mail 1.5.2
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2,8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.9.5
com.twitter chill_2.12 0.9.5
com.twitter app_2.12 7.1.0
com.twitter core_2.12 7.1.0
com.twitter function_2.12 7.1.0
com.twitter jvm_2.12 7.1.0
com.twitter lint_2.12 7.1.0
com.twitter registry_2.12 7.1.0
com.twitter stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.univocity univocity-parsers 2.9.0
com.zaxxer HikariCP 3.1.0
comuns-beanutils comuns-beanutils 1.9.4
commons-cli commons-cli 1.2
commons-codec commons-codec 1.10
comuns-coleções comuns-coleções 3.2.2
configuração dos comuns configuração dos comuns 1.6
commons-dbcp commons-dbcp 1.4
commons-digester commons-digester 1.8
commons-fileupload commons-fileupload 1.3.3
comuns-httpclient comuns-httpclient 3,1
commons-io commons-io 2,4
commons-lang commons-lang 2,6
registo de comuns registo de comuns 1.1.3
commons-net commons-net 3,1
comuns-pool comuns-pool 1.5.4
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0,10
io.dropwizard.metrics métricas-núcleo 4.1.1
io.dropwizard.metrics métricas-grafite 4.1.1
io.dropwizard.metrics verificações métricas-saúde 4.1.1
io.dropwizard.metrics métricas-jetty9 4.1.1
io.dropwizard.metrics métricas-jmx 4.1.1
io.dropwizard.metrics métricas-json 4.1.1
io.dropwizard.metrics métricas-jvm 4.1.1
io.dropwizard.metrics métricas-servidões 4.1.1
io.netty netty-all 4.1.47.Final
io.prometheus simplescliente 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx colecionador 0.12.0
jakarta.anotação jakarta.annotation-api 1.3.5
jakarta.validação jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.ativação ativação 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.servlet javax.servlet-api 3.1.0
javax.servlet.jsp jsp-api 2.1
javax.transação jta 1.1
javax.transação transação-api 1.1
javax.xml.ligar jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
javolução javolução 5.5.1
jline jline 2.14.6
joda-tempo joda-tempo 2.10.5
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
net.razorvine pirolito 4.30
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake floco de neve-ingest-sdk 0.9.6
net.snowflake floco de neve-jdbc 3.12.8
net.snowflake snowflake_2 faísca.12 2.8.1-spark_3.0
net.sourceforge.f2j arpack_combined_all 0.1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.7.1
org.antlr stringtemplate 3.2.1
org.apache.formiga formiga 1.9.2
org.apache.formiga ant-jsch 1.9.2
org.apache.formiga lança-formigas 1.9.2
org.apache.seta seta-formato 0.15.1
org.apache.seta seta-memória 0.15.1
org.apache.seta seta-vetor 0.15.1
org.apache.avro avro 1.8.2
org.apache.avro avro-ipc 1.8.2
org.apache.avro avro-mapred-hadoop2 1.8.2
org.apache.commons comuns-compress 1.8.1
org.apache.commons comuns-cripto 1.0.0
org.apache.commons commons-lang3 3.9
org.apache.commons commons-math3 3.4.1
org.apache.commons comuns-texto 1.6
org.apache.curator curador-cliente 2.7.1
org.apache.curator curador-quadro 2.7.1
org.apache.curator curador-receitas 2.7.1
org.apache.derby derby 10.12.1.1
org.apache.direy.api api-asn1-api 1.0.0-M20
org.apache.direy.api api-util 1.0.0-M20
org.apache.directy.server apacheds-i18n 2.0.0-M15
org.apache.directy.server apacheds-kerberos-codec 2.0.0-M15
org.apache.hadoop hadoop-anotações 2.7.4
org.apache.hadoop hadoop-auth 2.7.4
org.apache.hadoop hadoop-cliente 2.7.4
org.apache.hadoop hadoop-comum 2.7.4
org.apache.hadoop hadoop-hdfs 2.7.4
org.apache.hadoop hadoop-mapreduce-cliente-app 2.7.4
org.apache.hadoop hadoop-mapreduce-cliente-comum 2.7.4
org.apache.hadoop hadoop-mapreduce-cliente-core 2.7.4
org.apache.hadoop hadoop-mapreduce-cliente-jobclient 2.7.4
org.apache.hadoop hadoop-mapreduce-cliente-shuffle 2.7.4
org.apache.hadoop hadoop-yarn-api 2.7.4
org.apache.hadoop hadoop-yarn-cliente 2.7.4
org.apache.hadoop hadoop-yarn-comum 2.7.4
org.apache.hadoop hadoop-yarn-servidor-comum 2.7.4
org.apache.hive colmeia-beeline 2.3.7
org.apache.hive colmeia-cli 2.3.7
org.apache.hive colmeia-comum 2.3.7
org.apache.hive colmeia-exec-core 2.3.7
org.apache.hive hive-jdbc 2.3.7
org.apache.hive hive-llap-cliente 2.3.7
org.apache.hive colmeia-llap-comum 2.3.7
org.apache.hive colmeia-metastore 2.3.7
org.apache.hive hive-serde 2.3.7
org.apache.hive colmeia-shims 2.3.7
org.apache.hive colmeia-armazenamento-api 2.7.1
org.apache.hive hive-vector-code-gen 2.3.7
org.apache.hive.shims colmeia-shims-0.23 2.3.7
org.apache.hive.shims colmeia-shims-comum 2.3.7
org.apache.hive.shims hive-shims-scheduler 2.3.7
org.apache.htrace htrace-core 3.1.0 incubação
org.apache.httpcomponents httpclient 4.5.6
org.apache.httpcomponents httpcore 4.4.12
org.apache.ivy hera 2.4.0
org.apache.mesos mesos-sombreado-protobuf 1.4.0
org.apache.orc orc-core 1.5.10
org.apache.orc orc-mapreduce 1.5.10
org.apache.orc orc-shims 1.5.10
org.apache.parquet parquet-coluna 1.10.1-databricks6
org.apache.parquet parquet-comum 1.10.1-databricks6
org.apache.parquet parquet-codificação 1.10.1-databricks6
org.apache.parquet parquet-formato 2.4.0
org.apache.parquet parquet-hadoop 1.10.1-databricks6
org.apache.parquet parquet-jackson 1.10.1-databricks6
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.velocidade velocidade 1.5
org.apache.xbean xbean-asm7-sombreado 4.15
org.apache.yetus anotações de público 0.5.0
org.apache.zookeeper zookeeper 3.4.14
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-jaxrs 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.jackson jackson-xc 1.9.13
org.codehaus.janino compilador de comuns 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-cliente 9.4.18.v20190429
org.eclipse.jetty molhe-continuação 9.4.18.v20190429
org.eclipse.jetty cais-http 9.4.18.v20190429
org.eclipse.jetty jetty-io 9.4.18.v20190429
org.eclipse.jetty jetty-jndi 9.4.18.v20190429
org.eclipse.jetty jetty-plus 9.4.18.v20190429
org.eclipse.jetty jett--se 9.4.18.v20190429
org.eclipse.jetty molhe-segurança 9.4.18.v20190429
org.eclipse.jetty jetty-servidor 9.4.18.v20190429
org.eclipse.jetty jett--- 9.4.18.v20190429
org.eclipse.jetty jett---- 9.4.18.v20190429
org.eclipse.jetty jetty-util 9.4.18.v20190429
org.eclipse.jetty jetty webapp 9.4.18.v20190429
org.eclipse.jetty jetty-xml 9.4.18.v20190429
org.fusesource.leveldbjni niveladobjni-todos 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-localizador 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-localização de recursos 1.0.3
org.glassfish.hk2.external aopalliance-reembalado 2.6.1
org.glassfish.hk2.external jakarta.injetar 2.6.1
org.glassfish.jersey.containers jersey-contentor-servlet 2.30
org.glassfish.jersey.containers jersey-contentor-servlet-core 2.30
org.glassfish.jersey.core jersey-cliente 2.30
org.glassfish.jersey.core jersey-comum 2.30
org.glassfish.jersey.core jersey-servidor 2.30
org.glassfish.jersey.injetar jersey-hk2 2.30
org.glassfish.jersey.media jersey-media-jaxb 2.30
org.hibernate.validor hibernante-validador 6.1.0.Final
org.javassista javassista 3.25.0-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.joda joda-convertido 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.6.6
org.json4s json4s-core_2.12 3.6.6
org.json4s json4s-jackson_2.12 3.6.6
org.json4s json4s-scalap_2.12 3.6.6
org.lz4 Lz4-java 1.7.1
org.mariadb.jdbc mariadb-java-cliente 2.1.2
org.objenesis objenese 2.5.1
org.postgresql postgresql 42.1.4
org.roaringbitmap RoaringBitmap 0.7.45
org.roaringbitmap calços 0.7.45
org.rocksdb rocksdbjni 6.2.2
org.rosuda.REngine Rio REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.10
org.scala-lang scala-library_2.12 2.12.10
org.scala-lang scala-reflect_2.12 2.12.10
módulos org.scala-lang scala-coleção-compat_2.12 2.1.1
módulos org.scala-lang scala-parser-combinators_2.12 1.1.2
módulos org.scala-lang scala-xml_2.12 1.2.0
org.scala-sbt interface de teste 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp brisa-macros_2.12 1.0
org.scalanlp breeze_2.12 1.0
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.30
org.slf4j jul-to-slf4j 1.7.30
org.slf4j slf4j-api 1.7.30
org.slf4j slf4j-log4j12 1.7.30
org.spark-project.spark não éused 1.0.0
org.springframework mola-núcleo 4.1.4.RELEASE
org.springframework teste de primavera 4.1.4.RELEASE
org.threeten threeten-extra 1.5.0
org.tukaani xz 1.5
org.typelevel algebra_2.12 2.0.0-M2
org.typelevel gatos-kernel_2.12 2.0.0-M4
org.typelevel machinist_2.12 0.6.8
org.typelevel macro-compat_2.12 1.1.1
org.typelevel spire-macros_2.12 0.17.0-M1
org.typelevel spire-platform_2.12 0.17.0-M1
org.typelevel spire-util_2.12 0.17.0-M1
org.typelevel spire_2.12 0.17.0-M1
org.wildfly.openssl wildfly-openssl 1.0.7.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.7.5
org.yaml snakeyaml 1.24
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1
xmlenco xmlenco 0.52