Dezembro de 2019

  • Artigo

Esses recursos e aprimoramentos da plataforma Azure Databricks foram lançados em dezembro de 2019.

Nota

Os lançamentos são encenados. Sua conta do Azure Databricks pode não ser atualizada até uma semana ou mais após a data de lançamento inicial.

O Databricks Connect suporta agora o Databricks Runtime 6.2

Dezembro 17, 2019

O Databricks Connect agora suporta o Databricks Runtime 6.2.

Configurar clusters com a sua própria imagem de contentor mediante a utilização do Databricks Container Services (Disponibilidade Geral)

16 de dezembro de 2019: Versão 3.7

Geralmente disponível no Databricks Runtime 6.1 e na plataforma Azure Databricks versão 3.7, o Databricks Container Services permite configurar um cluster com sua própria imagem de contêiner. Você pode pré-empacotar ambientes complexos dentro de um contêiner, publicá-lo em um registro de contêiner popular, como ACR, ECR ou Docker Hub, e fazer com que o Azure Databricks puxe a imagem para criar um cluster. Alguns exemplos de casos de uso incluem:

  • Personalização de bibliotecas - você tem controle total sobre as bibliotecas do sistema que deseja instalar
  • Ambiente de contêiner dourado - sua imagem do Docker é um ambiente bloqueado que nunca mudará
  • Integração de CI/CD do Docker - você pode integrar o Azure Databricks com seus pipelines de CI/CD do Docker

Há muitos outros casos de uso, desde a especificação da configuração até a instalação de pacotes de aprendizado de máquina.

Para obter detalhes, consulte Personalizar contêineres com o Databricks Container Service.

Disponibilidade Geral do Databricks Runtime 6.2 para o Genomics

Dezembro 3, 2019

O Databricks Runtime 6.2 for Genomics é construído sobre o Databricks Runtime 6.2. Ele inclui muitas melhorias e atualizações do Databricks Runtime 6.1 for Genomics, incluindo:

  • Regressão logística de Firth
  • Métricas de controle de qualidade de amostra definidas pelo usuário
  • Melhoria do desempenho do transformador de tubos
  • Genotipagem articular mais robusta
  • Integração simplificada com LOFTEE
  • Salve 0.26.0
  • Samtools 1,9

Dezembro 3, 2019

Agora que o Azure Databricks SCIM Provisioning Connector está disponível na galeria de aplicativos Microsoft Entra ID (anteriormente Azure Ative Directory), é mais fácil configurar o provisionamento de usuários e grupos do Microsoft Entra ID para o Azure Databricks. Para obter detalhes, consulte Configurar o provisionamento SCIM usando o Microsoft Entra ID (Azure Ative Directory).

Fim do suporte para o Databricks Runtime 5.3 e 5.4

Dezembro 3, 2019

O suporte para 5.3 e 5.4 terminou em 3 de dezembro. Consulte Ciclos de vida de suporte ao tempo de execução do Databricks.

Disponibilidade Geral do Databricks Runtime 6.2 ML

Dezembro 3, 2019

O Databricks Runtime 6.2 ML GA traz muitas atualizações de biblioteca, incluindo:

  • TensorFlow e TensorBoard: 1.14.0 a 1.15.0.
  • PyTorch: 1.2.0 a 1.3.0.
  • tensorboardX: 1.8 a 1.9.
  • MLflow: 1.3.0 a 1.4.0.
  • Hyperopt: 0.2-db1 com integrações MLflow do Azure Databricks.
  • mleap-databricks-runtime para 0.15.0 e inclui mleap-xgboost-runtime.

Para obter mais informações, consulte as notas de versão completas do Databricks Runtime 6.2 for ML (sem suporte).

Disponibilidade Geral do Databricks Runtime 6.2

Dezembro 3, 2019

O Databricks Runtime 6.2 GA traz novos recursos, melhorias e muitas correções de bugs, incluindo:

  • Mesclagem otimizada somente inserção Delta Lake

Para obter mais informações, consulte as notas de versão completas do Databricks Runtime 6.2 (sem suporte).

O Databricks Connect suporta agora o Databricks Runtime 6.1

Dezembro 3, 2019

O Databricks Connect agora suporta o Databricks Runtime 6.1. O Databricks Connect permite que você conecte seu IDE favorito (IntelliJ, Eclipse, PyCharm, RStudio, Visual Studio), servidor de notebook (Zeppelin, Jupyter) e outros aplicativos personalizados a clusters do Azure Databricks e execute o código Apache Spark.