Dezembro de 2018

Esses recursos e aprimoramentos da plataforma Azure Databricks foram lançados em dezembro de 2018.

Observação

As versões são disponibilizadas em fases. Talvez sua conta do Azure Databricks só seja atualizada uma semana após a data de lançamento inicial.

Versão do Databricks Runtime 5.1 para Machine Learning (Beta)

18 de dezembro de 2018

O Databricks Runtime 5.1 ML foi criado com base no Databricks Runtime 5.1. Para obter informações sobre as novidades do Databricks Runtime 5.1, consulte as notas sobre a versão do Databricks Runtime 5.1 (sem suporte). Além das atualizações das bibliotecas existentes no Databricks Runtime 5.0 ML (sem suporte), o Databricks Runtime 5.1 ML inclui os seguintes recursos novos:

  • PyTorch para a criação de redes de aprendizado profundo.

Consulte as notas sobre a versão completas do Databricks Runtime 5.1 ML (sem suporte).

Versão do Databricks Runtime 5.1

18 de dezembro de 2018

O Databricks Runtime 5.1 já está disponível. O Databricks Runtime 5.1 inclui o Apache Spark 2.4.0, novos recursos e atualizações do Delta Lake e de Streaming Estruturado, além de bibliotecas Python, R, Java e Scala atualizadas. Para obter detalhes, consulte Databricks Runtime 5.1 (não suportado).

IU da biblioteca

A atualização da interface do usuário da biblioteca lançada originalmente na versão 2.85 foi revertida em 7 de dezembro de 2018.

Acessar o Azure Data Lake Storage Gen1 automaticamente com suas credenciais do Microsoft Entra ID

5 a 11 de dezembro de 2018: versão 2.86

Agora você pode se autenticar automaticamente no Azure Data Lake Storage Gen1 a partir de clusters do Azure Databricks usando a mesma identidade do Microsoft Entra ID (antigo Azure Active Directory) que você usa para fazer login no Azure Databricks.

Basta habilitar seu cluster para a passagem de credenciais do Microsoft Entra ID, e os comandos que você executa nesse cluster poderão ler e gravar seus dados no Azure Data Lake Storage Gen1 sem exigir que você configure credenciais da entidade de serviço para acesso ao armazenamento.

Importante

A capacidade de acessar o Azure Data Lake Storage Gen1 usando suas credenciais do Microsoft Entra ID está em Visualização Pública. Para isso, é preciso o Databricks Runtime 5.1, que está na versão beta atualmente, mas que, em breve, estará disponível para o público geral.

Para obter mais informações, confira Acessar automaticamente com suas credenciais do Microsoft Entra ID (antigo Azure Active Directory).