Janeiro de 2022

Esses recursos e melhorias na plataforma Azure Databricks foram lançados em janeiro de 2022.

Observação

As versões são disponibilizadas em fases. Talvez sua conta do Azure Databricks só seja atualizada uma semana após a data de lançamento inicial.

Webhooks do MLflow Model Registry no Azure Databricks (Versão Prévia Pública)

31 de janeiro de 2022

Agora, você pode usar webhooks para escutar eventos do MLflow Model Registry e disparar ações com base neles. Por exemplo, você pode usar webhooks para automatizar e integrar seu pipeline de aprendizado de máquina com ferramentas e fluxos de trabalho de CI/CD existentes, acionar compilações de CI quando uma nova versão do modelo for criada ou notificar os membros da sua equipe pelo Slack quando houver uma solicitação para fazer a transição de um modelo para a produção.

Alteração interruptiva: token de idempotência de cluster limpo no encerramento do cluster

26 de janeiro de 2022

A partir de 14 de fevereiro de 2022, o gerenciamento de cluster do Azure Databricks será modificado, para limpar tokens de idempotência quando um cluster for encerrado. Essa alteração é necessária para habilitar melhorias nas garantias de tempo de atividade no gerenciamento de clusters.

Você deve atualizar todos os clientes ou scripts que dependem de um token de idempotência para que persista após o encerramento de um cluster. Se você enviar uma solicitação criação de cluster usando um token de idempotência não atribuído a um cluster não finalizado no espaço de trabalho, será criado um novo cluster.

Veja a seguir o comportamento anterior a essa alteração:

createCluster(idempotencyToken = tokenA) // launches new cluster A
terminateCluster(cluster A) // idempotency token tokenA is still associated with the terminated cluster A
startCluster(cluster = A)

createCluster(idempotencyToken = tokenA) // returns the currently running cluster A

Veja a seguir o novo comportamento:

createCluster(idempotencyToken = tokenA) // launches new cluster A
terminateCluster(cluster A) // idempotencyToken token tokenA is cleared from the cluster A configuration
startCluster(cluster A)

createCluster(idempotencyToken = tokenA) // launches new cluster B

Databricks Runtime 10.3 (Beta)

26 de janeiro de 2022

Databricks Runtime 10.3, 10.3 Photon e 10.3 ML agora estão disponíveis como versões Beta.

Confira as notas completas sobre a versão em Databricks Runtime 10.3 (sem suporte) e Databricks Runtime 10.3 para ML (sem suporte).

Exibir informações sobre execuções de trabalho recentes

25 de janeiro de 2022

Agora você pode exibir em tempo real execuções de trabalho atuais e recém-concluídas na página Execuções de trabalho na interface do usuário de trabalhos do Azure Databricks. Consulte Exibir execuções de trabalho recentes.

Usar Markdown no editor de arquivos do Databricks Repos

25 a 31 de janeiro de 2022: Versão 3.64

O editor de arquivos do Databricks Repos agora pode renderizar o markdown. Para obter detalhes, consulte Integração do Git com pastas Git do Databricks.

Melhor gerenciamento de cluster para trabalhos que orquestram várias tarefas

24 de janeiro de 2022

Agora você pode reutilizar clusters de trabalho em seus trabalhos que orquestram várias tarefas. A reutilização de cluster permite reduzir o uso de recursos de cluster com o emprego de um único cluster para executar várias tarefas em uma execução de trabalho. Confira Criar e executar trabalhos do Azure Databricks.

Fim do suporte às séries Databricks Runtime 8.3 e Databricks Runtime 8.4

20 de janeiro de 2022

O suporte para Databricks Runtime 8.3, Databricks Runtime 8.3 para Machine Learning, Databricks Runtime 8.4 e Databricks Runtime 8.4 para Machine Learning foi encerrado em 20 de janeiro. Confira Ciclos de vida de suporte do Databricks Runtime.

Driver JDBC do Databricks 2.6.22

18 de janeiro de 2022

Lançamos a versão 2.6.22 do driver JDBC para Databricks (download). Essa versão atualiza a biblioteca log4j para a versão 2.17.1 e remove a dependência slf4j-log4j12.

Metastores adicionais agora disponíveis em várias regiões

12 de janeiro de 2022

Os metastores a seguir agora estão disponíveis nas seguintes regiões:

centralusc2:

  • consolidated-centralusc2-prod-metastore-1.mysql.database.azure.com
  • consolidated-centralusc2-prod-metastore-2.mysql.database.azure.com
  • consolidated-centralusc2-prod-metastore-3.mysql.database.azure.com

eastus2c2:

  • consolidated-eastus2c2-prod-metastore-1.mysql.database.azure.com
  • consolidated-eastus2c2-prod-metastore-2.mysql.database.azure.com
  • consolidated-eastus2c2-prod-metastore-3.mysql.database.azure.com

eastusc3:

  • consolidated-eastusc3-prod-metastore-1.mysql.database.azure.com
  • consolidated-eastusc3-prod-metastore-2.mysql.database.azure.com
  • consolidated-eastusc3-prod-metastore-3.mysql.database.azure.com

Inclua sempre todos os nomes de host relevantes para cada região usada nas suas UDRs (rotas definidas pelo usuário). Consulte Configurações de rota definidas pelo usuário para o Azure Databricks.

O botão Novo Compartilhamento substitui o ícone de Permissões em notebooks

10 a 18 de janeiro de 2022: Versão 3.63

Para alterar as permissões em um notebook, use o novo botão Compartilharbotão de compartilhamento na interface do usuário do notebook, ou selecione Permissões no menu suspenso. O ícone de Permissões na barra de ferramentas do notebook ícone de Permissões foi removido. Para obter mais informações sobre como definir permissões de notebook, confira Colaborar usando notebooks do Databricks.

Novas opções de idioma do espaço de trabalho

10 de janeiro de 2022

Os workspaces agora estão disponíveis nos seguintes idiomas:

  • Deutsch
  • Italiano
  • 日本語
  • 한국어

Metastores adicionais agora disponíveis em várias regiões

4 de janeiro de 2022

Os metastores a seguir agora estão disponíveis nas seguintes regiões:

northeuropec2:

  • consolidated-northeuropec2-prod-metastore-1.mysql.database.azure.com
  • consolidated-northeuropec2-prod-metastore-2.mysql.database.azure.com
  • consolidated-northeuropec2-prod-metastore-3.mysql.database.azure.com

westeuropec2:

  • consolidated-westeuropec2-prod-metastore-1.mysql.database.azure.com
  • consolidated-westeuropec2-prod-metastore-2.mysql.database.azure.com
  • consolidated-westeuropec2-prod-metastore-3.mysql.database.azure.com

Inclua sempre todos os nomes de host relevantes para cada região usada nas suas UDRs (rotas definidas pelo usuário). Consulte Configurações de rota definidas pelo usuário para o Azure Databricks.