Abril de 2022

Esses recursos e aprimoramentos da plataforma do Azure Databricks foram lançados em abril de 2023.

Observação

As versões são disponibilizadas em fases. Talvez sua conta do Azure Databricks só seja atualizada em uma semana ou mais após a data de lançamento inicial.

Databricks Marketplace (Visualização Pública): um mercado aberto para dados, análises e IA

27 de abril de 2023

Agora você pode usar o Databricks Marketplace para descobrir, acessar e implantar centenas de produtos de dados em seus fluxos de trabalho de IA e análise. O Databricks Marketplace aproveita o Compartilhamento Delta para fornecer compartilhamento seguro e contínuo de produtos de dados gratuitos e comerciais em qualquer nuvem ou região. Confira O que é o Databricks Marketplace?.

Configure o formatador Python

25 de abril de 2023

Para arquivos e notebooks no Databricks Repos, agora você pode configurar o formatador Python com base em uma especificação Black. Consulte Formatar células Python.

Os arquivos do espaço de trabalho estão em GA

24 de abril de 2023

Agora você pode trabalhar com arquivos que não são de notebook no Azure Databricks. Os arquivos de workspaces são habilitados por padrão em todos os workspaces. Consulte O que são Arquivos de workspace?.

Os scripts de inicialização com escopo de cluster agora podem ser armazenados em arquivos de espaço de trabalho

24 de abril de 2023

Agora você pode armazenar scripts de inicialização com escopo de cluster em arquivos de workspace, independentemente da versão do Databricks Runtime usada pela computação. O Databricks recomenda armazenar todos os scripts de inicialização no escopo do cluster em arquivos do espaço de trabalho. Consulte Armazenar scripts de inicialização em arquivos do espaço de trabalho.

Crie um escopo secreto apoiado pelo Azure Key Vault com uma entidade de serviço

19 de abril de 2023

Agora você pode criar um escopo de segredo com suporte Key Vault do Azure usando uma entidade de serviço. Confira Criar um escopo de segredos com suporte do Azure Key Vault

Novos privilégios do Compartilhamento Delta permitem a delegação de tarefas de gerenciamento de compartilhamento, destinatário e provedor

18 de abril de 2023

Os novos privilégios USE SHARE, USE RECIPIENT, USE PROVIDER e SET SHARE PERMISSION permitem a delegação de tarefas de gerenciamento de compartilhamento, destinatário e provedor que, de outra forma, exigiriam a função de administrador do metastore ou a propriedade do objeto. Esses privilégios permitem limitar o número de usuários que têm a poderosa função de administrador do metastore. Consulte Tipos de privilégios que se aplicam somente ao Delta Sharing ou ao Databricks Marketplace.

Databricks Connect V2 (Visualização Pública)

17 de abril de 2023

A partir do Databricks Runtime 13.0, o Databricks Connect se baseia no Spark Connect, permitindo que os desenvolvedores usem o poder do Databricks e do IDE de sua escolha para desenvolver e depurar interativamente seu código em qualquer espaço de trabalho do Azure Databricks.

Nova interface de usuário de métricas de cluster

14 de abril de 2023

Os clusters que usam o Databricks Runtime 13.0 e superior têm acesso à nova interface do usuário de métricas de cluster. Esse recurso substitui Ganglia como a ferramenta de monitoramento de métricas de cluster. A nova interface do usuário de métricas de cluster inclui uma exibição ao vivo do desempenho do cluster e exibições históricas personalizadas minuto a minuto. Para obter mais informações, consulte Exibir métricas de cache.

O Databricks Runtime 13.0 está em GA

14 de abril de 2023

O Databricks Runtime 13.0 e o Databricks Runtime 13.0 ML agora estão em disponibilidade geral.

Confira Databricks Runtime 13.0 (sem suporte) e Databricks Runtime 13.0 para Machine Learning (sem suporte).

Controle o acesso ao console da conta por intervalos de endereços IP (Visualização Pública)

17 de abril de 2023

O console da conta do Azure Databricks agora dá suporte a listas de acesso IP para controlar o acesso ao console da conta por intervalos de endereços IP, semelhante ao suporte existente para listas de acesso IP para workspaces. Use uma interface do usuário do console de conta ou uma API REST para gerenciar o acesso. Consulte Configurar listas de acesso IP para o console da conta.

Quando o Azure Databricks bloqueia uma solicitação, o Azure Databricks gera um novo evento nos logs de auditoria no nível da conta com o serviço accounts e o evento accountIpAclsValidationFailed. Consulte Referência de log de diagnóstico.

O provedor Databricks Terraform foi atualizado para a versão 1.14.3

14 de abril de 2023

A versão 1.14.3 adiciona suporte ao exportador para databricks_sql_alert, adiciona suporte para notificações no databricks_pipelinee muito mais. Para obter mais detalhes, consulte o log de alterações da versão 1.14.3.

Entradas de log de diagnóstico para as configurações de administração alteradas para o espaço de trabalho

14 de abril de 2023

Agora há eventos de log de auditoria para alterações em algumas configurações de administrador nos logs de diagnóstico do workspace. Dentro do serviço accounts, os novos nomes de ação de evento são deleteSetting e setSetting. Consulte Referência de log de diagnóstico. Nem todas as configurações geram eventos auditáveis.

Para a chave inicial gerenciada pelo cliente para discos gerenciados, o Azure Databricks agora encerra os recursos de computação

10 de abril de 2023

Anteriormente, a adição inicialmente de uma chave gerenciada pelo cliente para discos gerenciados reinicia todos os recursos de computação em execução (clusters, pools). Os recursos de computação agora são encerrados não reiniciados, o que significa que você deve iniciá-los manualmente após a conclusão da atualização. O Azure Databricks impede que os clusters sejam executados ou iniciados enquanto você adiciona uma chave. Planeje o tempo de inatividade e encerre todos os recursos de computação antes de adicionar a chave para evitar o encerramento automático, que pode causar problemas para alguns tipos de cargas de trabalho.

Para um workspace que já tem uma chave gerenciada pelo cliente para discos gerenciados, você pode girar a chave sem encerrar recursos de computação.

O provedor Databricks Terraform foi atualizado para as versões 1.14.1 e 1.14.2

4-6 de abril de 2023

A versão 1.14.1 exclui funções em chamadas de lista de API SCIM para reduzir a carga no serviço SCIM do Databricks e muito mais. A versão 1.14.2 adiciona uma tarefa de arquivo SQL ao recurso databricks_job, corrige vários bugs e muito mais. Para obter mais detalhes, consulte o log de alterações da versão 1.14.1 e 1.14.2.

Configurações combinadas do usuário SQL e configurações gerais do usuário

3-5 de abril de 2023

As configurações do usuário do SQL foram combinadas com as configurações gerais do usuário do workspace para criar uma experiência unificada para usuários do workspace. Todas as configurações do usuário SQL agora são acessadas em Configurações:

• A guia Senha agora é a guia Conta e Senha.
• A guia Snippets de consulta é visível para usuários com o direito SQL.

As visualizações herdadas do notebook foram preteridas

4 de abril de 2023

A criação e edição de visualizações herdadas do notebook foram preteridas e serão removidas do produto em breve. As visualizações herdadas existentes continuarão a ser renderizadas. Os detalhes serão exibidos nas notificações dentro do produto.

Criar ou modificar tabela a partir da página de upload de arquivos suporta uploads de arquivos JSON

3 de abril de 2023

A página Criar ou modificar uma tabela a partir do upload de um arquivo agora tem suporte para uploads de arquivos JSON. Para obter mais informações, confira Criar ou modificar uma tabela usando o upload de arquivos .