Setembro de 2021

Esses recursos e melhorias na plataforma Azure Databricks foram lançados em setembro de 2021.

Observação

As versões são disponibilizadas em fases. Talvez sua conta do Azure Databricks só seja atualizada uma semana após a data de lançamento inicial.

Databricks Runtime 10.0 (Beta)

29 de setembro de 2021

O Databricks Runtime 10.0, 10.0 Photon e 10.0 ML já estão disponíveis como versões Beta.

Consulte as notas de versão completas em Databricks Runtime 10.0 (sem suporte) e Databricks Runtime 10.0 para ML (sem suporte).

Driver ODBC do Databricks 2.6.18

28 de setembro de 2021

Lançamos a versão 2.6.18 do driver ODBC do Databricks (download). Esta versão prepara para o Catálogo do Unity incorporando suporte a namespace de três níveis e habilitando o gerenciamento em vários catálogos.

Usar chaves gerenciadas pelo cliente para criptografia com workspaces existentes

24 de setembro de 2021

Agora você pode atualizar um espaço de trabalho existente para criptografia usando uma chave gerenciada pelo cliente. Antes, você poderia habilitar a criptografia com chaves gerenciadas pelo cliente somente em novos espaços de trabalho. Isso ajuda a cumprir os requisitos de negócios e de segurança e fornece mais controle sobre os objetos do espaço de trabalho. Para saber mais, confira Habilitar chaves gerenciadas pelo cliente para serviços gerenciados.

Databricks Runtime 9.1 LTS e 9.1 LTS ML são GA; 9.1 LTS Photon é Visualização Pública

23 de setembro de 2021

O Databricks Runtime 9.1 LTS e 9.1 LTS ML já estão em disponibilidade geral. O 9.1 LTS Photon está em Visualização Pública. Essas imagens terão suporte até setembro de 2023.

Observação

LTS significa que essa versão possui suporte de longo prazo. Confira Ciclo de vida da versão de LTS do Databricks Runtime.

Confira as notas de versão completas em Databricks Runtime 9.1 LTS e em Databricks Runtime 9.1 LTS para Machine Learning.

Término do suporte do Databricks Runtime série 8.1

22 de setembro de 2021

O suporte ao Databricks Runtime 8.1 e ao Databricks Runtime 8.1 para Machine Learning foi encerrado em 22 de setembro. Confira Ciclos de vida de suporte do Databricks Runtime.

Driver JDBC do Databricks 2.6.19

22 de setembro de 2021

Lançamos a versão 2.6.19 do driver JDBC para Databricks (download). Essa versão adiciona suporte à Busca na Nuvem, um mecanismo de busca de dados em paralelo por meio do armazenamento em nuvem para levar os dados mais rapidamente para as ferramentas de BI. Ela também reduz a latência removendo idas e voltas desnecessárias entre o cliente e o Databricks Runtime. Confira Como atingimos a conectividade de alta largura de banda com as ferramentas de BI.

Compartilhar tabelas de recursos entre workspaces

20 a 27 de setembro de 2021: versão 3.55

Agora, o Repositório de Recursos dá suporte ao compartilhamento de tabelas de recursos em vários espaços de trabalho. Por exemplo, no seu workspace, você pode criar, fazer gravações ou leituras em uma tabela de recursos em um repositório de recursos centralizado. Isso é útil quando várias equipes compartilham o acesso a tabelas de recursos ou quando sua organização tem vários workspaces para lidar com diferentes fases de desenvolvimento.

Para obter detalhes, consulte Compartilhar tabelas de recursos entre workspaces (herdado).

Disponibilidade geral de vários tipos de instância de GPU do Azure

20 a 27 de setembro de 2021: versão 3.55

O suporte para clusters usando os seguintes tipos de instância de GPU do Azure já está disponível para o público geral:

  • Instâncias Azure NC v2: Standard_NC6s_v2, Standard_NC12s_v2, Standard_NC24s_v2, Standard_NC24rs_v2
  • Instâncias Azure NC T4 v3: Standard_NC4as_T4_v3, Standard_NC8as_T4_v3, Standard_NC16as_T4_v3, Standard_NC64as_T4_v3

Confira computação habilitada para GPU para obter a lista completa de tipos de instância de GPU do Azure com suporte.

O Repos agora dá suporte a

20 a 27 de setembro de 2021: versão 3.55

Agora, o Databricks Repos oferece suporte a .gitignore, permitindo que você especifique que determinados arquivos não sejam rastreados pelo Git. Se você adicionar um arquivo ao repositório e não quiser que ele seja rastreado pelo Git, crie um arquivo .gitignore ou use um clonado do repositório remoto e adicione o nome do arquivo, incluindo a extensão.

.gitignore funciona apenas para arquivos que ainda não foram rastreados pelo Git. Se você adicionar um arquivo que já esteja acompanhado pelo Git a um arquivo .gitignore, o arquivo ainda será acompanhado pelo Git.

Para obter mais informações sobre Databricks Repos, veja Integração do Git com pastas Databricks Git.

A interface do usuário de trabalhos aprimorada agora é padrão para todos os workspaces

20 a 27 de setembro de 2021: versão 3.55

Agora, uma interface do usuário de trabalhos aprimorada com um painel lateral de Detalhes do trabalho que fornece acesso a configurações de trabalhos comuns é padrão para todos os espaços de trabalho. Não há mais suporte para a interface do usuário clássica, e o botão Voltar para a interface do usuário clássica foi removida de todos os espaços de trabalho. Consulte Criar e executar Trabalhos do Azure Databricks para obter mais informações sobre como usar a nova interface de usuário de trabalhos.

Databricks Runtime 9.1 (Beta)

14 de setembro de 2021

O Databricks Runtime 9.1, 9.1 Photon e 9.1 ML já estão disponíveis como versões Beta.

Confira as notas de versão completas em Databricks Runtime 9.1 LTS e em Databricks Runtime 9.1 LTS para Machine Learning.

Gerenciamento simplificado de configurações para trabalhos do Azure Databricks

8 de setembro de 2021

Agora, você pode gerenciar configurações comuns para seus trabalhos do Azure Databricks no novo painel lateral Detalhes do trabalho na interface do usuário de trabalhos, como a agenda de trabalho, as configurações de cluster, as execuções simultâneas máximas e os alertas de trabalho.

Versão Prévia Pública do SQL do Databricks disponível em todos os workspaces

7 de setembro de 2021

O Databricks SQL, um ambiente intuitivo para execução de consultas ad hoc e criação de painéis com base nos dados armazenados em seu data lake, começou a implementar a Visualização Pública em todos os workspaces. Para saber mais, confira as Notas de versão do Databricks SQL.

Excluir tabelas de recursos do Repositório de Recursos

7 a 13 de setembro de 2021: versão 3.54

Agora, você pode excluir uma tabela de recursos do Repositório de Recursos do Databricks.

Conceder permissões de pipeline de exibição na interface do usuário do Delta Live Tables (Versão Prévia Pública)

7 a 13 de setembro de 2021: versão 3.54

Agora, você pode conceder aos usuários a permissão para exibir seus pipelines com o botão Editar Permissões na interface do usuário do Delta Live Tables.

Reduzir o uso de recursos de cluster com tabelas Delta Live (Versão Prévia Pública)

7 a 13 de setembro de 2021: versão 3.54

Agora, você pode criar um cluster para o pipeline do Delta Live Tables com um único nó de trabalho, fornecendo mais controle sobre os recursos de cluster usados pelo pipeline. Para criar um cluster com um único nó de trabalho, defina Mín. de Funções de Trabalho como 0 e Máx. de Funções de Trabalho como 1 ao criar um novo pipeline.

Otimizações de desenvolvimento para tabelas Delta Live (Versão Prévia Pública)

7 a 13 de setembro de 2021: versão 3.54

Agora, os novos pipelines criados no Delta Live Tables são executados no modo de desenvolvimento por padrão. O modo de desenvolvimento otimiza a execução do pipeline reutilizando clusters e desabilitando tentativas automáticas. Antes, o modo de produção era o padrão para novos pipelines.

Usar modelos do MLFlow em seus pipelines do Delta Live Tables (Visualização Pública)

7 a 13 de setembro de 2021: versão 3.54

Agora, você pode buscar modelos no Registro de Modelo do MLflow e usá-los para inferência em um pipeline do Delta Live Tables. Confira o Gerenciamento do ciclo de vida usando o MLflow para obter mais informações sobre como usar o Registro de Modelo do MLflow com o Azure Databricks.

Localizar pipelines do Delta Live Tables por nome (Versão Prévia Pública)

7 a 13 de setembro de 2021: versão 3.54

Agora, você pode filtrar a lista de pipelines na página Pipelines, facilitando a localização de pipelines específicos. Você pode filtrar por nome do pipeline ou correspondência parcial de texto em um ou mais nomes de pipeline.

TorchScript do PyTorch e outras bibliotecas de terceiros agora têm suporte em trabalhos do Azure Databricks

7 a 13 de setembro de 2021: versão 3.54

Um problema que causa falhas com algumas bibliotecas de terceiros em tarefas do Python, como PyTorch TorchScript, foi corrigido.

Término do suporte do Databricks Runtime série 8.0

2 de setembro de 2021

O suporte ao Databricks Runtime 8.0 e ao Databricks Runtime 8.0 para Machine Learning foi encerrado em 2 de setembro. Confira Ciclo de vida de suporte do runtime do Databricks.