Septembre 2021

Ces fonctionnalités et améliorations de la plateforme Azure Databricks ont été publiées en septembre 2021.

Notes

Les publications se font par étapes. Votre compte Azure Databricks ne peut pas être mis à jour jusqu’à une semaine ou plus après la date de publication initiale.

Databricks Runtime 10.0 (bêta)

29 septembre 2021

Databricks Runtime 10.0, 10.0 Photon et 10.0 ML sont désormais disponibles en version bêta.

Consultez les notes de publication complètes dans Databricks Runtime 10.0 (non pris en charge) et Databricks Runtime 10.0 pour ML (non pris en charge).

Pilote ODBC Databricks 2.6.18

28 septembre 2021

Nous avons publié la version 2.6.18 du pilote ODBC Databricks (Téléchargement). Cette version prépare Unity Catalog en incorporant la prise en charge de l’espace de noms à trois niveaux et en activant la gestion sur plusieurs catalogues.

Utiliser des clés gérées par le client pour le chiffrement avec les espaces de travail existants

24 septembre 2021

Vous pouvez maintenant mettre à jour un espace de travail existant pour le chiffrement à l’aide d’une clé gérée par le client. Auparavant, vous pouviez activer le chiffrement avec des clés gérées par le client sur de nouveaux espaces de travail uniquement. Cela vous permet de vous conformer aux exigences professionnelles et de sécurité et vous offre davantage de contrôle sur les objets de l’espace de travail. Consultez Activer les clés gérées par le client pour les services gérés.

Databricks Runtime 9.1 LTS et 9.1 LTS ML sont en disponibilité générale ; 9.1 LTS Photon est en préversion publique

23 septembre 2021

Databricks Runtime 9.1 LTS et 9.1 LTS ML sont désormais en disponibilité générale. 9.1 LTS Photon est en préversion publique. Ces images seront prises en charge jusqu’en septembre 2023.

Notes

LTS (Long Term Support) signifie que cette version bénéficie d’un support à long terme. Consultez Cycle de vie de la version de Databricks Runtime LTS.

Consultez les notes de publication complètes sur les pages Databricks Runtime 9.1 LTS et Databricks Runtime 9.1 LTS pour Machine Learning.

Fin du support de la série Databricks Runtime 8.1

22 septembre 2021

Le support de Databricks Runtime 8.1 et Databricks Runtime 8.1 pour Machine Learning a pris fin le 22 septembre. Consultez Cycles de vie du support de Databricks Runtime.

Pilote JDBC Databricks 2.6.19

22 septembre 2021

Nous avons publié la version 2.6.19 du pilote JDBC Databricks (télécharger). Cette version ajoute la prise en charge de Cloud Fetch, qui est un mécanisme permettant d’extraire des données en parallèle via le stockage cloud, afin d’apporter plus rapidement les données aux outils décisionnels. Cette version réduit également la latence en supprimant les allers-retours inutiles entre le client et Databricks Runtime. Consultez How We Achieved High-bandwidth Connectivity With BI Tools.

Partager des tables de caractéristiques entre espaces de travail

20-27 Septembre 2021 : version 3.55

Feature Store prend en charge le partage de tables de caractéristiques entre plusieurs espaces de travail. Par exemple, à partir de votre propre espace de travail, vous pouvez créer une table de caractéristiques dans un magasin de caractéristiques centralisé et y effectuer des opérations d’écriture et de lecture. Cela est utile quand plusieurs équipes partagent l’accès aux tables de caractéristiques ou que votre organisation dispose de plusieurs espaces de travail pour gérer différentes phases de développement.

Pour plus d’informations, consultez Partager des tables de caractéristiques entre espaces de travail (hérité).

Disponibilité générale de plusieurs types d’instances de GPU Azure

20-27 Septembre 2021 : version 3.55

La prise en charge des clusters utilisant les types d’instances de GPU Azure suivants est désormais mise à la disposition générale :

• Instances Azure NC v2 : Standard_NC6s_v2, Standard_NC12s_v2, Standard_NC24s_v2, Standard_NC24rs_v2
• Instances NC T4 v3 : Standard_NC4as_T4_v3, Standard_NC8as_T4_v3, Standard_NC16as_T4_v3, Standard_NC64as_T4_v3

Consultez Calculs basés sur le GPU pour obtenir la liste complète des types d’instance Azure GPU pris en charge.

Repos prend désormais en charge .gitignore

20-27 Septembre 2021 : version 3.55

Databricks Repos prend désormais en charge .gitignore, ce qui vous permet de spécifier que certains fichiers ne sont pas suivis par Git. Si vous ajoutez un fichier à votre dépôt et que vous ne souhaitez pas qu’il soit suivi par Git, créez un fichier .gitignore ou utilisez un clone à partir de votre dépôt distant et ajoutez le nom de fichier, y compris l’extension.

.gitignore fonctionne uniquement pour les fichiers qui ne sont pas déjà suivis par Git. Si vous ajoutez un fichier déjà suivi par Git à un fichier .gitignore, le fichier est toujours suivi par Git.

Pour plus d’informations sur Databricks Repos, consultez Intégration de Git aux dossiers Git Databricks.

L’interface utilisateur améliorée pour les travaux est désormais standard pour tous les espaces de travail

20-27 Septembre 2021 : version 3.55

Une interface utilisateur de travaux améliorés comprenant un volet Détails du travail qui permet d’accéder aux paramètres des travaux communs est désormais standard pour tous les espaces de travail. L’interface utilisateur classique n’est plus prise en charge et le bouton Retour à l’interface utilisateur classique est supprimé de tous les espaces de travail. Consultez Créer et exécuter les travaux Azure Databricks pour plus d’informations sur l’utilisation de la nouvelle interface utilisateur de travaux.

Databricks Runtime 9.1 (bêta)

14 septembre 2021

Databricks Runtime 9.1, 9.1 Photon et 9.1 ML sont désormais disponibles en version bêta.

Consultez les notes de publication complètes sur les pages Databricks Runtime 9.1 LTS et Databricks Runtime 9.1 LTS pour Machine Learning.

Gestion simplifiée des paramètres des travaux Azure Databricks

8 septembre 2021

Dans le panneau latéral Détails du travail de l’interface utilisateur Travaux, vous pouvez désormais gérer les paramètres courants de vos travaux Azure Databricks, tels que la planification du travail, les paramètres de cluster, les exécutions simultanées maximales et les alertes de travail.

Databricks SQL en préversion publique disponible dans tous les espaces de travail

7 septembre 2021

Databricks SQL, environnement intuitif qui permet d’exécuter des requêtes ad hoc et de créer des tableaux de bord sur des données stockées dans votre lac de données, a débuté en préversion publique pour tous les espaces de travail. Pour plus d’informations, consultez les Notes de publication de Databricks SQL.

Supprimer des tables de fonctionnalités du magasin de fonctionnalités

7-13 septembre 2021 : version 3.54

Vous pouvez maintenant supprimer une table des fonctionnalités de Databricks Feature Store.

Accorder des autorisations d’affichage de pipeline dans l’interface utilisateur Delta Live Tables (préversion publique)

7-13 septembre 2021 : version 3.54

Vous pouvez désormais accorder aux utilisateurs l’autorisation d’afficher vos pipelines avec le bouton Modifier les autorisations dans l’interface utilisateur Delta Live Tables.

Réduire l’utilisation des ressources de cluster avec Delta Live Tables (préversion publique)

7-13 septembre 2021 : version 3.54

Vous pouvez maintenant créer un cluster pour votre pipeline Delta Live Tables avec un nœud Worker unique, ce qui permet de mieux contrôler les ressources de cluster utilisées par le pipeline. Pour créer un cluster avec un seul nœud Worker, affectez à Nombre minimum de Workers la valeur 0 et au Nombre maximal de Workers la valeur 1 lorsque vous créez un nouveau pipeline.

Optimisations du développement pour Delta Live Tables (préversion publique)

7-13 septembre 2021 : version 3.54

Les nouveaux pipelines créés dans Delta Live Tables s’exécutent désormais en mode de développement par défaut. Le mode de développement optimise l’exécution du pipeline en réutilisant les clusters et en désactivant les nouvelles tentatives automatiques. Auparavant, le mode de production était la valeur par défaut pour les nouveaux pipelines.

Utiliser des modèles MLflow dans vos pipelines Delta Live Tables (préversion publique)

7-13 septembre 2021 : version 3.54

Vous pouvez désormais récupérer des modèles auprès du registre de modèles MLflow et utiliser ces modèles pour l’inférence dans un pipeline Delta Live Tables. Pour obtenir plus d’informations sur l’utilisation du registre de modèles MLflow avec Azure Databricks, consultez le Gestion de cycle de vie Machine Learning en utilisant MLflow.

Rechercher des pipelines Delta Live Tables par nom (préversion publique)

7-13 septembre 2021 : version 3.54

Vous pouvez désormais filtrer la liste des pipelines sur la page Pipelines, ce qui facilite la recherche de pipelines spécifiques. Vous pouvez filtrer par nom de pipeline ou par correspondance de texte partielle sur un ou plusieurs noms de pipeline.

PyTorch TorchScript et d’autres bibliothèques tierces sont désormais pris en charge dans les tâches Azure Databricks

7-13 septembre 2021 : version 3.54

Un problème provoquant des défaillances avec certaines bibliothèques tierces dans des tâches Python, telles que PyTorch TorchScript, a été résolu.

Fin du support de la série Databricks Runtime 8.0

2 septembre 2021

Le support de Databricks Runtime 8.0 et Databricks Runtime 8.0 pour Machine Learning a pris fin le 2 septembre. Consultez Cycles de vie du support de Databricks Runtime.