Juillet 2021

  • Article

Ces fonctionnalités et améliorations de la plateforme Azure Databricks ont été publiées en juillet 2021.

Notes

Les publications se font par étapes. Votre compte Azure Databricks ne peut pas être mis à jour jusqu’à une semaine ou plus après la date de publication initiale.

Gérer les autorisations d’expérience MLflow avec l’API REST Databricks

29 juillet - 2 août 2021 : version 3.51

Vous pouvez désormais utiliser l’API Autorisations des API REST Databricks pour gérer les utilisateurs qui peuvent lire, modifier ou gérer les expériences MLflow. Consultez API Autorisations.

Interface web Azure Databricks traduite en portugais et en français (préversion publique)

29 juillet 2021

Vous pouvez désormais utiliser Azure Databricks en français et en portugais, et davantage de langues sont prévues pour les trimestres à venir. Accédez à Paramètres utilisateur dans le menu en haut à droite de l’interface utilisateur Web, puis cliquez sur l’onglet Préférences pour changer de langue.

Le support Databricks Runtime 5.5 LTS pour Machine Learning prend fin. Il est remplacé par la version Support étendu

27 juillet 2021

La prise en charge de Databricks Runtime 5.5 ML LTS a pris fin le 27 juillet 2021, mais le nouveau Support étendu Databricks Runtime 5.5 Machine Learning (non pris en charge) sera pris en charge jusqu’à la fin de l’année 2021. Support étendu Databricks Runtime 5.5 ML utilise Ubuntu 18.04.5 LTS au lieu de la distribution Ubuntu 16.04.6 LTS déconseillée utilisée dans la version originale de Databricks Runtime 5.5 ML LTS. Le support d’Ubuntu 16.04.6 LTS a cessé le 1er avril 2021. Pour plus d’informations sur les différences entre Support étendu Databricks Runtime 5.5 et Databricks Runtime 5.5 LTS, consultez Support étendu Databricks Runtime 5.5 Machine Learning (non pris en charge).

Le support Databricks Light 2.4 prend fin le 5 septembre. Il est remplacé par la version Support étendu

27 juillet 2021

Le support de Databricks Light 2.4 d’origine a pris fin le 5 septembre 2021, mais le nouveau Support étendu Databricks Light 2.4 (non pris en charge) sera pris en charge jusqu’au 27 juillet 2022. Support étendu Databricks Runtime 2.4 utilise Ubuntu 18.04.5 LTS au lieu de la distribution Ubuntu 16.04.6 LTS déconseillée utilisée dans la version originale de Databricks Runtime 2.4. Le support d’Ubuntu 16.04.6 LTS a cessé le 1er avril 2021. Databricks vous recommande de migrer vos charges de travail Light vers la version de support étendu dès que possible.

Nouvelle région Azure : Allemagne Centre-Ouest

27 juillet 2021

Azure Databricks est désormais disponible dans la région Allemagne Centre-Ouest.

Informations d’actualisation des fonctionnalités disponibles dans l’interface utilisateur du magasin de fonctionnalités Databricks (préversion publique)

26 juillet - 2 août 2021 : version 3.51

L’interface utilisateur du magasin de fonctionnalités Databricks affiche désormais la dernière fois où des données ont été écrites dans une table de fonctionnalités. Elle indique également si une table de fonctionnalités est mise à jour par un travail planifié et, le cas échéant, la planification et l’état du travail.

Affichage jusqu’à 10 000 lignes de résultats

26 juillet - 2 août 2021 : version 3.51

Auparavant, un maximum de 1 000 lignes étaient affichées dans un notebook. Désormais, si une table retourne plus de 1 000 lignes, vous pouvez choisir de réexécuter la requête et d’afficher jusqu’à 10 000 lignes. Vous devez utiliser Databricks Runtime 8.4 ou une version ultérieure. Pour plus d’informations, consultez Afficher les résultats.

Importation et exportation en bloc des notebooks dans un dossier en tant que fichiers sources

26 juillet - 2 août 2021 : version 3.51

Vous pouvez désormais exporter la source de tous les notebooks dans un dossier d’espace de travail sous forme d’archive ZIP. Vous pouvez importer l’archive ZIP dans un autre espace de travail ou dans un autre dossier du même espace de travail pour recréer tous les notebooks exportés à cet emplacement. Le fichier source d’un notebook est dans la langue par défaut du notebook. Par exemple, la source d’un notebook Python est un fichier Python.

Les fichiers sources de notebook n’incluent pas les résultats des commandes du notebook et peuvent être utilisés dans un pipeline d’intégration continue et livraison continue (CI/CD). Auparavant, vous pouviez exporter la source pour un notebook à la fois, à partir de l’éditeur de notebook, ou vous pouviez exporter tous les notebooks dans un dossier sous forme de fichiers HTML ou d’archive Databricks (avec l’extension .dbc), ce qui incluait les résultats de la commande de notebook, sauf si le notebook était effacé avant l’exportation.

Pour plus d’informations sur l’importation et l’exportation de notebooks, consultez Gérer les notebooks.

L’autocomplétion des notebooks SQL utilise désormais uniquement des majuscules pour les mots clés SQL

26 juillet - 2 août 2021 : version 3.51

Lorsque vous utilisez TAB pour l’autocomplétion d’un mot clé SQL dans un notebook, le résultat de la saisie semi-automatique est désormais mis en majuscule. Par exemple, SELECT est affiché, plutôt que select. La requête n’est pas appliquée puisque les mots clés SQL ne respectent pas la casse.

Widgets réorganisables et redimensionnables dans les notebooks

26 juillet - 2 août 2021 : version 3.51

Vous pouvez désormais modifier l’ordre et la taille des widgets Databricks dans un notebook en cliquant sur l’edit icon dans la barre de widgets du notebook. Consultez Configurer les paramètres des widgets.

Correctifs d’utilisabilité de l’interface utilisateur Azure Databricks

26 juillet - 2 août 2021 : version 3.51

Cette version résout un problème qui empêchait l’utilisation de la clé ESC pour fermer certaines boîtes de dialogue dans l’interface utilisateur Azure Databricks, notamment :

  • La boîte de dialogue Afficher JSON dans l’interface utilisateur des travaux.
  • La boîte de dialogue Modifier la planification dans l’interface utilisateur des travaux.
  • La boîte de dialogue Configurations de déconnexion unique dans l’interface utilisateur de l’administrateur.
  • La boîte de dialogue Create Notebook (Créer un notebook).

Définition rapide des paramètres de pipeline lors de la création d’un pipeline Delta Live Tables

26 juillet - 2 août 2021 : version 3.51

Lorsque vous créez un pipeline, vous pouvez désormais définir des paramètres directement dans la boîte de dialogue Créer un pipeline dans l'interface utilisateur de Delta Live Tables.

Databricks Runtime 8.4 et 8.4 ML sont en disponibilité générale ; 8.4 Photon est en préversion publique

20 juillet 2021

Databricks Runtime 8.4 et 8.4 ML sont désormais en disponibilité générale. 8.4 Photon est en préversion publique.

Pour plus d’informations, consultez les notes de publication complètes dans Databricks Runtime 8.4 (non pris en charge) et Databricks Runtime 8.4 pour Machine Learning (non pris en charge).

Utiliser Spark SQL avec l’API Delta Live Tables Python

12-19 juillet 2021 : version 3.50

Vous pouvez désormais utiliser les fonctions suivantes avec l’API Python Delta Live Tables :

  • La fonction spark.table pour effectuer des lectures par lots sur des jeux de données définis dans un pipeline.
  • La fonction spark.sql pour utiliser une requête SQL afin de définir un jeu de données. Les requêtes SQL peuvent utiliser des fonctionnalités spécifiques de Delta Live Tables, notamment des références à des jeux de données internes à l’aide du mot clé LIVE et des lectures incrémentielles à l’aide du mot clé STREAM.

Pour plus d’informations, consultez les informations de référence sur le langage Python.

Amélioration du traitement et de l’analyse des données avec des travaux Azure Databricks (préversion publique)

12-19 juillet 2021 : version 3.50

Databricks est ravi d’annoncer une mise à jour des travaux Azure Databricks qui vous permet d’orchestrer et d’exécuter un travail avec plusieurs tâches. Vous pouvez l’utiliser pour définir un graphe orienté acyclique (DAG) de dépendances de tâches, facilitant ainsi la création et l’analyse de données fiables et de workflows Machine Learning. Cette fonctionnalité est en préversion publique et est désactivée par défaut.

Important

Une fois cette fonctionnalité activée, vous ne pouvez plus la désactiver.

Consultez Créer et exécuter des travaux Azure Databricks pour plus d’informations.

Réduction des coûts pour les clusters par défaut Delta Live Tables (préversion publique)

12-19 juillet 2021 : version 3.50

Pour contrôler les coûts, les modifications suivantes ont été apportées aux clusters par défaut Delta Live Tables :

  • Définissez le type d’instance par défaut sur Standard_F8s.
  • Activez la mise à l’échelle automatique par défaut avec un nombre minimal de travailleurs égal à 1 et un nombre maximal de travailleurs égal à 5.

Trier les pipelines par nom dans l’interface utilisateur Delta Live Tables (préversion publique)

12-19 juillet 2021 : version 3.50

Vous pouvez désormais cliquer sur l’en-tête de colonne Nom dans l'interface utilisateur Delta Live Tables pour trier les pipelines par nom dans l’ordre croissant (A -> Z) ou l’ordre décroissant (Z - > A).

Changements dans la page de calcul

12-19 juillet 2021 : version 3.50

Les liens des bibliothèques, de l’exécution du travail, de l’interface utilisateur Spark et des journaux à partir de la page Calcul ont été supprimés. Pour afficher des informations sur les bibliothèques, ou pour afficher l’interface utilisateur Spark et les journaux, utilisez les onglets correspondants sur la page Détails du cluster. Pour afficher des informations sur l’exécution d’un travail, cliquez sur Accéder à l’exécution du travail sur cette page.

La prise en charge de Databricks Runtime 5.5 LTS se termine, remplacée par le support étendu de Databricks Runtime 5.5 jusqu’à la fin de l’année 2021

9 juillet 2021

La prise en charge de Databricks Runtime 5.5 LTS et Databricks Runtime 5.5 LTS pour Machine Learning prend fin le 10 juillet. Consultez Cycles de vie du support de Databricks Runtime.

Le support étendu de Databricks Runtime 5.5 sera pris en charge jusqu’à la fin de l’année 2021. Support étendu Databricks Runtime 5.5 utilise Ubuntu 18.04.5 LTS au lieu de la distribution Ubuntu 16.04.6 LTS déconseillée utilisée dans la version originale de Databricks Runtime 5.5 LTS. Le support d’Ubuntu 16.04.6 LTS a cessé le 1er avril 2021. Pour plus d’informations sur les différences entre Support étendu Databricks Runtime 5.5 et Databricks Runtime 5.5 LTS, consultez Support étendu Databricks Runtime 5.5 (non pris en charge).

API Repos (préversion publique)

6 juillet 2021

Vous pouvez désormais mettre à jour par programmation un référentiel Azure Databricks vers la dernière version d’une branche Git spécifique ou vers une balise à l’aide de la nouvelle API Repos. Pour plus d’informations, consultez l’API Repos.

Databricks Runtime 8.4 (bêta)

1 juillet 2021

Databricks Runtime 8.4 et Databricks Runtime 8.4 ML sont désormais disponibles en tant que versions bêta.

Pour plus d’informations, consultez les notes de publication complètes dans Databricks Runtime 8.4 (non pris en charge) et Databricks Runtime 8.4 pour Machine Learning (non pris en charge).