Juillet 2021

Ces fonctionnalités et Azure Databricks améliorations de la plateforme ont été publiées en juillet 2021.

Notes

Les mises en production sont intermédiaires. Votre compte de Azure Databricks ne peut pas être mis à jour avant une semaine ou plus après la date de publication initiale.

Gérer les autorisations d’expérience MLflow avec l’API REST Databricks

29 juillet-août 2, 2021 : version 3,51

Vous pouvez maintenant utiliser l’API des autorisations des API REST Databricks pour gérer les utilisateurs qui peuvent lire, modifier ou gérer les expériences MLflow. Consultez l' API des autorisations 2,0.

Interface web Azure Databricks traduite en portugais et en français (préversion publique)

29 juillet 2021

Vous pouvez maintenant utiliser des Azure Databricks en français et en Portugais, et davantage de langues sont prévues pour les trimestres suivants. accédez à utilisateur Paramètres dans le menu supérieur droit de l’interface utilisateur web, puis cliquez sur l’onglet langue Paramètres pour modifier votre langue.

Le support Databricks Runtime 5.5 LTS pour Machine Learning prend fin. Il est remplacé par la version Support étendu

27 juillet 2021

Databricks Runtime 5,5 ML prise en charge de LTS a pris fin le 27 juillet 2021, mais la nouvelle Databricks Runtime 5,5 ML prise en charge étendue (non prise en charge) sera prise en charge jusqu’à la fin de 2021. Databricks Runtime 5,5 ML prise en charge étendue utilise ubuntu 18.04.5 LTS au lieu de la distribution ubuntu 16.04.6 LTS déconseillée utilisée dans le Databricks Runtime 5,5 ML LTS d’origine. La prise en charge d’Ubuntu 16.04.6 LTS a cessé le 1er avril 2021. pour plus d’informations sur les différences entre la prise en charge étendue de Databricks Runtime 5,5 et Databricks Runtime 5,5 LTS, consultez Databricks Runtime 5,5 ML prise en charge étendue (non prise en charge).

Le support Databricks Light 2.4 prend fin le 5 septembre. Il est remplacé par la version Support étendu

27 juillet 2021

La prise en charge du Databricks Light 2,4 d’origine se termine le 5 septembre. 2021, mais le nouveau support étendu Databricks Light 2,4 sera pris en charge jusqu’au 27 juillet 2022. Le support étendu Databricks Light 2,4 utilise Ubuntu 18.04.5 LTS au lieu de la distribution Ubuntu 16.04.6 LTS déconseillée utilisée dans le Databricks Light 2,4 d’origine. La prise en charge d’Ubuntu 16.04.6 LTS a cessé le 1er avril 2021. Databricks vous recommande de migrer vos charges de travail légères vers la version de support étendue dès que possible.

Nouvelle région Azure : Allemagne Centre-Ouest

27 juillet 2021

Azure Databricks est désormais disponible dans la région Allemagne Centre-Ouest.

Informations d’actualisation des fonctionnalités disponibles dans l’interface utilisateur du magasin de fonctionnalités Databricks (préversion publique)

26 juillet – 2 août 2021 : version 3,51

L’interface utilisateur du magasin de fonctionnalités Databricks affiche maintenant la dernière fois où les données ont été écrites dans une table de fonctionnalités. Il indique également si une table de fonctionnalités est mise à jour par une tâche planifiée et, le cas échéant, la planification et l’état du travail. Pour plus d’informations, consultez utiliser l’interface utilisateur du magasin de fonctionnalités.

Affichage jusqu’à 10 000 lignes de résultats

26 juillet – 2 août 2021 : version 3,51

Au maximum 1000 lignes étaient affichées dans un bloc-notes. Maintenant, si une table retourne plus de 1000 lignes, vous pouvez choisir de réexécuter la requête et d’afficher jusqu’à 10 000 lignes. Requiert Databricks Runtime 8,4 ou version ultérieure. Pour plus d’informations, consultez Télécharger les résultats complets.

Importation et exportation en bloc des notebooks dans un dossier en tant que fichiers sources

26 juillet – 2 août 2021 : version 3,51

Vous pouvez maintenant exporter la source de tous les blocs-notes dans un dossier d’espace de travail en tant qu’archive ZIP. Vous pouvez importer l’archive ZIP dans un autre espace de travail ou dans un autre dossier du même espace de travail pour recréer tous les blocs-notes exportés à cet emplacement. Le fichier source d’un bloc-notes est dans la langue par défaut du bloc-notes. Par exemple, la source d’un bloc-notes Python est un fichier Python.

Les fichiers sources du bloc-notes n’incluent pas les résultats des commandes du bloc-notes et sont appropriés pour utiliser dans un pipeline d’intégration continue/de livraison continue. Auparavant, vous pouviez exporter la source pour un seul bloc-notes à la fois, à partir de l’éditeur de bloc-notes, ou vous pouvez exporter tous les blocs-notes dans un dossier en tant que fichiers HTML ou en tant qu’archive Databricks (avec l’extension .dbc ), ce qui inclut les résultats de la commande Notebook, sauf si le bloc-notes a été effacé avant l’exportation.

Pour plus d’informations sur l’importation et l’exportation de bloc-notes, consultez gérer les blocs-notes.

L’autocomplétion des notebooks SQL utilise désormais uniquement des majuscules pour les mots clés SQL

26 juillet – 2 août 2021 : version 3,51

lorsque vous utilisez TAB pour la saisie semi-automatique d’un mot clé SQL dans un bloc-notes, le résultat de la saisie semi-automatique est désormais mis en majuscule. Par exemple, SELECT est affiché, plutôt que select . la requête n’est pas appliquée puisque SQL mots clés ne respectent pas la casse.

Widgets réorganisables et redimensionnables dans les notebooks

26 juillet – 2 août 2021 : version 3,51

Vous pouvez maintenant modifier l’ordre et la taille des widgets Databricks dans un bloc-notes en cliquant edit icon dans la barre des widgets du bloc-notes. Consultez configurer les paramètres du widget.

Correctifs d’utilisabilité de l’interface utilisateur Azure Databricks

26 juillet – 2 août 2021 : version 3,51

Cette version résout un problème qui empêchait l’utilisation de la ESC clé pour fermer certaines boîtes de dialogue dans l’interface utilisateur Azure Databricks, notamment :

  • Boîte de dialogue Afficher JSON dans l’interface utilisateur des tâches.
  • Boîte de dialogue modifier la planification dans l’interface utilisateur des tâches.
  • Boîte de dialogue configurations de déconnexion unique dans l’interface utilisateur de l’administrateur.
  • Boîte de dialogue créer un bloc-notes .

Définition rapide des paramètres de pipeline lors de la création d’un pipeline Delta Live Tables

26 juillet – 2 août 2021 : version 3,51

Lorsque vous créez un pipeline, vous pouvez maintenant définir des paramètres directement dans la boîte de dialogue créer un pipeline dans l' interface utilisateur destables dynamiques Delta.

Databricks Runtime 8,4 et 8,4 ML sont GA ; 8,4 photonique est une version préliminaire publique

20 juillet, 2021

les ML Databricks Runtime 8,4 et 8,4 sont désormais mis à la disposition générale. 8,4 photons est en version préliminaire publique.

Pour plus d’informations, consultez les notes de publication complètes à l’adresse Databricks Runtime 8,4 et Databricks Runtime 8,4 pour machine learning.

Utiliser Spark SQL avec l’API Delta Live Tables Python

12-19 juillet, 2021 : version 3,50

Vous pouvez maintenant utiliser les fonctions suivantes avec l’API Python tables dynamiques Delta :

  • spark.tableFonction permettant d’effectuer des lectures par lots sur des jeux de données définis dans un pipeline.
  • spark.sqlfonction permettant d’utiliser une requête SQL pour définir un dataset. les requêtes de SQL peuvent utiliser des fonctionnalités de Tables dynamiques Delta, notamment des références à des jeux de données internes à l’aide du LIVE mot clé et des lectures incrémentielles à l’aide du STREAM mot clé.

Pour plus d’informations, consultez la référence sur le langage Python.

Amélioration du traitement et de l’analyse des données avec des travaux Azure Databricks (préversion publique)

12-19 juillet, 2021 : version 3,50

Databricks est heureux d’annoncer une mise à jour des tâches de Azure Databricks qui vous permettent d’orchestrer et d’exécuter un travail avec plusieurs tâches. Vous pouvez l’utiliser pour définir un graphique en DAG de dépendances de tâches, ce qui facilite la création et l’analyse de données fiables et de Machine Learning flux de travail. Cette fonctionnalité est en version préliminaire publique et est désactivée par défaut.

Important

Une fois cette fonctionnalité activée, vous ne pouvez plus la désactiver.

Pour plus d’informations, consultez travaux avec plusieurs tâches .

Réduction des coûts pour les clusters par défaut Delta Live Tables (préversion publique)

12-19 juillet, 2021 : version 3,50

Pour contrôler les coûts, les modifications suivantes ont été apportées aux clusters par défaut des tables dynamiques Delta :

  • Remplacez type d’instance par défaut par Standard_F8s .
  • Activez la mise à l’échelle automatique par défaut avec un nombre de travailleurs minimal égal à 1 et un nombre maximal de travailleurs égal à 5.

Trier les pipelines par nom dans l’interface utilisateur Delta Live Tables (préversion publique)

12-19 juillet, 2021 : version 3,50

Vous pouvez maintenant cliquer sur l’en-tête de colonne nom dans l' interface utilisateur des tables dynamiques Delta pour trier les pipelines par nom dans l’ordre croissant (A- Z) ou décroissant (Z- A).

Changements dans la page de calcul

12-19 juillet, 2021 : version 3,50

Les liens des bibliothèques, de l’exécution du travail, de l’interface utilisateur Spark et des journaux à partir de la page de calcul ont été supprimés. Pour afficher des informations sur les bibliothèques, ou pour afficher l’interface utilisateur et les journaux Spark, utilisez les onglets correspondants sur la page Détails du cluster. Pour afficher des informations sur l’exécution d’un travail, cliquez sur accéder à la tâche exécuter sur cette page.

La prise en charge de Databricks Runtime 5.5 LTS se termine, remplacée par le support étendu de Databricks Runtime 5.5 jusqu’à la fin de l’année 2021

9 juillet 2021

la prise en charge de Databricks Runtime 5,5 LTS et Databricks Runtime 5,5 LTS pour Machine Learning se termine le 10 juillet. Consultez cycle de vie du support Databricks Runtime.

Le support étendu de Databricks Runtime 5,5 sera pris en charge jusqu’à la fin de 2021. Databricks Runtime 5,5 la prise en charge étendue utilise Ubuntu 18.04.5 LTS au lieu de la distribution Ubuntu 16.04.6 LTS déconseillée utilisée dans le Databricks Runtime 5,5 d’origine. La prise en charge d’Ubuntu 16.04.6 LTS a cessé le 1er avril 2021. Pour plus d’informations sur les différences entre la prise en charge étendue de Databricks Runtime 5,5 et Databricks Runtime 5,5 LTS, consultez Databricks Runtime 5,5 support étendu (non pris en charge).

API Repos (préversion publique)

6 juillet 2021

vous pouvez maintenant mettre à jour par programmation une Azure Databricks référentiel vers la dernière version d’une branche Git spécifique ou vers une balise à l’aide de la nouvelle API Repos. pour plus d’informations, consultez Repos l’API 2,0.

Databricks Runtime 8.4 (bêta)

1 juillet 2021

Databricks Runtime 8,4 et Databricks Runtime 8,4 ML sont désormais disponibles en tant que versions bêta.

Pour plus d’informations, consultez les notes de publication complètes à l’adresse Databricks Runtime 8,4 et Databricks Runtime 8,4 pour machine learning.