2022 年 4 月
这些功能和 Azure Databricks 平台的改进已于 2022 年 4 月发布。
注意
发布分阶段进行。 Azure Databricks 帐户可能要等到初始发布日期后的一周或更长时间才会更新。
新 Azure 区域:瑞典中部
2021 年 4 月 29 日
Azure Databricks 现已在“瑞典中部”区域提供。
使用标记更好地管理 Azure Databricks 作业
2022 年 4 月 21-26 日
现在可以将标记 添加到 Azure Databricks 作业,以便根据一个或多个自定义键或键值对轻松跟踪和搜索作业。 由于标记还会传播到作业群集,因此可以将标记与群集监视配合使用。
对 Databricks Runtime 10.0 系列的支持已终止
2022 年 4 月 20 日
对 Databricks Runtime 10.0 和用于机器学习的 Databricks Runtime 10.0 的支持已于 4 月 20 日结束。 请参阅 Databricks 运行时支持生命周期。
使用新的作业矩阵视图获取作业运行的直观概述
2022 年 4 月 19-27 日
现可在作业用户界面使用新的矩阵视图轻松地直观呈现 Azure Databricks 作业的运行。 矩阵视图是对现有表视图的补充,提供了作业和任务运行详细信息的概述,包括每次运行的开始时间、持续时间和状态。 请参阅查看作业的运行。
在 Azure Databricks 作业运行失败时节省时间和资源
2022 年 4 月 19-25 日
如果作业运行未成功完成,利用新的作业“修复和重新运行”,你可以只重新运行未成功的那部分任务和任何依赖任务。 由于不会重新运行成功的任务,因此此功能减少了从未成功的作业运行中恢复所需的时间和资源。 请参阅修复未成功的作业运行。
查看作业任务的运行历史记录
2022 年 4 月 19-25 日
现可查看协调多个任务的作业中每个任务的运行历史记录。 请参阅查看任务运行历史记录。
当分配的群集不再存在时,在作业 UI 中分配新群集
2022 年 4 月 18-25 日:版本 3.70
此版本修复了在分配的群集不可用时从 Azure Databricks 作业用户界面中删除交换群集按钮的问题。 现可在配置的群集不可用时(例如,由于网络更改)将新群集分配到 UI 中的作业。
Databricks Runtime 10.5(beta 版本)
2022 年 4 月 15 日
Databricks Runtime 10.5、10.5 Photon 和 10.5 ML 现已作为 beta 版本提供。
有关信息,请参阅 Databricks Runtime 10.5 和用于机器学习的 Databricks Runtime 10.5 提供的完整发行说明。
增量实时表 UI 已增强,可禁用未经授权的操作
2022 年 4 月 4-11 日:版本 3.69
增量实时表用户界面已更新,可禁用你无权使用的管道操作。 例如,如果你只有 CAN_VIEW 权限,启动、停止和删除按钮将被禁用。 以前,选择未经授权的操作会导致操作失败。
Databricks AutoML 已推出正式版
2022 年 4 月 4-11 日:版本 3.69
Databricks AutoML 已在 Databricks Runtime 10.4 LTS ML 及更高版本中正式发布。
将 Unity Catalog 中的数据集与 AutoML 配合使用
2022 年 4 月 4-11 日:版本 3.69
现可在 AutoML UI 中选择来自 Unity Catalog 的数据集。 必须是处于单一用户安全模式的群集的指定单一用户。
增量实时表在 AWS 和 Azure 上已正式发布,在 GCP 上为公共预览版
2022 年 4 月 5 日
Databricks 很高兴宣布增量实时表已在 AWS 和 Azure 上正式发布,并在 Google Cloud 上推出了公共预览版。 增量实时表是第一个 ETL 框架,它使用简单的声明性方法来生成可靠的数据管道。 增量实时表可大规模地自动管理基础结构,以便减少数据分析师和工程师在工具使用上耗费的时间,让其专注于从数据中获取价值。 请参阅增量实时表。
增量实时表 SQL 接口:表名称的非中断性变更
2022 年 4 月 5 日
此版本对用于在增量实时表 SQL 接口中命名表的语法引入了非中断性变更。 这些更改使 SQL 接口的语义和语法与即将推出的增量实时表平台的增强功能保持一致。 为了支持这些将来的增强功能,我们将进行以下更改:
- 增量实时表将重命名为流式处理实时表。 流式处理实时表继承增量实时表的语义。 增量实时表将继续支持
INCREMENTAL(作为弃用的关键字),以实现向后兼容性。 - 完整的实时表简称为实时表。 实时表将保证在管道更新结束时,生成的表的内容完全等于当前输入上指定转换的结果。
若要详细了解流式处理实时表和实时表,请参阅数据集。