2022 年 4 月
注意
下面列出的发行日期和内容在多数情况下只对应于 Azure 公有云的实际部署。
其中提供了 Azure 公有云上 Azure Databricks 服务的演进历史记录以供参考,这些内容可能不适用于由世纪互联运营的 Azure。
这些功能和 Azure Databricks 平台的改进已于 2022 年 4 月发布。
注意
发布分阶段进行。 Azure Databricks 帐户可能要等到初始发布日期后的一周或更长时间才会更新。
新 Azure 区域:瑞典中部
2021 年 4 月 29 日
Azure Databricks 现已在“瑞典中部”区域提供。
使用标记更好地管理 Azure Databricks 作业
2022 年 4 月 21-26 日
现在可以将标记 添加到 Azure Databricks 作业,以便根据一个或多个自定义键或键值对轻松跟踪和搜索作业。 由于标记还会传播到作业群集,因此可以将标记与群集监视配合使用。
对 Databricks Runtime 10.0 系列的支持已终止
2022 年 4 月 20 日
对 Databricks Runtime 10.0 和用于机器学习的 Databricks Runtime 10.0 的支持已于 4 月 20 日结束。 请参阅 Databricks 支持生命周期。
使用新的作业矩阵视图获取作业运行的直观概述
2022 年 4 月 19-27 日
现可在作业用户界面使用新的矩阵视图轻松可视化 Azure Databricks 作业的运行。 矩阵视图是对现有表视图的补充,提供了作业和任务运行详细信息的概述,包括每次运行的开始时间、持续时间和状态。 请参阅查看作业的运行。
在 Azure Databricks 作业运行失败时节省时间和资源
2022 年 4 月 19-25 日
如果作业运行失败,可以利用新的作业“修复和重新运行”功能仅重新运行未成功的那部分任务和任何依赖任务。 由于不会重新运行成功的任务,因此此功能减少了从未成功的作业运行中恢复所需的时间和资源。 请参阅重新运行失败的和跳过的任务。
查看作业任务的运行历史记录
2022 年 4 月 19-25 日
现可查看协调多个任务的作业中每个任务的运行历史记录。 请参阅查看任务运行历史记录。
当单一用户访问不再存在时,在作业 UI 中分配新群集
2022 年 4 月 18-25 日:版本 3.70
此版本修复了在单一用户访问不可用时从 Azure Databricks 作业用户界面中删除交换群集按钮的问题。 现可在配置的群集不可用时(例如,由于网络更改)将新群集分配到 UI 中的作业。
Databricks Runtime 10.5(beta 版本)
2022 年 4 月 15 日
Databricks Runtime 10.5、10.5 Photon 和 10.5 ML 现已作为 beta 版本提供。
有关信息,请参阅 Databricks Runtime 10.5 (EoS) 和用于机器学习的 Databricks Runtime 10.5 (EoS) 中的完整发行说明。
增量实时表 UI 已增强,可禁用未经授权的操作
2022 年 4 月 4-11 日:版本 3.69
增量实时表用户界面已更新,可禁用你无权使用的管道操作。 例如,如果你只有 CAN_VIEW
权限,则会禁用启动、停止和删除按钮。 以前,选择未经授权的操作会导致该操作失败。
Databricks AutoML 已正式发布
2022 年 4 月 4-11 日:版本 3.69
Databricks AutoML 已在 Databricks Runtime 10.4 LTS ML 和更高版本中推出正式版。
将 Unity Catalog 中的数据集与 AutoML 配合使用
2022 年 4 月 4-11 日:版本 3.69
现可在 AutoML UI 中选择来自 Unity Catalog 的数据集。 必须是处于单一用户访问模式的群集的指定单一用户。
增量实时表在 AWS 和 Azure 上已正式发布,在 GCP 上为公共预览版
2022 年 4 月 5 日
Databricks 很高兴宣布增量实时表已在 AWS 和 Azure 中推出正式版,并在 Google Cloud 中推出公共预览版。 增量实时表是第一个 ETL 框架,它使用简单的声明性方法来生成可靠的数据管道。 增量实时表可以大规模地自动管理基础结构,使数据分析师和工程师能够减少在工具上花费的时间,并专注于发掘数据的价值。 请参阅什么是增量实时表?。
增量实时表 SQL 接口:表名称的非中断性变更
2022 年 4 月 5 日
此版本为用于命名增量实时表 SQL 接口中的表的语法引入了一项非中断性变更。 这些更改使得 SQL 接口的语义和语法与即将对增量实时表平台做出的增强保持一致。 为了支持这些将来的增强功能,我们将进行以下更改:
- 将增量实时表重命名为流式处理实时表。 流式处理实时表继承增量实时表的语义。 为了后向兼容,增量实时表将继续支持
INCREMENTAL
(一个已弃用的关键字)。 - 完整实时表将简称为实时表。 实时表将保证在管道更新结束时,生成的表的内容完全等于当前输入上指定转换的结果。