2022 年 6 月
这些功能和 Azure Databricks 平台改进已于 2022 年 6 月发布。
注意
下面列出的发行日期和内容在多数情况下只对应于 Azure 公有云的实际部署。
其中提供了 Azure 公有云上 Azure Databricks 服务的演进历史记录以供参考,这些内容可能不适用于由世纪互联运营的 Azure。
注意
发布分阶段进行。 Azure Databricks 帐户可能要等到初始发布日期后的一周或更长时间才会更新。
Unity Catalog 的 ALTER TABLE
权限更改
2022 年 6 月 30 日
在 Unity Catalog 中,已更新运行 ALTER TABLE
语句所需的特权。 以前,需要表的 OWNERSHIP
来运行所有 ALTER TABLE
语句。 现在,只有更改所有者、授予对表的权限、更改表名和修改视图定义才需要对表具有 OWNERSHIP
。 对于表的所有其他元数据操作(例如更新注释、属性或列),如果对表具有 MODIFY
权限,则可以进行更新。
请参阅 ALTER TABLE 和 ALTER TABLE。
Databricks Runtime 6.4 外延支持终止支持
2022 年 6 月 30 日
对 Databricks Runtime 6.4 外延支持的支持于 6 月 30 日终止。 请参阅 Databricks 支持生命周期。
对 Databricks Runtime 10.2 系列的支持已终止
2022 年 6 月 22 日
对 Databricks Runtime 10.2 和用于机器学习的 Databricks Runtime 10.2 的支持已于 6 月 22 日结束。 请参阅 Databricks 支持生命周期。
Databricks ODBC 驱动程序 2.6.24
2022 年 6 月 22 日
已发布 Databricks ODBC 驱动程序版本 2.6.24(下载)。 此版本添加了对配置 CTAS 语法的查询转换的支持,允许用户替代连接器中的 SQL_ATTR_QUERY_TIMEOUT
,并更新 OpenSSL 库。
此版本还解决了以下问题:
- 连接器不允许使用没有 CRL 分发点 (CDP) 条目的服务器和中间证书。
- 使用代理时,连接器设置的用于 SSL 服务器名称指示 (SNI) 的主机名不正确。
Databricks Terraform 提供程序现已正式发布
2022 年 6 月 22 日
Databricks Terraform 提供程序现已正式发布。
使用 Terraform 可以通过 Terraform 现有的基础结构即代码 (IaC) 流程完全自动执行数据平台的部署。
你可以使用 Databricks Terraform 提供程序在 Azure Databricks 工作区中定义群集和作业等资产,并通过用户、组和服务主体的权限来实施访问控制。
Databricks Terraform 提供程序提供了完整的部署审计跟踪。 你可以以 Databricks Terraform 提供程序为基础,实现灾难恢复和业务连续性策略。
Databricks Terraform 提供程序还支持 Unity 目录(预览版),可轻松、大规模地部署这一关键治理功能。
Databricks Runtime 11.0 和 11.0 ML 均已推出正式版;11.0 Photon 目前为公共预览版
2022 年 6 月 16 日
Databricks Runtime 11.0 和 Databricks Runtime 11.0 ML 现已正式发布。 Databricks Runtime 11.0 Photon 目前为公共预览版。
请参阅 Databricks Runtime 11.0 (EoS) 和用于机器学习的 Databricks Runtime 11.0 (EoS)。
在 Databricks Runtime 11.0 中更改为 Repos 默认工作目录
2022 年 6 月 16 日
Repo 中笔记本的 Python 工作目录默认为包含笔记本的目录。 例如,默认工作目录为 /Workspace/Repos/<user>/<repo>/<path-to-notebook>
,而不是 /databricks/driver
。 这允许从 Repos 中的文件导入和读取内容,默认情况下在 Databricks Runtime 11.0 群集上工作。
这也意味着写入当前工作目录失败并显示 Read-only filesystem
错误消息。 如果要继续写入群集的本地文件系统,请写入 /tmp/<filename>
或 /databricks/driver/<filename>
。
对 Databricks Runtime 10.1 系列的支持已终止
2022 年 6 月 14 日
对 Databricks Runtime 10.1 和用于机器学习的 Databricks Runtime 10.1 的支持已于 6 月 14 日结束。 请参阅 Databricks 支持生命周期。
Delta Live Tables 现可支持 SCD 类型 2
2022 年 6 月 13 日 - 21 日:版本 3.74
Delta Live Tables 管道现可使用 SCD 类型 2 来捕获源数据更改并保留对记录的完整更新历史记录。 这可增强对 SCD 类型 1 的现有 Delta Live Tables 支持。 请参阅APPLY CHANGES API:使用增量实时表简化变更数据捕获。
直接在 Azure Databricks UI 中创建 Delta Live Tables 管道
2022 年 6 月 13 日 - 21 日:版本 3.74
现可从 Azure Databricks UI 边栏上的“创建”菜单创建 Delta Live Tables 管道。
当创建或编辑管道时,选择 Delta Live Tables 通道
2022 年 6 月 13 日 - 21 日:版本 3.74
现可使用“创建管道”和“编辑管道设置”对话框为 Delta Live Tables 管道配置通道。 以前,配置通道需要编辑管道的 JSON 配置中的设置。
使用任务值在 Azure Databricks 作业中的任务之间通信
2022 年 6 月 13 日
现在,可以使用任务值在 Azure Databricks 作业中的任务之间传递值。 例如,可以使用任务值将机器学习模型的输出传递到同一作业运行中的下游任务。 请参阅 taskValues 子实用工具 (dbutils.jobs.taskValues)。
在 Databricks UI 中启用帐户切换
2022 年 6 月 8 日
如果用户属于多个帐户,他们现在可以在 Databricks UI 中的帐户之间切换。 若要使用帐户切换器,请单击 Databricks UI 顶部的电子邮件地址,然后将鼠标悬停在“切换帐户”上。 然后选择要导航到的帐户。