这些功能和 Azure Databricks 平台的改进已于 2024 年 11 月发布。
注意
下面列出的发行日期和内容在多数情况下只对应于 Azure 公有云的实际部署。
其中提供了 Azure 公有云上 Azure Databricks 服务的演进历史记录以供参考,这些内容可能不适用于由世纪互联运营的 Azure。
注意
发布是分阶段进行的。 Azure Databricks 帐户可能要等到初始发布日期后的一周或更长时间才会更新。
笔记本中表工具提示的其他元数据
2024 年 11 月 25 日
当您将鼠标悬停在笔记本单元格中的 Unity Catalog 表名称上时,工具提示现在包含以下元数据:
- 所有者
- 最后更新
- 尺寸
- DESCRIPTION
- 用于在目录资源管理器端面板中查看表的链接
扩展了对笔记本中 Python 调试程序的支持
2024 年 11 月 18 日
Databricks 笔记本中的内置 Python 调试器现在在 Databricks Runtime 14.3 LTS 或更高版本中,支持无服务器计算和使用标准访问模式(以前称为共享访问模式)配置的计算。 若要了解有关调试程序的详细信息,请参阅调试笔记本。
改进了 Web 终端体验
2024 年 11 月 18 日
Databricks 对 Web 终端体验进行了以下改进:
- 支持配置文件:现在可以使用 .bashrc 配置文件为 Databricks Web 终端设置持久配置。 请参阅配置 Web 终端。
- 命令周期历史记录:现在可以使用“向上”和“向下”箭头键循环浏览在上一会话中执行的命令。 这样可以轻松召回和重用以前的命令,而无需重新输入它们。
- 共享集群支持:我们改进的 Web 终端可在 Databricks Runtime 15.1 及更高版本中,使用标准访问模式的计算环境中运行。
有关使用 Web 终端的更多信息,请参阅在 Azure Databricks Web 终端中运行 Shell 命令。
对 DLT 的查询历史记录和查询配置文件支持
2024 年 11 月 15 日
Azure Databricks 现在提供了改进的工具,用于监视 DLT 管道中的查询性能。 请参阅 Lakeflow 声明性管道的访问查询历史记录。
Mosaic AI 模型训练品牌重塑
2024 年 11 月 15 日
已对 Mosaic AI 模型训练进行了品牌重塑,从而包含现有功能:
- 基础模型微调(以前称为 Mosaic AI 模型训练)继续为基础模型提供高级自定义。
在后续 SQL 单元格中作为 _sqldf
重复使用 SQL 输出
2024 年 11 月 15 日
在 Databricks Runtime 14.3 及更高版本中,如果在 Databricks 笔记本中运行 SQL 查询,会生成可在下游 SQL 单元格中使用的隐式数据帧 (_sqldf
)。 这是对 Databricks Runtime 13.3 中引入的在 Python 单元格中使用 _sqldf
变量支持的补充。 请参阅浏览 SQL 单元格结果。
跨平台视图共享(公共预览版)
2024 年 11 月 14 日
Databricks 收件人现在可使用任何 Databricks 计算资源查询共享视图。 以前,如果收件人的 Azure Databricks 帐户不同于提供商的帐户,则收件人只能使用无服务器 SQL 仓库查询共享视图。 请参阅读取共享视图。
现在视图共享还扩展到开放共享连接器。 请参阅使用持有者令牌读取通过 Delta Sharing 开放共享来共享的数据(针对接收者)。
Databricks Runtime 16.0 已推出正式版
2024 年 11 月 11 日
Databricks Runtime 16.0 和 Databricks Runtime 16.0 ML 现已推出正式版。
请参阅 用于机器学习的 Databricks Runtime 16.0(EoS) 和 Databricks Runtime 16.0。
中断性变更:托管 RStudio 生命周期结束
2024 年 11 月 11 日
在 Databricks Runtime 16.0 及更高版本中,Databricks 托管的 RStudio Server 已终止生命周期,在任意 Azure Databricks 工作区均不可用。 若要了解更多信息并查看 RStudio 的替代方案,请参阅已弃用的 RStudio Server。
为所有新的 Azure Databricks 帐户启用预测性优化
2024 年 11 月 11 日
在 11 月 11 日,Databricks 启用了预测性优化,作为所有新 Azure Databricks 帐户的默认值。 以前,它默认处于禁用状态,可以通过管理员帐户启用。 启用预测性优化后,Azure Databricks 会自动运行 Unity Catalog 托管表的维护操作。 有关预测性优化的更多信息,请参阅 Unity Catalog 托管表的预测性优化。
更新并统一了只读代码块
2024 年 11 月 8 日
现在,目录浏览器、警报页面和 Genie 中都提供了新的只读代码块。
使用 Unity Catalog 管理的服务凭据访问外部云服务(公共预览版)
2024 年 11 月 7 日
使用 Azure 托管标识 (MI) 和 Unity Catalog,服务凭据可以实现对云租户服务的简单且安全的身份验证。 服务凭证以公共预览版提供,在 Databricks Runtime 15.4 LTS 及更高版本上受支持。 请参阅 “创建服务凭据”。
对 Databricks Runtime 14.2 系列的支持已终止
2024 年 11 月 5 日
对 Databricks Runtime 14.2 和用于机器学习的 Databricks Runtime 14.2 的支持已于 11 月 5 日结束。 请参阅 Databricks 支持生命周期。