这些功能和 Azure Databricks 平台改进于 2025 年 8 月发布。
注释
下面列出的发行日期和内容在多数情况下只对应于 Azure 公有云的实际部署。
其中提供了 Azure 公有云上 Azure Databricks 服务的演进历史记录以供参考,这些内容可能不适用于由世纪互联运营的 Azure。
注释
发布过程分阶段进行。 Azure Databricks 帐户可能要等到初始发布日期后的一周或更长时间才会更新。
在 Power Automate 流中与 Azure Databricks 作业交互(公共预览版)
2025 年 8 月 29 日
现在可以与 Power Automate 中的现有 Azure Databricks 作业进行交互。 为此,请将 Azure Databricks 作业作添加到流。
请参阅 使用 Azure Databricks 数据生成 Power Automate 流。
帐户 SCIM 2.0 更新
2025 年 8 月 29 日
为了增强稳定性并支持将来的增长,Databricks 已更新帐户 SCIM API 进行标识管理,如下所示:
- 调用 - GET with filter params filter=displayName eq value_without_quotes会导致语法错误。 若要防止此错误,请使用引号包装值(例如,- filter=displayName eq "value_with_quotes")。
- 调用 - GET /api/2.0/accounts/{account_id}/scim/v2/Groups不再返回成员。 而是循环- get group details访问以获取成员身份信息。 请参阅 获取组详细信息。
- 调用 - PATCH /api/2.0/accounts/{account_id}/scim/v2/Groups/{id}返回 204 响应,而不是 200 响应。
这些更改适用于新帐户,并将祖父添加到现有帐户中。 当前集成将继续工作,而不会中断。
使用新的单元格执行迷你图跟踪和导航笔记本运行
2025 年 8 月 28 日
使用单元格执行迷你图一目了然地跟踪笔记本的进度。 迷你图显示在右边距中,并显示每个单元格的执行状态(已跳过、排队、正在运行、成功或错误)。 将鼠标悬停可查看单元格详细信息,或单击直接跳转到单元格。
有关使用单元格执行迷你图的信息,请参阅 导航 Databricks 笔记本和文件编辑器。
管理员现在可以管理工作区的无服务器基础环境(公共预览版)
2025 年 8 月 28 日
基本环境是用于定义无服务器环境版本和一组依赖项的无服务器笔记本的自定义环境规范。
工作区管理员现在可以创建和管理工作区中可用的基本环境。 它们还可以为所有新的无服务器笔记本设置默认基础环境。 这样,工作区用户就可以快速开始在一致的缓存环境中工作。
Lakebase 同步表支持在快照模式下同步 Apache Iceberg 和外表
2025 年 8 月 28 日
现在可以从 Iceberg 表或外表在快照同步模式下创建同步表。
外部 MCP 服务器处于 Beta 版
2025 年 8 月 28 日
用户现在可以将 Databricks 连接到外部模型上下文协议 (MCP) 服务器。 这允许代理访问 Databricks 外部的工具。
从旧版发布模式迁移 Lakeflow 声明性管道现已正式发布
2025 年 8 月 28 日
Lakeflow 声明性管道具有仅允许发布到单个目录和架构的旧发布模式。 默认发布模式允许发布到多个目录和架构。 从旧版发布模式迁移到默认发布模式现已正式发布。
请参阅 在管道中启用默认发布模式
受治理的标记为公共预览版
2025 年 8 月 26 日
现在可以创建受治理的标记,以跨数据资产(如目录、架构和表)强制实施一致的标记。 使用受治理的标记,管理员定义允许的密钥和值,并控制哪些用户和组可以将它们分配给对象。 这有助于标准化数据分类、成本跟踪、访问控制和自动化的元数据。
Databricks Runtime 17.2 和 Databricks Runtime 17.2 ML 处于 Beta 阶段
2025 年 8 月 26 日
Databricks Runtime 17.2 和 Databricks Runtime 17.2 ML 现在处于 Beta 阶段。 这些版本包括 SQL 和 API 增强功能、新的迁移选项,以及跨平台的可靠性和性能改进。
有关机器学习,请参阅 Databricks Runtime 17.2 和 Databricks Runtime 17.2。
新 INSERT REPLACE 命令 (GA)
2025 年 8 月 26 日
              INSERT REPLACE USING 现已 INSERT REPLACE ON 正式发布 Databricks Runtime 17.2。 有关详细信息,请参阅 Databricks Runtime 17.2 发行说明。
OAuth 令牌联合现已正式发布
2025 年 8 月 26 日
OAuth 令牌联合现已正式发布。 通过令牌联合,可以使用标识提供者(IdP)中的令牌安全地访问 Azure Databricks API。 可以直接在 Azure Databricks UI 中或使用 Azure Databricks CLI 或 REST API 配置令牌联合策略。
请参阅 配置联合策略。
用于控制 Delta 表压缩的新表属性
2025 年 8 月 26 日
现在,可以使用表属性显式设置 Delta 表的 delta.parquet.compression.codec 压缩编解码器。 此属性可确保所有将来写入表时都使用所选编解码器。 请参阅 Delta 表属性参考。
Lakebase 同步表的数据类型映射更新
2025 年 8 月 25 日
对于新创建的同步表, TIMESTAMP 源表中的类型现在映射到 TIMESTAMP WITH TIMEZONE 同步表中。 在现有同步表中, TIMESTAMP 类型继续映射到 TIMESTAMP WITHOUT TIMEZONE。
自动液体聚类分析现在可用于 Lakeflow 声明性管道
2025 年 8 月 25 日
现在可以将自动液体聚类与 Lakeflow 声明性管道配合使用。 使用自动聚类功能与CLUSTER BY AUTO,Databricks智能地选择聚类键以优化查询性能。
请参阅自动液体聚类分析、create_streaming_table、表、CREATE MATERIALIZED VIEW (Lakeflow 声明性管道)和 CREATE STREAMING TABLE (Lakeflow 声明性管道)。
对 Lakebase 数据库实例和同步表的预算策略支持(公共预览版)
2025 年 8 月 25 日
现在,可以使用预算策略标记数据库实例和已同步表,以将计费使用情况归因于特定策略。 此外,可以将自定义标记添加到数据库实例,以便更精细地将计算使用情况归归到团队、项目或成本中心。
请参阅更新数据库实例的无服务器预算策略、创建同步表和 自定义标记。
Salesforce Data Cloud 文件共享连接器正式发布
2025 年 8 月 22 日
Salesforce Data Cloud 文件共享连接器现已正式发布。
请参阅 Lakehouse Federation for Salesforce Data Cloud File Sharing。
更新工作区虚拟网络配置现在以公共预览版提供
2025 年 8 月 22 日
现在可以更新现有 Azure Databricks 工作区的虚拟网络(VNet)配置。 这样,便可以:
- 将工作区从 Azure Databricks 托管的 VNet 迁移到自己的 VNet(VNet 注入)。
- 将 VNet 注入工作区移动到新的 VNet。
- 替换 VNet 注入工作区中的现有子网。
请参阅 更新工作区网络配置。
笔记本中复杂数据类型的增强自动完成
2025 年 8 月 22 日
笔记本自动完成现在支持针对复杂数据类型的增强建议,包括 SQL 单元格中的结构、映射和数组。 此外,引用使用 SELECT *的公共表表达式(CTE)时,自动完成会基于基础表结构提供列建议。
请参阅 个性化自动完成。
Databricks 资产捆绑包支持 Lakebase 数据库资源
2025 年 8 月 21 日
现在可以在捆绑包中定义 Lakebase 数据库目录、实例和同步表。 这意味着可以使用一个命令部署完整的数据库环境,而不是单独设置资源。
使用数据库实例部署捆绑包时,实例将立即开始运行。
请参阅 database_catalog、 database_instance和 synced_database_table。
Databricks Assistant与计算功能集成
2025 年 8 月 21 日
用户现在可以在某些计算页上与 Databricks Assistant 聊天。 使用“助理聊天”面板可帮助你创建新的计算资源、池和策略。 或者,询问有关计算资源的助手问题,例如“此计算资源是否已启用 Unity 目录?”或“当前计算策略是什么?”
若要了解有关计算资源的详细信息,请参阅 “计算”。
为 Lakeflow 声明性管道设置运行方式用户
2025 年 8 月 18 日
现在可以更改管道用于运行更新和管道发布的表所有者的标识。 此功能允许将服务主体设置为运行方式标识,这比对自动化工作负荷使用用户帐户更安全、更可靠。 常见用例包括当原始所有者停用时恢复管道,并将管道与服务主体一起部署为最佳做法。
有关设置运行方式用户的信息,请参阅 “设置运行方式用户”。
工作区中捆绑包中的 Lakeflow 声明性管道模板(公共预览版)
2025 年 8 月 14 日
现在,可以使用新的 Lakeflow 声明性管道模板项目在工作区中的捆绑包中轻松创建 ETL 管道。
Microsoft Power Platform 中的 Azure Databricks 连接器现已正式发布。
2025 年 8 月 14 日
Microsoft Power Platform 中的 Azure Databricks 连接器现已正式发布。
请参阅 在 Azure Power Platform 中连接 Azure Databricks。
基于令牌的速率限制现在可用于 AI 网关
2025 年 8 月 14 日
现在可以在提供终结点的模型上配置基于令牌的速率限制。
适用于助手的 Databricks 托管模型现已正式发布
2025 年 8 月 14 日
Databricks 助手与 Databricks 托管的模型现已在所有云平台上正式发布。 此版本的助手完全由托管并直接在 Databricks 基础结构上提供服务的模型提供支持,客户无需额外付费。
OpenAI GPT OSS 模型现在支持函数调用
2025 年 8 月 13 日
Databricks 托管的基础模型、OpenAI GPT OSS 120B 和 GPT OSS 20B 现在支持函数和工具调用。
标准访问模式的单节点计算现已正式发布
2025 年 8 月 12 日
具有标准访问模式的单节点计算资源现已正式发布。 此配置允许多个用户共享具有完全用户隔离的单节点计算资源。 单节点计算对于小型作业或非分布式工作负荷非常有用。
请参阅计算配置参考。
替换表时,列掩码现在保留
2025 年 8 月 12 日
如果新表中的列与原始表中的列名匹配,则其现有列掩码现在会保留,即使未指定掩码也是如此。 此更改可防止在替换表期间意外删除列级安全策略。 以前,替换表删除了所有现有列掩码,并且仅应用了新定义的掩码。
此更改会影响 SQL 命令([CREATE OR] REPLACE TABLE)、数据帧 API(saveAsTable、 replace、 createOrReplace)和其他类似的更新表作。
请参阅 手动应用行筛选器和列掩码。
Unity 目录中的访问请求(公共预览版)
2025 年 8 月 11 日
现在,可以通过在安全对象上配置访问请求目标,在 Unity 目录中启用自助服务访问请求。
用户可以请求访问他们发现的 Unity 目录对象。 这些请求将发送到配置的目标,例如电子邮件、Slack 或 Microsoft Teams 频道,也可以重定向到内部访问管理系统。
还可以启用默认电子邮件目标,因此如果未设置其他目标,请求会自动转到目录或对象所有者的电子邮件。 这可确保即使未为对象手动配置任何目标,也可确保传递访问请求。
请参阅 “管理访问请求目标”。
禁用新工作区的旧功能(公共预览版)
2025 年 8 月 11 日
新的帐户控制台设置允许帐户管理员在其帐户中创建的新工作区上禁用某些旧功能。 如果设置,新工作区将不包括 DBFS 根和装载、Hive 元存储、无隔离共享计算或 13.3 LTS 之前的 Databricks Runtime 版本。 如果需要,工作区管理员仍可以从工作区设置中启用这些旧功能。
请参阅 “禁用对新工作区中的旧功能的访问权限”。
默认情况下启用 Lakebase 公共预览版
2025 年 8 月 11 日
Lakebase:默认启用托管 Postgres OLTP 数据库预览版。 用户可以开始创建 Lakebase 数据库实例,而无需工作区管理员先启用此预览版。 管理员可以根据需要禁用预览版。
请参阅 “管理 Azure Databricks 预览版”。
ServiceNow 连接器 GA
2025 年 8 月 8 日
Lakeflow Connect 中完全托管的 ServiceNow 引入连接器现已正式发布。
从第三方客户端创建外部 Delta 表(公共预览版)
2025 年 8 月 8 日
现在可以从外部客户端和系统(如 Apache Spark)创建由 Delta Lake 支持的 Unity 目录外部表。
请参阅 从外部客户端创建外部 Delta 表。
路径凭据出售(公共预览版)
2025 年 8 月 8 日
现在,可以使用路径凭据售货向 Unity 目录元存储中的外部位置授予生存期较短的凭据。 请参阅用于外部系统访问的 Unity Catalog 凭证售卖。
Databricks ODBC 驱动程序 2.9.2
2025 年 8 月 5 日
Databricks ODBC 驱动程序版本 2.9.2 现在可从 ODBC 驱动程序下载页下载。
此版本包括以下修补程序和新功能:
- 如果未显式设置 UserAgentEntry,则进程名称现在用作默认 UserAgentEntry。
- 添加了对 Databricks 域名 cloud.databricks.us和cloud.databricks.mil的支持。
- 增强了对跨多个数据源函数的timestamp_ntz列的识别和处理,包括SQLGetTypeInfo、SQLColumns和SQLColAttribute。
- 当启用 UseSystemTruststore时,在 Windows 上添加了 CRL(证书吊销列表)缓存支持。
- 添加了VOID类型的列支持,以便VOID列现在已在SQLGetColumns中正确列出。
- 为与主机不同的 IDP 启用 OAuth 令牌交换,从而允许交换用于 Databricks 内部令牌的 OAuth 访问令牌(包括 BYOT)。
- 添加了对 Windows Server 2025 的支持。
- 修复了驱动程序中的内存泄漏。
此版本包括升级到多个第三方库:
- OpenSSL 已从 3.0.15 升级到 3.0.16
- libcURL 已从 8.11.0 升级到 8.12.1
- Expat 已从 2.6.3 升级到 2.7.1
此版本包括以下行为更改:
- 连接器不再支持 Databricks Runtime 版本 10.4 LTS。
- 默认的最大目录名称长度和最大架构名称长度已从 128 更改为 1024。
- 不再支持 Ubuntu 20.04。
有关完整配置信息,请参阅随驱动程序下载包一起安装的 Databricks ODBC 驱动程序指南 。
Power BI Azure Databricks 连接器支持 M2M OAuth
2025 年 8 月 5 日
现在可以使用计算机到计算机 (M2M) OAuth 凭据向 Power BI Desktop 进行身份验证。 如果当前代表服务主体使用个人访问令牌,Azure Databricks 建议切换到新的 客户端凭据 身份验证选项。
连续模式下的作业现在可以对失败的任务进行任务级重试
2025 年 8 月 11 日
设置为在连续模式下运行的作业现在可以选择在任务失败时重试单个任务。
请参阅连续运行作业。
Databricks Runtime 17.1 现已正式发布
2025 年 8 月 1 日
Databricks Runtime 17.1 现已正式发布。 请参阅 Databricks Runtime 17.1。
AI场现已正式发布
2025 年 8 月 1 日
AI场现已正式发布。
助手中的编辑模式执行多单元代码重构等作
2025 年 8 月 1 日
Databricks Assistant 现在支持编辑模式,该模式对笔记本中的多个单元格执行推理和编辑步骤。 编辑模式可有效处理复杂的多步骤任务,协调多个单元格的更改,而无需手动干预或重复提示。