Azure Databricks 2026 年 7 月发布了这些功能和改进。
注释
在大多数情况下,下面列出的发布日期和内容仅对应于Azure公有云的实际部署。
本文提供 Azure 公有云上的 Azure Databricks 服务演进历史,供您参考;该信息可能与由世纪互联运营的 Azure 上的实际部署情况不一致。
注释
发布过程分阶段进行。 Azure Databricks 帐户可能要等到初始发布日期后的一周或更长时间才会更新。
自动升级开始向现有表格推送行追踪和检查点V2
2026 年 7 月 29 日
自动升级 开始向现有的Unity Catalog管理表推送 行追踪 和 Checkpoint V2 ,而不仅仅是新表。 此次推广是渐进的,因此这些功能将在不同时间向不同客户开放。
自动升级仅在观测窗口确认所有访问该表的客户端均支持此功能后,才会启用该功能。 要跟踪哪些功能支持自动升级,请参见 支持功能。
Unity Catalog 中的 Python UDTF 现已正式可用
2026 年 7 月 28 日
在 Unity Catalog 中注册 Python 用户定义表函数(UDTF)现已在 Databricks Runtime 18 中正式可用。 Unity Catalog Python UDTF 是一种受治理的函数,它会返回一个表,并在 SQL 语句的 FROM 子句中调用,以返回多行多列。 Unity Catalog Python UDTF 可在无服务器计算、采用标准访问模式的经典计算和 SQL 仓库上运行。
请参阅 Unity Catalog 中的 Python 用户定义表函数(UDTF)和 Databricks Runtime 18 LTS。
Lakeflow 设计器夏季发布
2026 年 7 月 24 日
Lakeflow Designer Summer Release 新增了运算符,扩展了“输出”和“联接”运算符,并改进了画布编辑体验。 现可使用以下更新:
- Prepare 运算符:使用新的 Prepare 运算符执行常见的数据清理任务,包括更改文本大小写和数据类型、替换值和应用公式。 请参阅 准备。
- 输入数据运算符:在电子表格样式编辑器中手动创建表格数据。 请参阅输入数据。
- Select 运算符:使用新的 Select 运算符选择要保留、重命名列并在输出中对列进行重新排序的列。 请参阅 “选择”。
- 可视化效果运算符:直接在画布上创建和查看可视化效果。 请参阅 可视化效果。
- 改进了输出运算符:输出运算符现在支持在 Unity 目录表中插入或追加数据,将结果发布为具体化视图,并将 CSV、Excel 或 JSON 文件写入 Unity 目录卷。 请参阅 输出。
- 拆分联接输出:联接运算符现在默认提供三个输出:左侧不匹配行、匹配行和右侧不匹配行。 这样,可以更轻松地基于联接结果对工作流进行分支。 请参阅 “加入”。
- 区分大小写联接:Join 运算符现已包含匹配大小写选项,并且默认以不区分大小写的方式匹配字符串键。
- 匹配和不匹配的筛选器输出:筛选器运算符现在为匹配行和非匹配行提供单独的输出,因此可以根据数据是否符合筛选条件对数据进行分支。 请参阅 筛选器。
- 改进的日期筛选:筛选运算符的日期选择器现已支持按年和按月导航。
-
其他 AI 函数:AI 函数运算符现在支持
ai_query、ai_parse_document和ai_forecastai_prep_search。 请参阅 AI 函数。 - 文件夹和卷输入:源操作员现在可以面向整个 Unity 目录卷或文件夹路径,而不是单个文件。 请参阅 源。
- 指标视图源:在 Lakeflow Designer 中使用 Unity 目录指标视图作为源节点。 请参阅 源。
- 内联注释编辑:注释运算符现在支持直接在画布上进行内联格式文本编辑,包括标题、文本样式、链接、图像和表格。 请参阅 注意。
- 更轻松的节点连接:重新设计的节点端口提供更大的连接目标和更清晰的视觉提示,使操作员更易于连接。
- 更清晰的操作员配置提示:未配置的运算符现在具有虚线边框,并且未连接的所需输入端口以黄色突出显示。
- 目录面板:使用左侧边栏中新加入的可搜索目录,查找并跳转到任意运算符。 选择一个运算符将其放在画布上,然后展开 “生成的代码 ”部分以查看其基础代码。
- 命令面板:按 macOS 上的 Cmd+Shift+P 或 Windows上的 Ctrl+Shift+P 快速访问编辑器操作。
- 视觉数据准备列表页:从侧栏中的专用 视觉数据准备页查找所有视觉数据准备 文件。 该页面包含一个入门视频横幅,可帮助你开始使用 Lakeflow Designer。
- 改进了缓存:在全用途计算中,下游操作员可以重复使用缓存的上游结果,减少长时间运行的步骤(如 AI 函数)的重复工作。
- 大型画布性能:滚动和平移在具有 200 多个运算符的画布上响应更快。
- 无服务器环境选择:使用视觉数据准备文件时,现在可以选择用于交互式运行和计划作业的无服务器环境。
- 改进了计划作业可读性:计划的视觉数据准备运行现在以作业任务图中的单个节点的形式显示每个运算符,而不是显示原始Python代码。
-
声明性自动化捆绑包支持:使用声明性自动化捆绑包部署和运行可视数据准备文件,方法是将其配置为笔记本任务并引用其中
notebook_task.notebook_path的文件路径。 请参阅将可视化数据准备文件移至生产环境。
Git 文件夹中的 Git CLI 命令现在以公共预览版提供
2026 年 7 月 24 日
Git 文件夹中的 Git CLI 命令现在以 公共预览版提供。 工作区符合条件时,从 UI 创建的 Git 文件夹会自动获取 Git CLI 访问权限,因此可以直接从 Azure Databricks 终端运行标准 Git 命令,例如git stash交互式存储库、预提交挂钩、Git 子模块和大型文件存储(LFS)。 工作区管理员可以从 预览 页控制对此功能的访问。 请参阅 “使用 Git CLI”命令。
Databricks Runtime 维护更新 (07/24)
2026 年 7 月 24 日
新的维护更新可用于受支持的 Databricks Runtime 版本。 这些更新包括 bug 修复、安全修补程序和性能改进。 有关详细信息,请参阅:
- Databricks Runtime 18 LTS
- Databricks Runtime 18.2
- Databricks Runtime 18.1
- Databricks Runtime 17.3 LTS
- Databricks Runtime 16.4 LTS
- Databricks Runtime 15.4 LTS
- Databricks Runtime 14.3 LTS
- Databricks Runtime 13.3 LTS
Databricks Runtime 19 和 Databricks Runtime 19 for 机器学习现已正式发布
2026 年 7 月 23 日
Databricks Runtime 19 和 Databricks Runtime 19 for 机器学习 现已正式发布(GA),由 Apache Spark 4.2.0 提供支持。
有关发行说明,请参阅 Databricks Runtime 19 和 Databricks Runtime 19 for 机器学习。
Databricks Runtime 18 和 Databricks Runtime 18 for 机器学习现已转为 LTS 版本
2026 年 7 月 23 日
随着 Databricks Runtime 19 的正式发布,Databricks Runtime 18 和 Databricks Runtime 18 机器学习 已转换为长期支持(LTS)。 LTS 版本提供三年的稳定性和安全性修复。
有关发行说明,请参阅 Databricks Runtime 18 LTS 和 Databricks Runtime 18 LTS for 机器学习。 有关生命周期的详细信息,请参阅 Databricks Runtime 支持生命周期。
Variant 和 Variant 分解功能现已正式可用
2026 年 7 月 22 日
变体现已 正式发布。 Variant 是一种适用于半结构化数据的灵活数据类型;借助现已正式发布的 Variant 拆分功能,它可提供媲美结构化数据的查询性能。 使用 Variant 从流源(Kinesis、事件中心)、REST API 和无架构数据库引入半结构化数据,同时保持高性能查询访问。
从 Databricks Runtime 17.3 开始,当您创建包含 VARIANT 列的新表时,将自动启用 Variant 分解。 为了通过变体统计信息收集和数据跳过获得最佳查询性能,Databricks 建议使用 Databricks Runtime 18.1 或更高版本。 请参阅 使用变体粉碎来优化性能。
事务处理现已正式可用
2026 年 7 月 22 日
写入 Unity Catalog 托管 Delta 表的事务现已正式可用。 使用 BEGIN ATOMIC ... END; 或 BEGIN TRANSACTION; ... COMMIT; 语法将一个或多个表中的多个 SQL 语句分组到单个原子事务中。 所有更改要么一起成功,要么一起回滚,从而确保在操作过程中数据的一致性。 事务要求在参与事务的表上启用 目录提交。 向 Unity Catalog 托管的 Iceberg 表写入的事务仍处于私有预览阶段。
请参阅 事务。
过期服务主体令牌的电子邮件通知现已正式发布
2026 年 7 月 22 日
Azure Databricks 现会在服务主体令牌将在七天内过期时自动发送电子邮件通知。 由于服务主体没有自己的邮箱,因此Azure Databricks将这些通知发送给工作区管理员。 仅会向有效期超过七天且至少已使用过一次的服务主体令牌发送通知。 无需配置。
请参阅 服务主体令牌过期通知。
目录中可用的 samples Databricks 托管示例数据集
2026 年 7 月 22 日
已挂载到 DBFS 的示例数据集 /databricks-datasets 现在也可在 samples 目录中以 samples.databricks.datasets 的形式获取,并通过 OpenSharing 提供。
datasets卷中包含一组由 Azure Databricks 提供的数据集,可用于构建和测试数据管道。
samples 目录可在已启用 Unity Catalog 的工作区中使用。 有关目录中可用的 samples 示例数据集的详细信息,请参阅 示例数据集。
覆盖针对单次刷新的 REPLACE WHERE 谓词
2026 年 7 月 22 日
现在,可以通过向REPLACE WHERE命令添加WHERE子句,仅针对单次刷新覆盖独立流式表已定义的REFRESH STREAMING TABLE谓词。 此覆盖仅适用于该次刷新,不会更改表定义,这对于一次性回填和修正非常有用。 这仅在使用 FLOW REPLACE WHERE 子句创建的独立流式处理表上受支持。 请参阅刷新(具体化视图或流式处理表)。
基于角色的访问控制(RBAC)现已进入公共预览阶段
2026 年 7 月 22 日
基于角色的访问控制(RBAC)现在以公共预览版提供。 RBAC 允许用户在 Azure Databricks 中承担某个角色,并在会话期间仅使用该角色的权限,而不是用户自身累积的权限。 这将实现独占访问。 用户必须积极扮演一个角色来访问敏感数据,从而阻止他们以自己的身份访问敏感数据,并在用例、临床试验、项目或客户端之间混合数据。
若要启用 RBAC,帐户管理员会在帐户级别打开预览版。 然后,工作区管理员在每个工作区中启用它。
性能密集型产品的网络费用
2026 年 7 月 22 日
Azure Databricks 现开始针对 Lakebase、OpenSharing SecureConnect、Zerobus 和文件 API 等性能密集型产品,就回传到客户端的跨区域及经由公共互联网传输的数据出站流量收费。 客户端入站流量和同一区域出站流量不收费。 无论客户使用的是无服务器计算还是经典计算,此费用均适用于使用这些产品的所有客户。 若要跟踪这种使用情况,可计费使用情况系统表会将 recipient_id、associated_product 和 networking_client 字段添加到 usage_metadata 中。 请参阅 了解 Databricks 网络成本。
Genie One 计费使用情况更正
2026 年 7 月 21 日
Genie One 的使用在 2027 年 1 月 31 日免费。
从 2026 年 7 月 21 日开始,Databricks 将应用更正,以便 Genie One 使用情况在整个计费数据和预算中正确反映为免费:
系统表:更正记录会写入
system.billing.usage,用于冲销此前 Genie One 和 Genie Agents 的已计费用量,从而使汇总后的可计费用量为零。 请参阅 记录类型引用。预算:Genie One 的成本不纳入预算管控。 因此,预算 UI 中显示的支出将略有下降。 在某些情况下,先前超出预算阈值的用户在扣除其 Genie One 成本后,可能会重新降回到该阈值以下。
这是一次性调整。
针对工作区公共访问的基于上下文的入口控件现已正式发布
2026 年 7 月 21 日
适用于工作区公共访问的基于上下文的入站控制现已正式发布。 使用允许和拒绝规则控制谁可以访问工作区终结点,这些规则允许你合并标识、网络源和请求类型。
在笔记本注释中提及 Genie Code
2026 年 7 月 20 日
现在可以在笔记本注释中提及 Genie Code,而无需离开批注线程即可获取 AI 帮助。 键入 @ 批注,选择 Genie Code,然后输入请求。 Genie Code 直接在线程中回复。 请参阅 代码注释。
Microsoft Teams中的 Databricks Genie 应用现在以公共预览版提供
2026 年 7 月 17 日
Microsoft Teams中的 Databricks Genie 应用现在以公共预览版提供。 应用将 Genie 引入Microsoft Teams,以便用户可以提出数据问题并获取答案,而无需离开Microsoft Teams。
连接并管理任何外部模型提供商
2026 年 7 月 17 日
通过Unity Gateway连接和管理任何外部模型提供商(如OpenAI、Anthropic、Amazon Bedrock,以及Meta的新发布型号Muse Spark 1.1)。 只需将供应商注册为受管控的 Unity 目录安全化对象,每个团队即可通过 Unity Gateway 查询,享有完整的治理和可观察性。
通过外部模型供应商,你会得到:
- 选择:第一天就采用任意模式,并在不同模式或兼容OpenAI的供应商之间切换,无需重新整合。
-
控制:通过标准的
GRANT和REVOKE(EXECUTE用于查询,MANAGE用于更新)来控制访问,并附加适用于每个请求的速率限制和防护措施。 - 清晰度:使用和支出跟踪默认开启,包含代币数量、延迟和每个用户、团队或应用的成本归因。 将推理表连接,将完整的请求和响应负载记录到受控的Delta表。
Unity Catalog 中的 Scala 和 Java UDF 现已正式可用
2026 年 7 月 16 日
在 Unity 目录中注册 Scala 和Java用户定义的函数(UDF),并通过 Unity 目录治理在笔记本、作业和 SQL 仓库中重复使用它们。 重用现有的 JVM 逻辑,并在所有计算环境(包括无服务器)中获得比 Python UDF 更好的性能。
请参阅 Unity 目录中的 Scala 和Java用户定义的函数(UDF)。
Unity 目录中的MLflow跟踪存储现已普遍可用
2026 年 7 月 16 日
Unity 目录表中的MLflow跟踪存储现已普遍可用。 Databricks 建议将 trace 存储在 Unity Catalog 中,适用于新建和生产工作负载:存储无限,跟踪以 OpenTelemetry (OTel) 格式存储,访问通过 Unity Catalog 的模式和表权限管理,并且你可以使用 SQL、Genie、AI/BI 仪表盘以及任何基于 Spark 的工具查询跟踪。 若要查看跟踪,请将 MLflow 试验指向 Unity 目录跟踪位置。 有关支持的区域,请参阅 具有有限区域可用性的功能。
Google Gemini 3 Pro 已停用
2026 年 7 月 16 日
谷歌双子座 3 专业版即将停用。 Gemini 3.1 Pro 是推荐的替代方案。 有关迁移指南,请参阅已弃用和停用的模型。
Genie One 和 Genie Agents 的使用权在 2027 年 1 月 31 日前免费开放
2026 年 7 月 15 日
截至 2026 年 7 月 15 日,Genie One 的计费已暂停,这些产品的使用将免费到 2027 年 1 月 31 日。 预算控制不适用于它们。
Azure Databricks帐户的自定义 URL (公共预览版)
2026 年 7 月 15 日
现在可以为所有用户和工作区声明并启用自定义 URL,以便为Azure Databricks帐户提供单一品牌入口点(例如acme.databricks.com)。 请参阅为Azure Databricks帐户提供自定义 URL。
AI 搜索高 QPS 功能现已正式发布
2026 年 7 月 15 日
AI Search High QPS 现已正式发布,支持标准端点。
在标准 AI 搜索终结点上设置目标 QPS,以支持高吞吐量、实时工作负载,例如搜索栏、建议系统和实体匹配。 默认启用高 QPS,但不会影响现有端点。 仅当为端点配置目标 QPS 时,额外容量及其相关成本才会适用。
2026 年 7 月 14 日
基于上下文的入口控件现在支持 合作伙伴平台 作为网络源。 选择合作伙伴平台以允许列出第三方应用用于连接到Azure Databricks的 IP,包括Power BI、Tableau Cloud 和 dbt 平台。 Azure Databricks自动管理和更新这些 IP 列表。
Trigger.AvailableNow 对 OpenSharing 流式处理的支持 (GA)
2026 年 7 月 14 日
从 OpenSharing 表中进行的流式读取现已支持 Trigger.AvailableNow 触发器。 此触发器在启动时捕获共享表的当前版本,在一个或多个微批次中处理所有可用数据(遵循 maxFilesPerTrigger 和 maxVersionsPerRpc 设置),然后停止,因此非常适合按计划执行的、类似批处理的增量处理。 此前,OpenSharing 源中的 Trigger.AvailableNow 已转换为 Trigger.Once,后者每次运行处理一个微批次。 此功能需要 Databricks Runtime 18.0 或更高版本。
对于 Databricks 到 Databricks 接收方,请参阅 使用 Apache Spark Structured Streaming 查询表;对于开放共享接收方,请参阅 使用 Spark Structured Streaming 访问共享表。
查看仓库活动详细信息(正式上线)
2026 年 7 月 13 日
SQL 仓库监视 UI 中的 “活动详细信息 ”切换现已正式发布。 在 “正在运行的群集 ”图表上查看颜色编码的批注,解释仓库为何保持活动状态,包括查询活动、提取查询、打开会话和空闲状态。 将鼠标悬停在条形上以查看元数据,或单击“提取活动”以筛选查询历史记录表。 请参阅 活动详细信息。
Unity 目录中的机密(公共预览版)
2026 年 7 月 10 日
现在,您可以在 Unity Catalog 中将机密作为可保护对象进行存储、治理和访问。 Unity 目录机密使用三级命名空间(catalog.schema.secret)并受 Unity 目录特权控制,因此可以应用用于其他数据资产的相同访问控制和审核。
自定义模型服务端点的 Protobuf 张量输入(公开预览)
2026 年 7 月 9 日
对于具有基于张量的输入签名的自定义模型服务端点,你现在可以将请求正文作为序列化的 KServe v2ModelInferRequest 与 Content-Type: application/x-protobuf 发送,而不再使用 JSON。
此功能为 公共预览版 ,仅在 2026 年 7 月 9 日之后部署的终结点上可用。
现已默认向启用了合规性安全配置文件的工作区提供 Databricks SQL 警报
2026 年 7 月 9 日
Databricks SQL 警报现已支持 Azure Databricks 所支持的所有合规性安全配置文件标准,并且对于启用了合规性安全配置文件的工作区默认可用。
使用 Databricks SQL 警报通过按计划运行查询、评估条件以及满足条件时通知收件人来监视数据和 KPI。
请参阅 Databricks SQL 警报。
对象元数据列现在以公共预览版提供
2026 年 7 月 8 日
该 _object_metadata 列现已进入公开预览版阶段。 该 _object_metadata 列是隐藏的元数据列,用于公开云存储中对象的对象级别属性,包括 MIME 类型、ETag、用户定义的键值元数据、系统定义的元数据和对象标记。 它从 Databricks Runtime 18.1 开始可用。
Google Gemini 2.5 Flash 和 Pro 计划停用
2026 年 7 月 8 日
谷歌 Gemini 2.5 闪存和 Gemini 2.5 Pro 将于 2026 年 10 月 2 日退役。 推荐的替换型号是Gemini 3.1 Pro或Gemini 3.5闪存。
Anthropic Claude Sonnet 4 计划退役
2026 年 7 月 8 日
Anthropic Claude Sonnet 4 将于 2026 年 10 月 9 日退休。 Claude Sonnet 4.6 是推荐的替代方案。
REPLACE WHERE 流程现已正式发布
2026 年 7 月 7 日
REPLACE WHERE 用于管道和独立流式表的 Flows 现已正式可用。 使用它们在每次刷新时仅替换匹配谓词的行,而无需重新处理整个表的历史记录。
托管 Iceberg 物化视图现已进入公开预览阶段
2026 年 7 月 7 日
现在可以创建与外部 Iceberg 读取器兼容的物化视图。 此功能目前以公共预览版提供。 若要启用它,请联系 Databricks 帐户团队。 请参阅 创建与外部 Iceberg 读取器兼容的物化视图。
现已默认支持 Excel 文件格式
2026 年 7 月 7 日
Excel文件格式支持现已在所有工作区中默认提供。 无需外部库或手动转换,即可直接使用内置支持引入、分析和查询.xls.xlsx以及.xlsm文件。 请参阅读取和流式传输Excel文件。
在中国Azure配置无服务器出口控制
2026 年 7 月 7 日
现在可以在由世纪互联(Mooncake)运营的Azure中配置无服务器出口控制,以管理来自无服务器计算的出站网络连接。 无服务器出站控制仅在“中国东部 2”区域可用,并且工作区必须位于“中国东部 2”区域中。 请参阅 什么是无服务器出口控制? 以及 管理无服务器出口控制的网络策略。
现在支持在作业中刷新物化视图或流式表时使用标准性能模式
2026 年 7 月 6 日
通过 Lakeflow 作业中的 SQL 任务 进行编排的物化视图和流式表刷新操作现在会遵循该作业的 性能优化 设置。 关闭设置后,刷新将使用标准性能模式,这消耗的 DBU 更少。
有关计划刷新的性能模式的详细信息,请参阅 选择计划刷新的性能模式。
预算现已正式发布
2026 年 7 月 6 日
包括Unity Gateway预算在内的预算现已普遍可用。
预算允许管理员定义支出阈值。 对于通过 Unity AI Gateway 管理的请求(包括 Genie 交互),管理员可以设置额外的每用户阈值和覆盖设置,并配置诸如电子邮件告警和阻止使用等操作。
请参阅创建和监视预算。
Lakeflow Connect 行级筛选现已正式可用
2026 年 7 月 2 日
Lakeflow Connect 中的行筛选现已正式可用。 行筛选允许你仅引入所需的行,方法是应用类似于 SQL WHERE 子句的条件、提高性能和最大程度地减少数据重复。 行筛选在初始加载和后续增量更新期间均适用,SaaS 连接器(包括 Google Analytics、Salesforce 和 ServiceNow)以及所有基于查询的连接器都受支持。