了解即将发布的Azure Databricks版本中的功能和行为更改。
即将发生的重大变化:删除 Unity Catalog 管道时的默认行为
在即将发布的版本中,删除 Unity 目录管道时的默认行为将发生更改。 目前,删除管道还会删除所有关联的物化视图、流表和视图。 在更改之后,相关表格将被保留,但在管道被删除后将处于非活动状态。 API 还会更改以默认保留表,但将 cascade 字段设置为 true 替代此字段并保留当前行为。
该 cascade 字段现已可用。 若要保留删除管道时删除所有表的当前行为,请更新代码以设置 cascade=true。
新的 SQL 编辑器默认启用和旧版 SQL 编辑器停用
自 2025 年 10 月以来,新的 SQL 编辑器已正式发布。 作为转换到新编辑器的一部分,计划进行以下更改:
- 从 2026 年 5 月下旬开始:默认为所有工作区启用新的 SQL 编辑器。 在工作区级别关闭该功能的功能将不再可用。 在此时间段开始后,单个用户仍能够将其查询切换到旧版 SQL 编辑器。
- 从 2026 年 7 月下旬开始:旧版 SQL 编辑器将停用。 所有用户都将使用新的 SQL 编辑器,并且将不再提供单个选择退出。
若要详细了解新的 SQL 编辑器,请参阅 “写入查询”,并浏览新 SQL 编辑器中的数据。 如果对此转换有疑问,请联系你的帐户团队。
列出仪表板 API 更改排序顺序
在即将发布的版本中, 新版列表仪表板 API 将更改结果的排序顺序。 仪表板将按上次修改日期的逆序返回,首先显示最近修改的仪表板,而不是按标题字母顺序。
对于使用 next_page_token分页结果的用户,这是一项重大更改。 以前版本的 API 生成的令牌在新版本中无效。 如果使用以前版本中的令牌,API 将返回错误:
Invalid page_token: this token was generated by a previous/different API version. Please retry without page_token.
若要在此更改后继续分页,请启动一个不包含next_page_token的新请求。
公开 Delta Sharing 接收方令牌的更改
开放收件人的增量共享将转换为新的特定于收件人的 URL 格式。 转换日期已更新,现已于 2026 年 7 月 1 日更新。 2026 年 7 月 1 日或之后创建的新令牌将自动使用新的 URL 格式。 此更改可提高网络安全,并允许收件人配置特定于收件人的网络策略和防火墙规则。
对于Azure中国,过渡将于稍后公布。
新 URL 包括域中的收件人 ID:
https://<recipient-id>.delta-sharing.chinaeast2.databricks.azure.cn/api/2.0/delta-sharing/metastores/<metastore-id>
有关参考,此更改之前创建的 URL 不包含收件人 ID。
https://chinaeast2.databricks.azure.cn/api/2.0/delta-sharing/metastores/<metastore-id>
旧 URL 将继续工作一段时间。 具体持续时间取决于收件人类型和令牌创建日期。 在旧 URL 格式无效之前,数据提供程序应转换为新的 URL 格式。
OIDC 联邦身份验证共享:
数据提供程序需要在 2027 年 7 月 1 日之前验证其收件人是否使用新的 URL 格式。 从 2026 年 7 月 1 日起,服务提供商可以在 Delta Sharing UI 中找到新的 URL。 2027 年 7 月 1 日之后,旧 URL 格式将无效。
持有者令牌共享:
| 令牌创建日期 | URL 格式 | 令牌过期日期 | 建议的操作 |
|---|---|---|---|
| 2026 年 7 月 1 日之前 | 旧格式 | 从创建日期起一年,或者直到 2026 年 12 月 8 日,以较晚者为准。 | 数据提供程序需要在过期前 轮换令牌 才能迁移到新的 URL 格式。 若要为收件人提供迁移时间,请在轮换期间为当前令牌设置到期日期来配置停机时间窗口。 在此期间支持旧 URL 格式和新 URL 格式。 |
| 2026 年 7 月 1 日之后 | 新格式 | 根据您的配置,最多可从创建日期算起一年。 | 没有 |
市场提供商的新创建向导
2026 年 3 月下旬,市场提供商控制台列表创建体验将从其当前格式更新为引导式分步向导。 此更改简化了创建新市场列表的过程。
样本数据浏览器将于3月下旬正式发布
2026 年 3 月下旬,带有 Genie Code 的 Sample Data Explorer 将正式发布。 使用 Sample Data Explorer,您可以通过嵌入式自然语言界面对 Unity Catalog 中的表格进行询问。
符合性安全配置文件启用的某些工作区将默认提供数据分类功能。
在 2026 年 3 月中旬,默认情况下,数据 分类 将适用于启用了符合性安全配置文件的工作区,并且选择了 HIPAA 控件。
EventBridge 支持即将可用于提供的文件事件队列
2026年2月下旬,EventBridge 支持将可用于提供 S3 位置的文件事件队列。 目前,只能使用 SNS 设置文件事件,或者将存储事件直接路由到 SQS。
增强安全和合规性客户将默认获得监督代理。
启用了合规性安全配置文件并选择了 HIPAA 控件的工作区的监督程序代理将默认启用。
使用监督代理创建一个多代理监督系统,该系统协调 AI 代理和工具,共同处理复杂的任务。
ADBC 将成为新Power BI连接的默认驱动程序
从 2 月开始,在 Power BI Desktop 或 Power BI 服务中创建的新连接将默认使用 Arrow Database Connectivity (ADBC) 驱动程序。 除非手动将其更新为 ADBC,否则现有连接将继续使用 ODBC。
如果想要继续使用 ODBC 进行新连接,有两个选项:
- 创建连接时,选择
default为 “实现”。 - 在 Power BI Desktop 中,禁用 ADBC 预览功能,这将把 ODBC 还原为所有新连接的默认选项。
若要了解有关 ADBC 的详细信息,请参阅 Configure ADBC 或 ODBC driver for Power BI 和 ADBC 存储库中的 Databricks Driver。
作业时间线表的新切片逻辑
从 2026 年 1 月 19 日开始,作业时间线表使用新的时钟小时对齐切片逻辑。 时间切片现在与标准整点时间边界(如下午 5:00-6:00、下午 6:00-7:00 等)对齐,而不是基于运行开始时间的一小时间隔。 新行将使用新的切片逻辑,而现有行保持不变。
目录浏览器导航更新
目录资源管理器将很快收到导航改进,以简化工作流,并帮助你更有效地发现和管理数据资产。
简化的导航:
删除重复目录选项卡以减少冗余并专注于单个目录导航图面。
DBFS 和 发送反馈 将被移动到 以实现更简洁的布局。
新的建议部分:
目录资源管理器登录页上的新“建议”选项卡突出显示常用对象、面向首次使用者的对象示例以及用户收藏夹。 这能帮助您快速重新利用重要资产,并且能提供有用的起点选择。
合并入口点:
相关功能分组在更清晰的类别下,以减少视觉干扰并提高可查找性:
- 治理 - 治理标记、元存储管理和数据分类的入口点
- 连接 - 外部位置、外部数据、凭据和连接的切入点
- 共享 — Delta Sharing和清洁室的接入点
这些分组取代分散的子选项卡,并创建更直观的可缩放信息体系结构。
Lakehouse 联邦共享和默认存储
Lakehouse 联邦上的 Delta 共享目前处于 Beta 阶段,允许 [Delta 共享] 的数据提供者共享非本地目录和表。 默认情况下,数据必须暂时具体化并存储在默认存储(个人预览版)。 目前,用户必须在帐户控制台中手动启用 “Delta Sharing for Default Storage - Expanded Access” 功能,才能使用 Lakehouse 联邦共享。
在所有 Azure Databricks 用户中,默认启用Default Storage - Expanded Access 的 Delta Sharing后,允许默认存储的区域将自动支持 Lakehouse Federation 上的 Delta Sharing。
请参阅 向共享添加外部架构或表。
在工作区重新加载通知
在即将发布的版本中,如果工作区选项卡长时间打开且未刷新,则会显示用于重新加载工作区选项卡的消息。 这有助于确保您始终使用包含最新功能和修复的最新版本的 Databricks。
适用于Azure Databricks的 SAP Business Data Cloud (BDC) 连接器即将正式发布
适用于 Azure Databricks 的 SAP Business Data Cloud (BDC) 连接器是一项新功能,它允许您使用 Delta Sharing 在 SAP BDC 和 Azure Databricks 之间共享数据。 此功能将于 9 月底正式发布。
默认存储系统上的 Delta Sharing 表功能即将默认启用(Beta 版)
默认存储的此更新扩展了Delta Sharing的共享功能,允许提供程序将默认存储支持的表共享给任何Delta Sharing收件人(无论是开放平台还是Azure Databricks),包括使用经典计算的收件人。 此功能目前为 Beta 版,要求服务提供者在帐户控制台中手动启用 默认存储的 Delta 共享 - 扩展访问。 不久,默认情况下,将为所有用户启用此功能。
对出站控制平面公共 IP 的更新
Azure Databricks 正在更新 outbound 控制平面公共 IP 和 Azure 服务标签,以提升安全性和区域可用性。 这些更改是自 2025 年 5 月 20 日开始推出的控制平面更新的一部分。
如果你的组织使用资源防火墙来控制入站访问:
- 如果防火墙规则引用 Azure Databricks service tag,则无需执行任何操作。
- 如果允许特定的控制平面公共 IP,则必须在 2025 年 9 月 26 日前添加所有出站控制平面 IP。
继续支持之前的出站控制平面 IP。
自动加载器增量目录列表选项的行为改变
注释
自动加载器选项cloudFiles.useIncrementalListing已经被弃用。 尽管此说明讨论了对选项默认值的更改,以及如何在此更改后继续使用它,但 Databricks 建议不要使用此选项,转而使用 文件事件的文件通知模式。
在即将发布的 Databricks Runtime 版本中,弃用的自动加载程序 cloudFiles.useIncrementalListing 选项的值将默认设置为 false。 将此值设置为 false 使自动加载程序每次运行时执行完整目录列表。 目前,cloudFiles.useIncrementalListing 选项的默认值为 auto,指示自动加载程序尽最大努力检测是否可以将增量列表与目录一起使用。
若要继续使用增量列表功能,请将 cloudFiles.useIncrementalListing 选项设置为 auto。 将此值 auto设置为时,自动加载程序会尽力尝试每七个增量列表执行一次完整列表,这与此选项在更改之前的行为匹配。
若要了解有关自动加载程序目录列表的详细信息,请参阅 在目录列表模式下配置自动加载程序流。
删除 Lakeflow Spark 声明性管道中的数据集定义时的行为变化
即将发布的 Lakeflow Spark 声明性管道在从管道中删除具体化视图或流表时会更改其行为。 通过此更改,下次管道更新运行时,不会自动删除已移除的具体化视图或流式处理表。 相反,你可以使用 DROP MATERIALIZED VIEW 命令删除具体化视图,或使用 DROP TABLE 命令删除流式处理表。 删除对象后,运行管道更新不会自动恢复该对象。 如果将具有相同定义的具体化视图或流式处理表重新添加到管道,则会创建一个新对象。 但是,可以使用 UNDROP 命令恢复对象。
审核日志中的 sourceIpAddress 字段将不再包含端口号
由于某个 bug,某些授权和身份验证审核日志在 sourceIPAddress 字段中除了包含 IP 之外,还包含端口号(例如 "sourceIPAddress":"10.2.91.100:0")。 端口号记录为 0,不提供任何实际值,并且与 Databricks 审核日志的其余部分不一致。 为了增强审核日志的一致性,Databricks 计划更改这些审核日志事件的 IP 地址格式。 此更改将从 2024 年 8 月初开始逐步推出。
如果审核日志包含 sourceIpAddress 的 0.0.0.0,Databricks 可能会停止记录该日志。