增量实时表版本 2024.49

2024 年 12 月 9-12 日

这些功能和改进随增量实时表版本 2024.49 一起发布。

此版本使用的 Databricks Runtime 版本

通道:

  • 当前(默认):Databricks Runtime 15.4
  • 预览:Databricks Runtime 15.4

注意

由于 Delta Live Tables 频道版本遵循滚动升级过程,因此频道升级会在不同时间部署到不同的区域。 你的版本(包括 Databricks Runtime 版本)可能在初始发布日期的一周或更长时间后才会更新。 若要查找某个管道的 Databricks Runtime 版本,请参阅运行时信息

新增功能和改进

  • 现在可以为已启用了 Unity Catalog 的管道配置单节点计算。 配置单节点计算时,通过在与 Spark 驱动程序相同的节点上运行 Spark 作业,将运行管道所需的最小节点数从两个节点减少到一个节点。 若要配置单个节点群集,请将 min_workersmax_workers 设置为 0。 请参阅创建单节点群集

  • 此版本在删除具体化视图或流式表时包括以下更改。 从管道中移除具体化视图或流式处理表的定义或在目录资源管理器中删除具体化视图或流式处理表时,可能会删除具体化视图或流式处理表:

    • 恢复具体化视图或流式处理表定义的时间缩短至 7 天。 该时间段与 Unity Catalog 管理的表相同。 7 天后,声明具有相同名称的具体化视图或流式处理表将创建新的具体化视图或流式处理表。
    • 删除的具体化视图或流式处理表中的基础数据在 30 天后被移除。

Bug 修复

  • 此版本修复了在尝试创建名称中具有连字符的具体化视图时导致错误的 bug,即使在将名称括在反引号中时也是如此。 例如,如果不进行此修复,以下语句将生成错误:CREATE MATERIALIZED VIEW my_catalog.my_schema.`mv-hyphen` AS...