通过

Delta Live Tables 版本 2023.16

  • 项目

2023 年 4 月 24 - 28 日

这些功能和改进已随 Delta Live Tables 版本 2023.16 一起发布。

此版本使用的 Databricks Runtime 版本

通道：

  • 当前版本（默认）：Databricks Runtime 11.3.10
  • 预览版：Databricks Runtime 12.2.3

此版本中的新功能和改进

  • Unity Catalog 的增量实时表支持目前以公共预览版提供。 可以将 Unity Catalog 与 Delta Live Tables 管道配合使用来实现以下目的：

    • 在 Unity Catalog 中定义一个目录，管道将在其中持久保存表。
    • 从 Unity Catalog 表读取数据。

    请参阅将 Unity Catalog 与 Delta Live Tables 管道配合使用。

  • 默认情况下，流式处理表需要“仅追加”源。 此版本引入了 skipChangeCommits 标志，该标志可以在目标流式处理表上设置，以在源表需要进行更新或删除时忽略源流式处理表中的更改。 请参阅将流式处理表配置为忽略源流式处理表中的更改。

  • 在此版本中，工作区中的并发更新限制提高到 100。 以前的并发更新限制为 20。

  • 由世纪互联运营的 Azure 的区域现在支持 Delta Live Tables。

  • 从管道笔记本运行 Delta Live Tables 管道时，现在可以在笔记本边栏中查看事件日志。 请参阅在笔记本中开发和调试增量实时表管道。

此版本中的 bug 修复

  • 此版本修复了在搜索框中输入“%”字符时导致管道列表页崩溃的 bug。