Lakeflow 声明性管道版本 2023.35

2023 年 9 月 18 日 - 2023 年 10 月 4 日

这些功能和改进在 2023.35 版的 Lakeflow Declarative Pipelines(声明式管道)中发布。

此版本使用的 Databricks Runtime 版本

渠道:

  • 当前版本(默认):Databricks Runtime 12.2.12
  • 预览版:Databricks Runtime 12.2.12

此版本中的新功能和改进

  • 配置为使用当前频道的管道现在支持 Unity Catalog。 对于不需要那些仅在 preview 频道中受支持的功能的支持 Unity Catalog 的管道,Databricks 建议将频道更新为 current。 请参阅 将 Unity 目录与 Lakeflow 声明性管道配合使用

  • 在此版本中,create_update 事件在 start_request 事件之后发出。 以前,create_update 事件是首先发出的。 此更改反映了管道生命周期中这些事件的实际排序。

此版本中的漏洞修复

  • 此版本修复了导致 DBSQL 创建管道在默认目录或架构不可用时失败的 bug,即使管道指定了非默认目录和架构也是如此。