2022 年 11 月
这些功能和 Azure Databricks 平台的改进已于 2022 年 11 月发布。
注意
下面列出的发行日期和内容在多数情况下只对应于 Azure 公有云的实际部署。
其中提供了 Azure 公有云上 Azure Databricks 服务的演进历史记录以供参考,这些内容可能不适用于由世纪互联运营的 Azure。
注意
发布分阶段进行。 Azure Databricks 帐户可能要等到初始发布日期后的一周或更长时间才会更新。
Azure Databricks 作业的增强通知(公共预览版)
2022 年 11 月 30 日 - 12 月 7 日
现在可以使用 Webhook 或本机 Slack 通知发送重要作业运行事件的通知。 此功能增强了作业运行事件的现有电子邮件通知支持。 有关详细信息,请参阅针对作业事件添加电子邮件和系统通知。
Databricks Runtime 12.0 (Beta)
2022 年 11 月 28 日
Databricks Runtime 12.0 现在以 Beta 版本提供。
请参阅 Databricks Runtime 12.0 (EoS) 和用于机器学习的 Databricks Runtime 12.0 (EoS)。
现在可以通过管理员设置禁用上传数据 UI
2022 年 11 月 17 日
用于禁用上传数据 UI 的工作区管理员设置现在适用于新的上传数据 UI 和旧版 DBFS 文件上传 UI。 此设置适用于数据科学与工程、Databricks 机器学习和 Databricks SQL 角色。
Unity Catalog 的 Partner Connect 支持已正式发布
2022 年 11 月 14 日
现在,可以使用 Partner Connect 将选择的合作伙伴解决方案连接到 Unity Catalog 管理的数据。 有关受支持的合作伙伴的列表,请参阅 Azure Databricks Partner Connect 合作伙伴。
使用带稀疏签出的大型存储库
2022 年 11 月 14 日
Repos 中的稀疏签出支持让你可以在 Azure Databricks 中克隆并使用远程存储库的一部分目录。 如果你使用的是单存储库,或者存储库的大小超出了 Databricks 支持的限制,这会很有用。
有关详细信息,请参阅在 Repos 中配置稀疏签出模式。
Databricks Terraform 提供程序已更新到版本 1.6.5
2022 年 11 月 11 日
版本 1.6.5 会将 query_plan
参数添加到 databricks_sql_visualization
资源,使用新的 name
筛选器在 databricks_job
数据源中按名称搜索作业,以及执行其他操作。 有关详细信息,请参阅版本 1.6.5 的更改日志。
在“美国西部”区域创建无服务器 SQL 仓库
2022 年 11 月 10 日
无服务器 SQL 仓库现已在“美国西部”区域推出。
Databricks Terraform 提供程序已更新到版本 1.6.3 和 1.6.4
2022 年 11 月 7 日至 9 日
版本 1.6.3 和 1.6.4 将 warehouse_type
参数添加到 databricks_sql_endpoint
资源,以支持其他 Databricks SQL 仓库类型以及其他功能。 有关详细信息,请参阅版本 1.6.3 和 1.6.4 的更改日志。
在目录和架构级别为 Unity Catalog 托管表指定云存储位置
2022 年 11 月 18 日
Unity Catalog 现在允许使用目录资源管理器在目录和架构级别为托管表指定云存储位置。 很快,你将能够使用 SQL 语句执行相同的操作。 请参阅创建目录和创建架构。
从工作区顶部栏中的搜索字段访问最近使用过的对象
2022 年 11 月 8 日至 14日
单击 Azure Databricks 工作区顶部栏中的“搜索”字段时,最近使用过的文件、笔记本、查询、警报和仪表板现在就会列在“最近使用”下,按上次打开日期排序。 根据搜索条件筛选列表中最近使用过的对象。 有关详细信息,请参阅搜索结果页。
“通过文件上传创建或修改表”页现在支持多个文件
2022 年 11 月 8 日
现在可以使用“通过文件上传创建或修改表”页将最多 10 个文件同时加载到 Delta 表中。 请参阅使用文件上传创建或修改表。
“从文件上传页创建或修改表”页现在支持覆盖
2022 年 11 月 8 日
现在可以使用“通过文件上传创建或修改表”页来创建或覆盖托管 Delta 表。 请参阅使用文件上传创建或修改表。
使用作业 API 2.1 按名称搜索作业
2022 年 11 月 3 日
现在,可以使用作业 API 中的列出所有作业操作 (GET /jobs/list
) 按作业名称进行筛选。
Databricks Terraform 提供程序已更新到版本 1.6.2
2022 年 11 月 2 日
版本 1.6.2 将 runtime_engine
添加到 databricks_cluster
资源、将针对 path
进行的验证添加到 databricks_repo
资源、将自动检测 AWS CodeCommit URL 的功能添加到 databricks_repo
资源,等等。 有关详细信息,请参阅更改日志。
在 Unity Catalog 中搜索表的功能已正式发布
2022 年 11 月 1 日
现在,可以在 Azure Databricks 工作区 UI 中使用每个页面顶部的搜索对话框搜索在 Unity Catalog 中注册的表。 可以按表名、表注释、列名和列注释进行搜索。 搜索结果中仅显示你有权查看的表。 目录资源管理器中不再有单独的表搜索功能。
有关详细信息,请参阅搜索工作区对象。