Azure Databricks 平台发行说明
-
- 使用新的资源配额 API,针对配额监视 Unity Catalog 对象使用情况
- MPT 7B Instruct 和 MPT 30B Instruct 模型停用
- 由 Azure Databricks 助手替换的 AskSupport
- 添加到帐户控制台的可导入成本管理仪表板(公共预览版)
- Lakeflow 系统表通过其他列进行了扩展
- Python 代码格式错误突出显示
- Delta Sharing:Python 和 Power BI 连接器现在支持更多 Delta Lake 功能
- Delta Sharing 增加了对 TimestampNTZ 的支持
For each
Azure Databricks 作业 任务已正式发布- 工作区管理员的 Azure RBAC 权限
- Databricks Runtime 15.4 LTS 已正式发布
- 个性化笔记本自动完成
- 为作业计算配置工作区的默认访问模式
- Databricks 助手的新 / 命令
- 工作区搜索现在支持卷
- Meta Llama 3.1 405B 模型在 Mosaic AI 模型训练中受支持
- Databricks JDBC 驱动程序 2.6.40
- 如果 90 天后未使用,Databricks 个人访问令牌将被吊销
- 群集 API 现在支持部分配置更新
- 笔记本单元格中的换行
- 指定要同步 Mosaic AI 矢量搜索的列
- 工作区文件夹中的文件不能再具有相同的名称
- 计算策略强制实施现已可用
- 基础模型 API(按令牌付费)现已正式发布
- 使用 Databricks Clean Rooms(公共预览版)安全且私密地在数据项目上进行协作
- Mosaic AI 矢量搜索现在符合 HIPAA
- 在笔记本和查询结果表中设置列格式
- 行筛选器和列掩码现已正式发布,包含改进
- Lakehouse Federation 已正式发布 (GA)
-
- 同时任务的限制增加
- 在笔记本中嵌入和拖放图像
- 笔记本中提供的命令面板
- 工作流系统架构已重命名为
lakeflow
- LakeFlow Connect(封闭的公共预览版)
- 对 Cloudflare R2 存储的支持已正式发布
- 使用系统表监视 Databricks 助手活动(公共预览版)
- 使用 Delta Sharing 的共享架构现已推出正式版
- Mosaic AI 代理框架在
northcentral
和chinaeast2
中可用 - Databricks 助手可以诊断作业问题(公共预览版)
- Databricks Git 文件夹身份验证和共享行为更新
- 群集库安装超时
- 必须将计算平面出站 IP 地址添加到工作区 IP 允许列表
- Databricks Runtime 9.1 系列支持期已延长
- Lakehouse Federation for SQL Server 支持单一登录 (SSO)
- 使用 Delta Sharing 的模型共享现已正式发布
- 使用 Delta Sharing 共享注释和主键约束
- 新的 Databricks JDBC 驱动程序 (OSS)
- Databricks Runtime 15.4 LTS(Beta 版本)
- Scala 在 Unity Catalog 共享计算上为正式发布版
- 单用户计算支持精细访问控制、具体化视图和流式处理表
- 现已推出节点时间线系统表(公共预览版)
- 模型服务现已支持 Meta Llama 3.1
- 笔记本:切换更具可见性的单元格标题
- 工作区资产名称中的
/
已弃用 - 增量共享允许共享使用 liquid 聚类分析的表
- 现已推出查询历史记录系统表(公共预览版)
- 漏洞扫描报告现在会通过电子邮件发送给管理员
- Unity Catalog 外部表的分区元数据记录
- 适用于 Python 的 Databricks Connect 现在支持无服务器计算
- 使用自然语言提示筛选数据输出
- 对外部模型的纯文本机密支持
- 使用
ai_forecast()
预测时序数据 - 对包含多语句 SQL 查询的文件的 SQL 文件任务支持已正式发布
- Lakehouse Federation 支持 Salesforce Data Cloud(公共预览版)
- Databricks 助手系统表现已推出(公共预览版)
- 帐户 SCIM API v2.1(公共预览版)
- 每个 Unity Catalog 元存储都为表增加了资源配额
- Databricks 助手可以自动诊断笔记本错误
- 对具有 SQL 文件任务的
:param
语法的支持已正式发布
-
- Notebooks - 无序语法突出显示
- Notebooks 助手自动诊断错误
- 目录资源管理器改进
- 从提供终结点的单个模型为多个外部模型提供服务
- Databricks 助手现已正式发布
- Databricks 助手现在为线程提供标题
-
- 对 Databricks Runtime 15.0 系列的支持结束
- Databricks Runtime 15.3(Beta 版本)
- 计算指标 UI 目前在所有 Databricks Runtime 版本上可用
- 改进了笔记本和 SQL 编辑器结果表中的搜索和筛选
- 新仪表板可帮助 Databricks 市场提供商监视列表使用情况
- 在
Query Profile
中查看系统生成的联合查询 - 必须将计算平面出站 IP 地址添加到工作区 IP 允许列表
- 适用于 Snowflake 的 Lakehouse Federation 中支持 OAuth
- 从工作区浏览器批量移动和删除工作区对象
- Unity Catalog 对象在“最近使用“和“收藏夹“中可用
- 新的 dbt-databricks 连接器 1.8.0 采用解耦合的 dbt 体系结构
- 新的合规性和安全性设置 API(公共预览版)
- Databricks Runtime 15.2 已正式发布
- 用于 Delta Sharing 的新 Tableau 连接器
- 新的深度学习建议模型示例
- 将存储凭据和外部位置绑定到特定工作区(公共预览版)
- Git 文件夹已正式发布
- Unity Catalog 中的预训练模型(公共预览版)
- Mosaic AI 矢量搜索正式发布
- Databricks 助手自动完成(公共预览版)
- 基础模型训练中的 Meta Llama 3 支持
- Git 文件夹 UI 的新变化
- 基础模型训练(公共预览版)
- 使用户能够将数据从结果表复制到剪贴板
- Unity Catalog 对象的属性值现在可以是 1000 个字符(公共预览版)
- “新建预览”页
- Mosaic AI 矢量搜索的新功能
- 已弃用凭据直通和 Hive 元存储表访问控制
- Databricks JDBC 驱动程序 2.6.38
- 对工作区存储帐户的防火墙支持已正式发布
- Databricks Runtime 15.2(beta 版本)
- Notebooks 现在会检测并自动补全 Spark Connect 数据帧的列名
-
-
- 在特征工程中使用增量实时表(公共预览版)
- 审核日志中 PrivateLink 连接的源 IPv4 地址
- 限制更改“作业所有者”和“运行方式”设置
- Databricks 托管服务主体的支持
- 启用自动群集更新(公共预览版)
- 管理员可以启用增强的安全性和合规性功能(公共预览版)
- 支持 Cloudflare R2 存储以避免产生跨区域流出量费用(公共预览版)
- 添加数据 UI 支持 XML 文件格式
- 使用 AI 函数从基础模型 API 调用生成式 AI 模型
- Unity Catalog 卷已正式发布
- 全页 AI 支持的搜索
- 在 SQL 仓库上运行 SQL 笔记本作业
- Azure Databricks 作业中的文件到达触发器已正式发布
- 使用全局工作区搜索在 Unity Catalog 中搜索机器学习模型
- Databricks Git 服务器代理已正式发布
- Databricks Git 服务器代理不再需要 CAN_ATTACH_TO 权限
- 对 dbt 和 SQL 文件任务的工作区文件支持已正式发布
- 适用于 Scala 的 Databricks Connect 已正式发布
- 基于卷中的文件创建表
- Databricks Runtime 14.3 LTS 已正式发布
- 增量共享支持使用删除向量的表(公共预览版)
-
- 原生 XML 文件格式支持(公共预览版)
- 使用 Databricks 市场共享 AI 模型(公共预览版)
- 网络安全组规则更新
- 工作区路径更新
- 无服务器计算对 Azure 存储防火墙的支持已正式发布
- 简化了 Azure Databricks 作业的创建
- 使用推理表监视 GPU 模型服务工作负载
- 基于 URI 路径的访问 Unity 目录外部卷
- 可对升级的工作区启用访问控制列表
- 现推出市场列表事件系统表(公共预览版)
- 笔记本单元格的更新 UI(公共预览版)
- 有关笔记本中语法错误的“快速修复”帮助
- Databricks Runtime 14.3 LTS(Beta 版本)
- 使用增量共享共享 AI 模型(公共预览版)
- Databricks 市场支持卷共享
- 从 Databricks UI 创建小组件
- 现已推出仓库事件系统表(公共预览版)
- 工作区文件大小限制现为 500MB
- Databricks 中旧版 Git 集成的功能删除通知
- Databricks ODBC 驱动程序 2.7.7
- 对 Databricks Runtime 13.2 系列的支持结束
- 默认启用 AI 辅助功能
-
- Mosaic AI 矢量搜索提供公共预览版
- 无法再禁用访问控制列表
- Cataolog Explorer 中针对卷的新行为和操作
- Databricks Runtime 14.2 已正式发布
- 适用于 Python 的 Databricks SQL 连接器版本 3.0.0
- 无隔离共享群集支持的工作区文件中的库
- 弃用工作区库
- 对 Azure 机密计算 VM 类型的支持现已正式发布
- 使用全局工作区搜索来搜索 Databricks 市场列表
- 通过外部平台使用 Databricks 市场中的数据产品
- 为多个 Azure 区域添加了对无服务器 SQL 仓库的支持
- 为新工作区自动启用 Unity Catalog
- Databricks Runtime 14.2(beta 版本)
- Databricks 市场加入了 Databricks 解决方案加速器
- Lakehouse Federation 添加了对 Google BigQuery 的支持
-
- 查看 Azure Databricks 作业的 YAML 源
- 将条件逻辑添加到 Azure Databricks 工作流
- 在可由所有作业任务引用的 Azure Databricks 作业上配置参数
- 自动启用删除向量
- 对
UNDROP TABLE
的 Unity Catalog 支持正式发布
- 计算系统表现已推出(公共预览版)
- 按需功能计算是已正式发布
- Unity Catalog 中的特征工程已正式发布
- AI 生成的表注释(公共预览版)
- Unity Catalog 中的模型已正式发布
- 计算策略中现在支持使用库(公共预览版)
- Partner Connect 支持 Monte Carlo
- 语义搜索(公共预览版)
- 在工作区级别启用 Databricks 助手
- 新的 Photon 默认值
- Databricks Runtime 14.1 已正式发布
- 开发人员工具发行说明已移动
- Visual Studio Code 教程的 Databricks 扩展已更新至版本 1.1.5
- 更新的预测性 I/O 已正式发布
- 删除向量已正式发布
- Partner Connect 支持 RudderStack
- Databricks CLI 已更新到版本 0.207.0(公共预览版)
- 运行笔记本中的选定单元格
- 使用工作区目录绑定授予对目录的只读访问权限
- Visual Studio Code 教程的 Databricks 扩展已更新至版本 1.1.4
- Databricks SDK for Python 已更新至版本 0.10.0(Beta 版本)
- Databricks SDK for Go 已更新到版本 0.22.0(Beta 版)
- Azure 中国公共预览版中的 Unity 目录卷
-
- 委托在 Unity 目录中创建存储凭据的功能
- Databricks Runtime 14.1(Beta 版本)
- GPU 模型服务功能在公共预览版中针对 LLM 进行了优化
- 防止在达到并发限制时跳过作业的运行
- Databricks Terraform 提供程序已更新至版本 1.27.0
- Databricks CLI 已更新到版本 0.206.0(公共预览版)
- Databricks SDK for Go 已更新到版本 0.21.0(Beta 版)
- 用于模型服务终结点的推理表目前为公共预览版
- Databricks ODBC 驱动程序 2.7.5
- Visual Studio Code 教程的 Databricks 扩展已更新至版本 1.1.3
- 作为服务主体运行作业的功能正式发布
- Databricks CLI 已更新到版本 0.205.2(公共预览版)
- Databricks CLI 已更新到版本 0.205.1(公共预览版)
- Databricks SDK for Go 已更新到版本 0.20.0(Beta 版)
- Databricks SDK for Python 已更新至版本 0.9.0(Beta 版本)
- Databricks SDK for Python 已更新至版本 0.7.1(Beta 版本)
- Databricks Terraform 提供程序已更新至版本 1.26.0
- Databricks Connect for Databricks Runtime 14.0
- Lakeview 仪表板(公共预览版)
- Databricks Connect V2 已推出面向 Scala 的公共预览版
- 公共预览版中的 GPU 模型服务
- Unity Catalog 中现已推出按需功能计算(公共预览版)
- Databricks Runtime 14.0 已正式发布
- 帐户电子邮件通知升级
- Databricks Terraform 提供程序已更新至版本 1.25.1
- Databricks SDK for Go 已更新到版本 0.19.2(Beta 版)
- Databricks CLI 已更新到版本 0.205.0(公共预览版)
/Workspace
的保留位置- Databricks 资产捆绑包(公共预览版)
- Databricks Terraform 提供程序已更新至版本 1.25.0
- Visual Studio Code 的 Databricks 扩展已更新至版本 1.1.2
-
- 表现在显示在导航搜索中
- Databricks CLI 已更新到版本 0.203.3(公共预览版)
- Databricks JDBC 驱动程序 2.6.34
- Databricks SDK for Go 已更新到版本 0.18.0(Beta 版)
- Databricks SDK for Python 已更新至版本 0.7.0(Beta 版本)
- Databricks Terraform 提供程序已更新到版本 1.24.1
- DBFS 生命周期结束的初始化脚本已延长至 2023 年 12 月 1 日
- Databricks Runtime 14.0(beta 版本)
- 统一导航体验已正式发布
- Databricks Terraform 提供程序已更新到版本 1.24.0
- 已从工作区管理员设置页中移除用于基因组学的 Databricks Runtime 设置
- 已从工作区管理员设置页中移除容器服务设置
- Databricks CLI 已更新到版本 0.203.2(公共预览版)
- 转到 Python 笔记本中函数和变量的定义
- Databricks Runtime 13.3 LTS 现已正式发布
- Unity Catalog 标记简介
- Unity Catalog 共享群集上的 init 脚本、JAR 和 Maven 坐标的允许列表为公共预览版
- 对 init 脚本和 JAR 的卷支持为公共预览版
- 简化 Databricks Repos .ipynb 文件输出提交
- Databricks Repos 中的 IPYNB 笔记本支持现已正式发布
- Databricks SDK for Go 已更新到版本 0.17.0(Beta 版)
- Databricks SDK for Python 已更新至版本 0.6.0(Beta 版本)
- Databricks CLI 已更新到版本 0.203.1(公共预览版)
- 统一架构浏览器现已正式发布
- 客户管理的密钥现在支持 Azure 密钥保管库托管 HSM 密钥
- Databricks SDK for Python 已更新至版本 0.5.0(Beta 版本)
- 对工作区文件的编程写入支持
- Databricks CLI 已更新到版本 0.203.0(公共预览版)
- Databricks Terraform 提供程序已更新到版本 1.23.0
- 现在可以重命名组
- Databricks SDK for Go 已更新到版本 0.15.0(Beta 版本)
- Databricks SDK for Python 已更新至版本 0.4.0(Beta 版本)
- 已删除第三方 iFraming 防护配置设置
- Visual Studio Code 教程的 Databricks 扩展已更新至版本 1.1.1
- LangChain 在 13.1 及更高版本中可用
- Unity Catalog 中的特征工程为公共预览版
- 改进了针对重复连续作业失败的错误处理
-
- 工作区管理员现在可以创建帐户组
- 组管理员角色目前处于公共预览版阶段
- Databricks CLI 已更新到版本 0.202.0(公共预览版)
- Databricks SDK for Python 已更新至版本 0.3.0(Beta 版本)
- Databricks SDK for Go 已更新到版本 0.14.1(Beta 版本)
- Databricks SDK for Go 已更新到版本 0.14.0(Beta 版本)
- 在 Azure Databricks 作业中将另一个作业作为任务运行
- 工作区网络更新获得 UI 支持(正式发布)
- 默认情况下,所有用户都可以访问 Databricks Marketplace 中的数据产品
- 经典键盘快捷方式模式
- Lakehouse Federation 允许你对外部数据库提供程序运行查询(公共预览版)
- Repos 已启用移动到回收站
- 为运行缓慢或停滞的作业创建警报
- Databricks SDK for Go 已更新到版本 0.13.0(Beta 版本)
- Databricks SDK for Python 已更新至版本 0.2.0(Beta 版本)
- Databricks CLI 已更新到版本 0.201.0(公共预览版)
- Databricks SDK for Python 已更新至版本 0.2.1(Beta 版本)
- Databricks 助手目前处于公共预览版阶段
- 从帐户停用用户和服务主体
- 现在,如果用户在标识提供者中停用,帐户级 SCIM 预配会停用用户
- 回收站目录管理员访问权限
- 现在,MIME 类型探查和 XSS 攻击页面呈现的防护始终处于已启用状态
- Unity Catalog 卷处于公共预览状态
- 从工作区提交产品反馈的简化体验
- Visual Studio Code 教程的 Databricks 扩展已更新至版本 1.1.0
- 函数现在显示在目录资源管理器(公共预览版)中
- Databricks Terraform 提供程序已更新到版本 1.21.0
List all jobs
和List job runs
API 请求的最大偏移量现在受到限制- Databricks Runtime 13.2 已正式发布
- Delta Sharing 和 Databricks Marketplace 支持视图共享(公共预览版)
- DBFS 上的初始化脚本已于 2023 年 9 月 1 日终止生命周期
-
- Databricks Terraform 提供程序已更新到版本 1.20.0
- Databricks CLI 已更新到版本 0.200.1(公共预览版)
- Databricks SDK for Go 已更新到版本 0.12.0(Beta 版本)
- Databricks SDK for Go 已更新到版本 0.11.0(Beta 版本)
- Databricks SDK for Python(Beta 版本)
- Databricks SDK for Go(Beta 版本)
- 访问审核日志、可计费使用情况和世系系统表(公共预览版)
- Unity Catalog 中的模型(公共预览版)
- Databricks Marketplace 现已正式发布
- Databricks Runtime 13.2 (Beta)
- Visual Studio Code 的 Databricks 扩展(正式发布版)
- 在没有模板的情况下使用 Azure CLI 和 Powershell 启用客户管理的密钥
- 在 Azure Databricks 作业 UI 中查看已完成作业运行的直观概述
- Databricks CLI(公共预览版)
- 改进了来自
List all jobs
和List job runs
API 请求的结果的分页 - 完整页面工作区浏览器包括 Repos
- Databricks Terraform 提供程序已更新到版本 1.19.0
- 作为服务主体运行作业(公共预览版)
- 新的服务主体 UI 提供更好的管理体验
- 将用户重新添加到工作区时还原主文件夹
- Databricks 市场:现已推出专用交换
- Databricks 市场:使用者可以使用 UI 卸载数据产品
- Databricks 市场:提供者可以创建自己的配置文件
- Databricks Connect V2 是适用于 Python 的 GA
- Databricks Terraform 提供程序已更新到版本 1.18.0
- 新的 Databricks 市场提供商
- Databricks Runtime 13.1 已推出正式版
- 使用统一架构浏览器(公共预览版)从笔记本、SQL 编辑器和目录资源管理器查看数据
-
- 创建或修改表 UI 支持 Avro、Parquet 和文本文件上传
- 使用“添加数据”UI 通过 Unity Catalog 外部位置加载数据(公共预览版)
- 在 SQL 仓库上运行 Databricks 笔记本(公共预览版)
- 阻止 Enter 键接受自动完成建议
- 新区域:中国东部 3
- 支持 Azure 机密计算 VM 类型(公共预览版)
- Databricks Terraform 提供程序已更新到版本 1.17.0
- 上传数据 UI 支持新的列数据类型
- 将 Unity Catalog 目录绑定到特定工作区
- 编辑器的新默认主题
- Databricks Terraform 提供程序已更新到版本 1.16.0
- Unity Catalog 对 Azure 托管标识的支持现已正式发布
- Databricks Runtime 13.1(Beta 版本)
- 在 Azure Databricks 工作流中运行基于文件的 SQL 查询
- Databricks Terraform 提供程序已更新到版本 1.15.0
- 21 世纪互联运营的 Azure 现在支持 Unity Catalog
- 现在可以在帐户控制台中使用帐户昵称
- 使用 Delta Sharing 共享笔记本
- Azure Databricks 不再创建无服务器初学者 SQL 仓库
- 在 SQL 仓库 API 中,现在必须显式启用无服务器计算
- 无服务器 SQL 仓库的工作区设置更改
- 帐户和工作区的无服务器计算设置更改
-
- Databricks 市场(公共预览版):数据、分析和 AI 的开放市场
- 配置 Python 格式化程序
- 工作区文件为 GA
- 群集范围的 init 脚本现在可以存储在工作区文件中
- 使用服务主体创建 Azure Key Vault 支持的机密范围
- 新的 Delta Sharing 特权允许委托共享、接收者和提供者管理任务
- Databricks Connect V2(公共预览版)
- 新群集指标 UI
- Databricks Runtime 13.0 为 GA
- 通过 IP 地址范围控制对帐户控制台的访问(公共预览版)
- Databricks Terraform 提供程序已更新到版本 1.14.3
- 工作区的已更改管理员设置的诊断日志条目
- 对于托管磁盘的初始客户管理密钥,Azure Databricks 现在会终止计算资源
- Databricks Terraform 提供程序已更新到版本 1.14.1 和 1.14.2
- 组合的 SQL 用户设置和常规用户设置
- 已弃用旧笔记本可视化效果
- “通过文件上传创建或修改表”页支持 JSON 文件上传
-
- Databricks Terraform 提供程序已更新到版本 1.14.0
- Databricks Runtime 7.3 LTS ML 支持结束
- 使用 TorchDistributor 进行分布式训练
- Databricks Runtime 13.0 (Beta)
- 改进了文件编辑器
- 更改现有 Azure Databricks 工作区的 DBFS 根存储冗余
- Repos 中的 .ipynb (Jupyter) 笔记本支持(预览版)
- 支持 reload4j
- “东亚”区域的新 IP 地址
- 并行执行笔记本中的 SQL 单元格
- 使用存储在 Git 存储库中的 Python 代码创建作业任务
- Databricks Terraform 提供程序已更新到版本 1.13.0
- Databricks Terraform 提供程序已更新到版本 1.12.0
- SQL 管理控制台与工作区管理控制台合并
- 模型服务已正式发布
- 自动功能查找已正式发布
- 对于使用 UDR 的新工作区,Azure 存储 IP 需要额外的 UDR
- Azure Databricks DBFS 根存储为新工作区使用 Azure Data Lake Storage Gen2
- 推出新的目录资源管理器
- 使用“见解”选项卡查看表的活跃查询和用户
- 全局搜索中提供完全匹配搜索
- 查看 Azure Databricks 作业的世系信息
- Databricks Runtime 12.2 LTS 和 Databricks Runtime 12.2 LTS ML 已推出正式版
- 工作区文件现已推出公共预览版
-
- 支持 ND A100 v4 系列实例(公共预览版)
- Azure Databricks 上的 Ray(公共预览版)
- 笔记本单元格输出结果限制已提高
- Azure Databricks 作业现在支持运行连续作业
- 新文件到达时触发 Azure Databricks 作业
- Databricks Terraform 提供程序已更新到版本 1.10.0
- 已禁用旧版全局 init 脚本和群集命名的 init 脚本
- 对 MLflow 试验 UI 的改进
- Databricks Runtime 12.2(Beta 版本)
- 使用用户分配的托管标识访问 Unity Catalog 中的存储(公共预览版)
- Visual Studio Code 的 Databricks 扩展(公共预览版)
-
- 使用 Azure 专用链接启用专用连接 (GA)
- 帐户 SCIM 现已正式发布
- 在 UI 中更轻松地创建和编辑 Azure Databricks 作业
- 改进了 Azure Databricks 作业 UI 以方便查看作业运行
- 新的帐户控制台主屏幕提供更好的帐户管理体验
- Databricks Terraform 提供程序已更新到版本 1.9.1
- 帐户用户可以在帐户控制台中更新电子邮件首选项
- 区域支持已合并到一个页面
- Databricks Runtime 12.1 和 Databricks Runtime 12.1 ML 已推出正式版
- 群集策略现在支持限制每个用户的最大群集数
- Databricks Terraform 提供程序已更新到版本 1.9.0
-
- 正式版:Repos 对非笔记本文件的支持
- 用于托管磁盘加密的客户管理的密钥
- 使用增量实时表笔记本部署用于流式处理推理的模型
- 从添加数据 UI 连接到 Fivetran
- 适用于 Node.js 的 Databricks SQL 驱动程序已推出正式版
-
- 帐户用户可以访问帐户控制台
- Databricks ODBC 驱动程序 2.6.26
- Databricks JDBC 驱动程序 2.6.29
- Databricks 功能存储客户端现在可在 PyPI 上使用
- Unity Catalog 已正式发布
- Delta Sharing 已正式发布
- Databricks Runtime 11.2(beta 版本)
- 减少连续管道 Delta Live Tables UI 中的消息量
- 更轻松地为 Delta Live Tables 管道配置群集
- 在 Databricks 工作流中协调 dbt 任务(公共预览版)
- 联合身份验证已正式发布
-
- Unity Catalog 的
ALTER TABLE
权限更改 - Databricks Runtime 6.4 外延支持终止支持
- 对 Databricks Runtime 10.2 系列的支持已终止
- Databricks ODBC 驱动程序 2.6.24
- Databricks Terraform 提供程序现已正式发布
- Databricks Runtime 11.0 和 11.0 ML 均已推出正式版;11.0 Photon 目前为公共预览版
- 在 Databricks Runtime 11.0 中更改为 Repos 默认工作目录
- 对 Databricks Runtime 10.1 系列的支持已终止
- Delta Live Tables 现可支持 SCD 类型 2
- 直接在 Azure Databricks UI 中创建 Delta Live Tables 管道
- 当创建或编辑管道时,选择 Delta Live Tables 通道
- 使用任务值在 Azure Databricks 作业中的任务之间通信
- 在 Databricks UI 中启用帐户切换
- Unity Catalog 的
-
- 新 Azure 区域:瑞典中部
- 使用标记更好地管理 Azure Databricks 作业
- 对 Databricks Runtime 10.0 系列的支持已终止
- 使用新的作业矩阵视图获取作业运行的直观概述
- 在 Azure Databricks 作业运行失败时节省时间和资源
- 查看作业任务的运行历史记录
- [当单个用户访问不再存在时,在作业 UI 中分配新群集](2022/april.md#assign-a-new-cluster-in-the-jobs-ui-when-the-single user-access-no-longer-exists)
- Databricks Runtime 10.5(beta 版本)
- 增量实时表 UI 已增强,可禁用未经授权的操作
- Databricks AutoML 已正式发布
- 将 Unity Catalog 中的数据集与 AutoML 配合使用
- 增量实时表在 AWS 和 Azure 上已正式发布,在 GCP 上为公共预览版
- 增量实时表 SQL 接口:表名称的非中断性变更
-
- 使用 Databricks 增强的自动缩放提高 Delta Live Tables 管道的性能并降低成本
- 默认情况下在新工作区中启用 Files in Repos
- Databricks Feature Store 已正式发布
- 从试验页共享试验
- RStudio Workbench bug 修补程序
- 新的工作区语言选项
- Databricks Runtime 10.4 LTS 和 10.4 LTS ML 现已正式发布;10.4 Photon 目前为公共预览版
- Unity Catalog 现以公共预览版提供
- Delta Sharing 现以公共预览版提供
- 轮换托管服务的客户管理的密钥
- 增强了增量实时表管道的访问控制
- Test Delta Live Tables 预览版功能,具有新的
channel
设置(公共预览版) - 改进了 Delta Live Tables Python 函数的错误处理(公共预览版)
- 对 Databricks Repos 的改进
- 群集策略更改的诊断日志记录
- Databricks Runtime 10.4(beta 版本)
-
- 更轻松地计划增量实时表管道(公共预览版)
- 轻松浏览增量实时表管道更新的历史记录(公共预览版)
- 确保作业 API“立即运行”请求的作业幂等性
- 作业服务稳定性和可扩展性改进
- 比较不同试验中的 MLflow 运行
- 对 MLflow 比较运行显示的改进
- 提高了对群集 UI 中作业运行所有者的可见性
- 在 AutoML 中删除数据集列
- “试验”页现已正式发布
- 支持增量实时表 Python 接口中的临时表
- 增量实时表的用户界面改进(公共预览版)
- 对 Databricks Runtime 9.0 系列的支持已终止
- 数据科学与工程登陆页面更新
- Databricks Repos 现在支持用于 Git 集成的 AWS CodeCommit
- 提高了增量实时表管道的可视化效果(公共预览版)
- 更新了 Markdown 解析器
- 增量实时表现在支持变更数据捕获处理(公共预览版)
- 现在可以在多个区域使用更多元存储
- 选择要用于 AutoML 的算法框架
- Databricks 托管的 MLflow 模型现在可以查找联机存储中的特征
- Databricks Runtime 10.3 和 10.3 ML 现已正式发布;10.3 Photon 目前为公共预览版
-
- Azure Databricks 上的 MLflow 模型注册表 Webhook(公共预览版)
- 中断性变更:群集终止时清除群集幂等性令牌
- Databricks Runtime 10.3(beta 版本)
- 查看有关最近作业运行的信息
- 在 Databricks Repos 文件编辑器中使用 Markdown
- 改进了对协调多个任务的作业的群集管理
- Databricks Runtime 8.3 和 Databricks Runtime 8.4 系列支持已终止
- Databricks JDBC 驱动程序 2.6.22
- 现在可以在多个区域使用更多元存储
- 新的共享按钮替换了笔记本中的权限图标
- 新的工作区语言选项
- 现在可以在多个区域使用更多元存储
-
- Databricks Runtime 6.4 外延支持系列支持终止日期延长
- Databricks Runtime 5.5 外延支持系列终止支持
- Databricks JDBC 驱动程序 2.6.21
- 适用于 Tableau 2021.4 的 Databricks 连接器
- Databricks Runtime 10.2 和 10.2 ML 现已正式发布;10.2 Photon 目前为公共预览版
- 瑞士西部区域现已可用
- 更新了 Markdown 解析器
- 增量实时表的用户界面改进
- 即将在多个区域中推出更多元存储
- 更新澳大利亚东南部区域的 SCC 中继
- 对 Databricks Runtime 8.3 系列的支持延长
- Databricks Runtime 10.2(beta 版本)
- 还原最近的中断性变更:删除了创建群集的环境变量值中的 $ 中的转义和引号
-
- 为特征表创建标记(公共预览版)
- Python 单元格中 SQL 命令的语法突出显示和自动完成
- 从实验页面重命名、删除和更改 MLflow 实验的权限(公共预览版)
- 笔记本中的新数据配置文件:数据的表格和图形摘要(公共预览版)
- 改进了在运行增量实时表管道时架构演变时的日志记录
- 中断性变更:删除了群集创建的环境变量值中的 $ 中的转义和引号
- 存储库中文件的易用性改进
- 对旧版 SQL 小组件的支持于 2022 年 1 月 15 日结束
- Azure Databricks 作业的用户界面改进
- 用于 Power BI 的 Delta Sharing 连接器
- Databricks ODBC 驱动程序 2.6.19
- Databricks Runtime 10.1 和 10.1 ML 现已正式发布;10.1 Photon 目前为公共预览版
- Databricks Runtime 10.1(beta 版本)
- 重命名并删除 MLflow 试验(公共预览版)
- 现在可以通过克隆现有的策略来创建群集策略
- 更轻松地更改笔记本和笔记本单元格的默认语言
- 从 Web 终端使用 Repos 中的文件
-
- 对 Databricks Runtime 8.2 系列的支持结束
- Databricks Runtime 10.0 和 10.0 ML 现已正式发布;10.0 Photon 目前为公共预览版
- 增量实时表的用户界面改进(公共预览版)
- 在增量实时表中创建新的管道时指定固定大小的群集(公共预览版)
- 在增量实时表触发的管道中查看表的数据质量指标(公共预览版)
- 作业业务流程现已正式发布
- 适用于 Power BI 的 Databricks 连接器
- Repos现在支持任意文件类型
- 作业 API 更详细的作业运行输出
- 提高了作业 UI 中笔记本路径的可读性
- 在新的选项卡或窗口中打开增量实时表管道
- SQL 中旧输入小组件中的
$
的新转义序列 - 使用自动生成的批量推理笔记本加快模型部署
-
- Databricks Runtime 10.0 (beta 版本)
- Databricks ODBC 驱动程序 2.6.18
- 通过现有工作区使用客户管理的密钥进行加密
- Databricks Runtime 9.1 LTS 和 9.1 LTS ML 现已正式发布;9.1 LTS Photon 目前为公共预览版
- 对 Databricks Runtime 8.1 系列的支持结束
- Databricks JDBC 驱动程序 2.6.19
- 跨工作区共享功能表
- 正式发布多个 Azure GPU 实例类型
- Repos 现在支持
.gitignore
- 增强的作业 UI 现已成为所有工作区的标准
- Databricks Runtime 9.1(beta 版本)
- 简化 Azure Databricks 作业设置的管理
- Databricks SQL 公共预览版在所有工作区中可用
- 从特征存储中删除特征表
- 在增量实时表 UI 中授予查看管道权限(公共预览版)
- 使用增量实时表减少群集资源使用(公共预览版)
- 在增量实时表管道中使用 MLflow 模型(公共预览版)
- 按名称查找增量实时表管道(公共预览版)
- Azure Databricks 作业现支持 PyTorch TorchScript 和其他第三方库
- 对 Databricks Runtime 8.0 系列的支持结束
-
- Databricks Repos GA
- 增加长时间运行的笔记本作业的超时时间
- 作业服务稳定性和可扩展性改进
- 组成员身份授予的用户权利显示在管理控制台中
- 管理 MLflow 试验权限(公共预览版)
- 从笔记本创建作业得到改进
- Ddsv4 系列 VM(公共预览版)
- 改进了对折叠笔记本标题的支持
- Databricks Runtime 9.0 和 9.0 ML 现已正式发布;9.0 Photon 目前为公共预览版
- Databricks Runtime 9.0(beta 版本)
- 使用 Databricks CLI 以编程方式管理存储库(公共预览版)
- 使用 Databricks REST API 以编程方式管理存储库(公共预览版)
- Databricks Runtime 7.6 系列支持结束
- 在与 Databricks 存储库交互时记录审核事件
- 改进了作业创建和管理工作流
- 现已提供 Photon 运行时(公共预览版)
- 简化了用于设置 Git 凭据的指令(公共预览版)
- 导入多个
.html
格式的笔记本 - 针对增量实时表的可用性改进
-
- 使用 Databricks REST API 管理 MLflow 试验权限
- Azure Databricks Web 界面已本地化为葡萄牙语和法语(公共预览版)
- 对机器学习的 Databricks Runtime 5.5 LTS 支持结束,取而代之的是外延支持版本
- Databricks Light 2.4 支持于 9 月 5 日结束,取而代之的是外延支持版本
- 新的 Azure 区域:德国中西部
- Databricks 功能存储 UI 中提供的功能新鲜度信息(公共预览版)
- 最多显示 10,000 个结果行
- 以源文件的形式批量导入和导出文件夹中的笔记本
- 现在,SQL 笔记本中的自动完成功能对 SQL 关键字使用全大写
- 笔记本中可重排序且可调整大小的小组件
- Azure Databricks UI 可用性修复
- 创建新的 增量实时表管道时快速定义管道设置
- Databricks Runtime 8.4 和 8.4 ML 现已正式发布;8.4 Photon 目前为公共预览版
- 将 Spark SQL 与增量实时表 Python API 结合使用
- 通过 Azure Databricks 作业增强数据处理和分析(公共预览版)
- 降低了增量实时表默认群集的成本(公共预览版)
- 在增量实时表 UI 中按名称排列管道(公共预览版)
- 对“计算”页的更改
- Databricks Runtime 5.5 LTS 支持终止,到 2021 年底均由 Databricks Runtime 5.5 外延支持替代
- Repos API(公共预览版)
- Databricks Runtime 8.4(Beta 版本)
-
- 更正:在某些区域,在新工作区和现有工作区中默认启用 Git 的存储库
- 对功能存储权限的更改
- 改进了对 MLflow 运行表中结果的访问权限
- 提高了增量实时表的成本可见性
- 增强了增量实时表的数据质量约束增强
- 用于更新和替换 IP 地址列表的 API 更改
- Databricks ODBC 驱动程序 2.6.17
- Databricks Runtime 7.5 系列支持结束
- 对驱动器节点和工作器节点使用的不同的池,以优化性能并控制成本
- 模型注册表的注册表范围权限
- 使用 SCIM API 删除用户时,用户的主目录不再受保护
- Databricks Runtime 8.3 and 8.3 ML 现已正式发布;8.3 Photon 目前为公共预览版
- Python 和 SQL 表访问控制(正式发布)
- 作业 UI 和 API 现在显示作业运行的所有者
- 使用机密保护敏感的 Spark 配置属性和环境变量(公共预览版)
- 在某些区域,在新工作区和现有工作区中默认启用 Git 的存储库
- 重新设计了工作区设置 UI
- 对
ListTokens
和ListAllTokens
数据库查询过期令牌进行了更新 - 现在,授予或撤销管理员权限时需要确认
- 对 Web UI 中的键盘快捷方式进行了更改
-
- Databricks 机器学习:适用于整个 ML 生命周期的数据原生协作解决方案
- SQL 分析已重命名为 Databricks SQL
- 使用增量实时表创建和管理 ETL 管道(公共预览版)
- Azure 现成 VM 现已正式发布
- 使用自己的密钥对 Databricks SQL 查询和查询历史记录进行加密(公共预览版)
- 增加了对已终止的通用群集数量的限制
- 增加了对已固定的群集数量的限制
- 管理存储笔记本结果的位置(公共预览版)
- 使用自己的密钥加密控制平面中的笔记本和机密数据(公共预览版)
- Databricks Runtime 7.4 系列支持结束
- 存储库用户现在可以使用个人访问令牌与 Azure DevOps 集成
-
- Databricks Runtime 8.2(正式发布)
- 通过增强的作业用户界面简化作业管理
- 在重启和编辑时自动向现有群集应用群集策略更改
- 任务尝试失败时跟踪作业任务中的重试次数
- 在创建新群集时快速查看群集详细信息
- MLflow 边栏反映最新试验
- 在 MLflow 中更改为
conda.yaml
文件的默认通道 - 使用 Microsoft Entra ID 简化从 Tableau Online 到 Azure Databricks 的身份验证
- Databricks Runtime 8.2 (beta 版本)
- 新的扩展基础结构要求更新到自定义路由和出口防火墙
- 用户和组限制
- 更轻松地监视作业运行状态
- 全局 init 脚本不再在提供群集的模型上运行
- 接收有关模型注册表中的活动的电子邮件通知
- Databricks Runtime 6.4 系列支持结束
-
- Azure Databricks 现在支持以深色模式查看笔记本
- 使用现成 VM(公共预览版)节省 Azure Databricks 总拥有成本
- Databricks Runtime 8.1 (GA)
- 通过增强的作业用户界面(公共预览版)简化作业的创建和管理
- 使用为每次作业运行尝试返回的新的序列值来跟踪作业重试尝试
- 调高高级工作区中已保存作业的数量限制
- 从喜欢的 BI 工具和 SQL 客户端更轻松地连接到 Azure Databricks
- Azure Databricks 存储库允许你使用 Git 存储库将 Databricks 与 CI/CD 系统集成
- 还原了失败作业群集的自动重试
- 使用 Microsoft Entra ID 简化从 Tableau Online 到 Azure Databricks 的身份验证
- Databricks Runtime 8.1(beta 版本)
- 模型服务化功能现支持其他模型类型
- 新的模型注册表搜索选项
- 增加了对已终止的通用群集数量的限制
- 增加了对工作区中已固定的群集数量的限制
- Databricks Runtime 8.0 (GA)
-
- 新的 Azure Databricks Power BI 连接器 (GA)
- Azure Databricks 中的用户活动诊断日志记录推出 GA 版
- 向 DBFS REST API 获取状态和列表响应添加了 modification_time
- 快速复制 MLflow 中的长试验名称
- 调整了服务群集的内存大小和核心数
- Web 终端现已正式发布
- 适用于 Azure SQL 数据库的 Apache Spark 连接器和 SQL Server 支持 Databricks Runtime 7.x 及更高版本
- Databricks Runtime 7.2 系列支持结束
- Databricks Runtime 7.6 GA
- Databricks Runtime 8.0(beta 版本)
- 用于基因组学的 Databricks Runtime 现已弃用
- 在 MLflow 运行项目显示中查看更具可读性的 JSON
- 使用 REST API 在模型注册表中提供注释
- 在 API 调用中轻松指定默认群集值
- 根据当前工作分配微调群集辅助角色配置
- 使用任务参数变量将特定于上下文的信息传递给作业的任务
- 作业失败的错误消息不再包含可能敏感的信息
-
- 联机 Power BI 服务中提供的新的 Azure Databricks Power BI 连接器(公共预览版)
- Databricks Runtime 7.4(Beta 版本)
- 为 DBFS 根使用客户管理的密钥 (GA)
- 扩展的试验访问控制 (ACL)
- 以高保真的形式导入和导出 Jupyter 笔记本 (ipynb) 文件
- SCIM API 改进:用户记录响应中既返回间接组,也返回直接组
- Azure 请求 ID 现包含在异常消息中
- Databricks Runtime 6.5 系列支持结束
- 安全群集连接(无公共 IP)为公共预览版
- SCIM API 改进:
$ref
字段响应 - 诊断(审核)日志现在以低延迟方式提供
- Databricks Runtime 7.3、7.3 ML 和 7.3 基因组学声明的长期支持 (LTS)
- 使用 matplotlib 在更高的分辨率下呈现图像
- 使用 Databricks CLI 或 Databricks API 创建由 Azure Key Vault 提供支持的机密范围
- 使用 Microsoft Entra ID 令牌向 Databricks CLI 进行身份验证
- 新的 Azure 区域(公共预览版)
-
- Databricks Runtime 7.3、7.3 ML 和 7.3 基因组学现已正式发布
- 单节点群集(公共预览版)
- DBFS REST API 速率限制
- 新边栏图标
- 正在运行的作业限制增加
- MLflow 中的项目访问控制列表 (ACL)
- MLflow 可用性改进
- 新的 Azure Databricks Power BI 连接器(公共预览版)
- 为 DBFS 根使用客户管理的密钥(公共预览版)
- 新的 JDBC 和 ODBC 驱动程序带来了速度更快、延迟更低的 BI
- MLflow 模型服务(公共预览版)
- 群集 UI 改进
- 针对作业、群集、笔记本和其他工作区对象的可见性控件
- 默认情况下不再允许使用令牌创建功能
- MLflow 模型注册表支持在工作区之间共享模型
- Databricks Runtime 7.3(Beta 版本)
- Azure Databricks 工作负载类型名称变更
-
- Databricks Runtime 7.1 正式版
- Databricks Runtime 7.1 ML 正式版
- Databricks Runtime 7.1 基因组学正式版
- Databricks Connect 7.1(公共预览版)
- IP 访问列表 API 更新
- Python 笔记本现在支持每个单元格多个输出
- 并排查看笔记本代码和结果单元格
- 暂停作业计划
- 作业 API 终结点验证运行 ID
- Microsoft Entra ID 令牌向 Databricks REST API GA 授权
- 自动设置笔记本中的 SQL 格式
- 关于 Maven 和 CRAN 库安装的可重现顺序
- 使用令牌管理 API(公共预览版)控制用户的个人访问令牌
- 还原剪切的笔记本单元
- 将作业的“可以管理”权限分配给非管理员用户
- 非管理员 Azure Databricks 用户可以使用 SCIM API 按用户名查看和筛选
- 用于在查看作业运行详细信息时查看群集规范的链接
-
- Databricks Connect 现在支持 Databricks Runtime 6.6
- Databricks Runtime 7.0 ML 正式版
- Databricks Runtime 7.0 正式版,由 Apache Spark 3.0 提供支持
- 用于基因组学的 Databricks Runtime 7.0 正式版
- 用于 MLflow 模型的依赖于阶段的访问控制
- Notebooks 现在支持禁用自动滚动
- 将于 2020 年 6 月 30 日更改元存储 IP 地址
- Internet Explorer 11 支持于 8 月 15 日结束
- Databricks Runtime 6.2 系列支持结束
- 使用群集策略简化和控制群集创建(公共预览版)
- SCIM Me 终结点现在返回符合 SCIM 的响应
- 使用 IP 访问列表限制对 Azure Databricks 的访问(公共预览版)
-
- Easv4 系列 VM(Beta 版本)
- 用于基因组学的 Databricks Runtime 6.6 正式版
- Databricks Runtime 6.6 ML 正式版
- Databricks Runtime 6.6 正式版
- DBFS REST API 删除终结点大小限制
- 轻松查看大量已注册的 MLflow 模型
- 配置为要安装在所有群集上的库未安装在运行 Databricks Runtime 7.0 及更高版本的群集上
- 用于基因组学的 Databricks Runtime 7.0(Beta 版本)
- Databricks Runtime 7.0 ML(Beta 版本)
- 用于基因组学的 Databricks Runtime 6.6(Beta 版本)
- Databricks Runtime 6.6 ML(Beta 版本)
- Databricks Runtime 6.6(Beta 版本)
- 作业群集现已用作业名称和 ID 进行标记
- 还原已删除的笔记本单元
- 作业挂起队列限制
-
- 每个 Azure Databricks 工作区的唯一 URL
- MLflow 跟踪 UI 增强功能
- 笔记本可用性提升
- 使用令牌向 Databricks REST API 授权(公共预览版)
- [单个用户可以在直通群集上查看 Apache Spark 日志](2020/april.md#single user-can-view-the-apache-spark-logs-on-a-passthrough-cluster)
- Databricks Connect 现在支持 Databricks Runtime 6.5
- Databricks Runtime 6.1 和 6.1 ML 支持结束
- Databricks Runtime 6.5 正式版
- 用于机器学习的 Databricks Runtime 6.5 正式版
- 用于基因组学的 Databricks Runtime 6.5 正式版
- Databricks Runtime 6.0 和 6.0 ML 支持结束
-
- 托管 MLflow 模型注册表合作中心已可供使用(公共预览版)
- 工作区、池和群集标记将传播到 DBU 使用情况详细信息和 Azure VM,以便改进成本管理报告
- Databricks Runtime 7.0(Beta 版本)提供 Apache Spark 3.0 预览版
- Databricks Runtime 6.5 ML(Beta 版本)
- Databricks Runtime 6.5(Beta 版本)
- Azure Databricks 反馈现在直接进入 Azure Databricks 反馈门户
- 在 RStudio Server 中开发和测试 Shiny 应用程序
- 更改笔记本的默认语言
- Databricks Connect 现在支持 Databricks Runtime 6.4
- Databricks Connect 现在支持 Databricks Runtime 6.3
-
- 即将推出:工作区、池和群集标记将传播到 DBU 使用情况详细信息和 Azure VM,以便改进成本管理报告
- Azure Databricks 和 Azure Lighthouse 现在可以在同一订阅中共存
- 用于基因组学的 Databricks Runtime 6.3 正式版
- Databricks Runtime 6.3 ML 正式版
- Databricks Runtime 6.3 正式版
- 默认已启用磁盘缓存
- 群集标准自动缩放步骤现在可配置
- SCIM API 对“获取用户”和“获取组”支持分页(公共预览版)
- 文件浏览器泳道宽度增加到 240px
- Databricks Runtime 3.5 LTS 支持结束
-
- 已移到 Azure 事件中心的可支持性指标
- 适用于标准群集和 Scala 的 Azure Data Lake Storage 凭据直通身份验证已正式发布
- 用于基因组学的 Databricks Runtime 6.1 正式版
- 用于机器学习的 Databricks Runtime 6.1 正式版
- MLflow API 调用现在受速率限制
- 用于快速启动群集的实例池已正式发布
- Databricks Runtime 6.1 正式版
- 用于基因组学的 Databricks Runtime 6.0 正式版
- 将 Azure Databricks 工作区部署到自己虚拟网络(也称为 VNet 注入)的功能已推出正式版
- 非管理员 Azure Databricks 用户可以使用 SCIM API 读取用户和组的名称与 ID
- 工作区 API 返回笔记本和文件夹对象 ID
- Databricks Runtime 6.0 ML 正式版
-
- 即将发生的更改:Databricks 6.0 将不支持 Python 2
- 在池空闲实例上预先加载 Databricks Runtime 版本
- 自定义群集标记和池标记可以更好地配合工作
- MLflow 1.1 带来了多项 UI 和 API 改进
- pandas 数据帧像在 Jupyter 中一样显示呈现器
- 新区域
- 带有 Conda 的 Databricks Runtime 5.5 (Beta)
- 更新了元存储连接限制
- 设置对池的权限(公共预览版)
- 用于机器学习的 Databricks Runtime 5.5
- Databricks Runtime 5.5
- 将实例池保持后备状态以快速启动群集(公共预览版)
- Ganglia 指标
- 全局系列颜色