閱讀英文

共用方式為

使用 Databricks 执行数据工程

Databricks 提供丰富的数据工程功能,包括用于数据科学家、工程师和分析师进行协作的可靠环境。 其中心是引入转换数据的管道。 为了轻松设计最有效的管道,Databricks 提供了结构化流式处理和 DLT。 请参阅 Azure Databricks 上的流式处理 以及 什么是 DLT?

有关结构化流和 DLT 提供的数据增量流处理为何是数据管道的最佳选项的概述,请参阅 如何生成简单、高效和低延迟的数据管道

其他数据工程资源

Databricks 为许多其他应用场景的数据工程任务提供相关功能:

注意

如果主要使用 SQL 查询和 BI 工具,请参阅 Databricks SQL

有关入门教程和介绍性信息,请参阅 Azure Databricks 入门指南什么是 Azure Databricks?

名称 在想要执行以下操作时使用此工具...
DLT 了解如何使用 Databricks DLT 生成用于引入和转换的数据管道。
结构化流 了解由 Databricks 上的结构化流式处理提供支持的流式处理、增量和实时工作负荷。