持久任务计划程序

Durable Task Scheduler 在 Azure 中提供持久执行。 持久执行是运行代码的容错方法,它通过自动重试和状态持久性处理失败和中断。 持久化执行有助于以下场景:

  • 分布式事务
  • 多代理协调
  • 数据处理
  • 基础结构管理

持久任务调度器是推荐用于Durable Functions和Durable Task SDK的存储提供程序。 通过使用 Durable Task SDK,你可以为运行在任何 Azure 计算平台上的应用带来持久执行,包括 Azure 容器应用(ACA)、Azure Kubernetes Service (AKS)、Azure 应用服务 和 Azure 虚拟机。

支持的 SKU

对于 Durable Functions,你可以在任何 Functions SKU 中使用持久任务计划程序。

对于持久任务 SDK,可以将 Durable Task Scheduler 与任何计算配合使用。

调度程序本身提供两种计费 SKU:

支持的区域

持久任务计划程序在大多数Azure区域中可用。 运行以下命令以获取可用区域的当前列表:

az provider show --namespace Microsoft.DurableTask --query "resourceTypes[?resourceType=='schedulers'].locations | [0]" --out table

请考虑对 Durable Functions 应用和 Durable Task Scheduler 资源使用相同的区域来优化性能和某些与网络相关的功能。

业务流程框架

Durable Task Scheduler 适用于 Durable Functions 和 Durable Task SDK。 选择最适合你的项目的框架。

体系结构

对于所有 Durable Task Scheduler 编排框架,你都可以通过使用 Azure 资源管理器 创建类型为 Microsoft.DurableTask/scheduler 的调度器实例。 每个计划程序资源在内部有自身专用的计算和内存资源,并针对以下方面进行了优化:

  • 调度业务流程协调程序、活动和实体工作项
  • 以最低的延迟大规模存储和查询历史记录
  • 通过 Durable Task Scheduler 仪表板提供丰富的监视体验

与BYO 存储提供程序不同,Durable Task Scheduler 提供程序是一种专用的后端即服务,针对 持久任务框架的特定需求进行了优化。

下图显示了 Durable Task Scheduler 后端的体系结构及其与连接的应用的交互。

持久任务计划程序体系结构的屏幕截图,其中显示了通过 gRPC 连接到应用的后端服务。

操作性分离

持久任务计划程序在 Azure 中作为与应用分开的资源运行。 出于多种原因,这种隔离非常重要:

  • 减少资源消耗
    与使用 BYO 存储提供程序相比,将状态管理卸载到托管计划程序可减少应用中的 CPU 和内存消耗。

  • 故障隔离
    将计划程序与应用分离可降低级联故障的风险,并提高连接应用中的整体可靠性。

  • 独立伸缩
    你可以独立于应用扩展调度器资源,以更好地管理基础设施资源和优化成本。 例如,多个应用可以共享相同的计划程序资源,这对具有多个团队或项目的组织很有用。

  • 改进的支持体验
    Durable Task Scheduler 是一项托管服务,为底层基础结构的问题提供简化的支持和诊断。

应用连接

你的应用通过gRPC连接调度资源,使用TLS保护,并通过应用身份认证。 终结点地址的格式类似于 {scheduler-name}.{region}.durabletask.io。 例如,myscheduler-123.chinanorth2.durabletask.io。

对于需要私有连接的场景,使用 私有端点 通过虚拟网络内的私有链路将流量路由到调度器,而不是公共互联网。

调度器通过推送模型将工作项目流式传输到应用,这降低了端到端延迟,并消除了轮询的需求。 应用可以并行处理多个工作项,并在相应的业务流程、活动或实体任务完成时将响应发送回计划程序。

状态管理

持久任务计划程序在内部管理业务流程和实体的状态,而无需单独的存储帐户进行状态管理。 内部状态存储经过高度优化,可与 Durable Functions 和 Durable Task SDK 一起使用,从而提高持久性和可靠性并降低延迟。

计划程序使用内存中和持久性内部存储的组合来管理状态。

  • 内存存储用于短期状态。
  • 持久存储用于恢复和多实例查询作。

功能亮点

实现持久任务调度器的协调框架时,你可以从多个主要优势中受益。

持久任务计划程序仪表板

当你创建调度资源时,会得到一个对应的仪表盘。 仪表板提供所有编排和实体实例的概览,并允许您执行以下操作:

  • 按不同的条件快速筛选。
  • 收集关于编排实例的数据,如状态、持续时间、输入/输出等。
  • 钻取到实例,以获取有关子业务流程和活动的数据。
  • 执行管理操作,例如暂停、终止或重启编排实例。

标识和基于角色的访问控制 用于保护对仪表板的访问。

有关详细信息,请参阅 使用 Durable Task Scheduler 仪表板调试和管理业务流程。

多个任务中心

状态持久保存在 任务中心。 任务中心:

  • 是业务流程和实体实例的逻辑容器。
  • 提供对状态存储进行分区的方法。

通过一个调度实例,你可以创建多个任务中心,供不同应用使用。 每个任务中心都获取其自己的 监视仪表板。 若要访问任务中心, 调用方的身份 必须 具有所需的基于角色的访问控制(RBAC)权限。

创建多个任务中心可以隔离不同的工作负载,并可对其进行独立管理。 例如,您可以:

  • 为每个环境(开发、测试、生产)创建任务中心。
  • 为组织内的不同团队创建任务中心。
  • 跨多个应用共享相同的计划程序实例。

当多个团队有需要协调的情况时,共享计划程序是优化成本的好方法。

注意

尽管可以在一个计划程序实例中创建多个任务中心,但它们共享相同的资源。 如果一个任务中心负载过大,则可能会影响同一计划程序上其他任务中心的性能。

用于本地开发的模拟器

Durable Task Scheduler 模拟器是计划程序后端的轻型版本,可在 Docker 容器中本地运行。 通过使用它,你可以:

  • 无需部署到Azure即可开发和测试应用。
  • 像在 Azure 中一样监视和管理业务流程和实体。

有关设置说明,请参阅 运行 Durable Task Scheduler 模拟器。

注意

模拟器将编排和实体状态存储在本地内存中,因此不适合生产环境使用。

自动清除保留策略

应定期清除过时的业务流程数据,以确保高效使用存储。 Durable Task Scheduler 的自动清除功能提供了简化的可配置解决方案,用于自动管理协调实例清理。 详细了解如何为 Durable Task Scheduler 设置自动清理保留策略。

限制和注意事项

  • 计划程序配额:

    根据您的计费 SKU,您可以创建的计划程序数目是有限的。

    如需更多 scheduler quota,请创建 Azure 支持 request。

  • 任务中心配额:

    根据您的计费 SKU,能使用的任务中心数量是有限的。

    你无法增加这些任务中心的配额。

  • 最大有效负载大小:

    持久任务计划程序对以下 JSON 序列化数据类型具有最大有效负载大小限制:

    数据类型 最大大小
    业务流程协调程序输入和输出 1 MB
    活动输入和输出 1 MB
    外部事件数据 1 MB
    业务流程自定义状态 1 MB
    实体状态 1 MB

    如果您的数据超出这些限制,请参阅大型有效负载支持以获取可用的解决方法。

  • 最大工作项完成大小:

    发送给持久任务调度器的每个工作项目完成请求最多为 3.9 MB。 该限制适用于整个完成请求,而非每个单独有效载荷。

    如果你预计工作项完成量会超过此限制,可以启用大负载支持,将受支持的负载卸载到 Azure Blob 存储,并减少完成请求的大小。

  • 业务流程实例 ID 长度:

    业务流程实例 ID 限制为最大长度为 100 个字符。

    • 允许字符:仅可打印 ASCII(字母、数字、符号如 -、_、.,以及范围0x20到0x7E的其他字符)
    • 最小长度:1 个字符(不能为空)
    • 以 @ 开头的实例 ID 是为实体保留的