第1章 选择任务
Chapter 1: 第1章 选择任务
内置任务 内置任务让你无需自行构建和部署任务 Worker,即可在 Conductor 服务器上轻松运行常见任务。以下是 Conductor 中可用内置任务的简介:
系统任务:常见任务,让你无需自定义 Worker 即可快速上手。 操作符:允许你用少量代码以声明式设计工作流的控制流和逻辑。
系统任务 以下是 Conductor OSS 中可用的系统任务,适用于常见场景:
系统任务 | 描述 Event | 向外部事件系统(如 AMQP、SQS、Kafka 等)发布事件。 HTTP | 调用 API 或 HTTP 端点。 Human | 等待外部信号。 Inline | 内联执行轻量级 JavaScript 代码。 No Op | 不执行任何操作。 JSON JQ Transform | 使用 jq 清理或转换 JSON 数据。 Kafka Publish | 向 Kafka 发布消息。 Wait | 等待指定时间或时长过去。
操作符 以下是 Conductor OSS 中可用的操作符,用于管理执行流程:
操作符 | 描述 Do While | 像 do…while… 语句一样重复执行任务。 Dynamic | 动态执行任务,类似于函数指针。 Dynamic Fork | 并行执行动态数量的任务。 Fork | 并行执行固定数量的任务。 Join | 在 Fork 或 Dynamic Fork 之后、继续下一个任务之前合并分支。 Set Variable | 创建或更新工作流变量。 Start Workflow | 异步启动另一个工作流,类似入口点。 Sub Workflow | 同步启动另一个工作流,类似子程序。 Switch | 像 if…else… 语句一样有条件地执行任务。 Terminate | 终止当前工作流,类似 return 语句。
自定义任务 如果你需要实现超出 Conductor 系统任务范围的自定义逻辑,可以改用 Worker(SIMPLE)任务。与内置任务不同,Worker 任务需要在 Conductor 环境外部设置一个 Worker,由其轮询并执行任务。
任务对比 为帮助你决定使用哪些任务,这里详细对比了 Conductor 中功能相似的任务。
Inline 与 Worker 任务 Inline 任务用于直接在工作流内执行自定义 JavaScript 代码。它非常适合轻量级操作,如简单数据转换、条件判断或小型计算。由于代码在 Conductor JVM 内运行,Inline 任务具有低延迟、无网络开销且易于调试的优点。但其局限性在于无法使用其他语言、自定义库、框架或技术栈。 Worker 任务由外部任务 Worker 处理,负责执行自定义函数或服务。它是一个外部自定义函数或服务,在工作流中执行特定任务。可以用任意语言(Python、Java 等)编写,能执行复杂业务逻辑、自定义算法或长时间运行的操作。Worker 任务运行在 Conductor 服务器外部,因此需要额外的基础设施设置和日志机制。
Event 与 Kafka Publish 任务 如果你只需向 Kafka 主题发布消息供外部服务使用,Kafka Publish 任务更易于设置。 相比之下,Event 任务支持更复杂的设置,例如使用事件启动 Conductor 工作流,或让 Conductor 消费消息。它还支持更广泛的事件代理,涵盖 AMQP、NATS、SQS、Kafka 以及 Conductor 自身的内部队列。
Wait 与 Human 任务 Wait 任务和 Human 任务都支持在满足特定条件前等待。如果工作流需要等待特定时长或时间戳,使用 Wait 任务;如果需要等待外部触发器,则使用 Human 任务。
Start Workflow 与 Sub Workflow 任务 Start Workflow 和 Sub Workflow 任务都用于在工作流内启动另一个工作流。不同之处在于,Start Workflow 任务启动另一个工作流后,不会等待其完成就继续下一个任务;而 Sub Workflow 任务会等待子工作流到达终态后才继续下一个任务。 Sub Workflow 任务在父工作流和子工作流之间提供了更紧的耦合。这在需要关联工作流进度和状态,或需要将子工作流的输出传回父工作流时很有用。
Fork 与 Dynamic Fork 任务 Fork 和 Dynamic Fork 都支持任务的并行执行。Fork 任务执行预定数量的分支,而 Dynamic Fork 在运行时执行可变数量的分支。 如果每个分支必须运行不同的任务集,最好使用 Fork 任务,因为 Dynamic Fork 的所有分支只能运行相同的任务。
Dynamic 与 Switch 任务 Switch 任务和 Dynamic 任务都适用于具体任务在运行时才能确定的场景。使用 Switch 任务可以轻松预定义并设置每个分支的具体条件;而使用 Dynamic 任务允许在工作流中标记一个动态点,无需事先在工作流定义中预设所有选项。 在工作流图中,Dynamic 任务会生成更简化的视图,因为它只显示选定的任务。而 Switch 任务会生成更全面的视图,显示工作流可能采取的所有路径。 以下是决定使用 Dynamic 任务还是 Switch 任务的一些场景:
场景 | 推荐任务 拥有大量分支选项,或具体分支选项尚未确定。 | Dynamic 需要默认分支选项。 | Switch 每个分支选项涉及多个任务。 | Switch 每个分支的条件相对简单。 | Switch 每个分支的条件不断变化,或需要更复杂的逻辑。 | Dynamic
如果选择 Dynamic 任务,你必须设置控制流,以确定在运行时执行哪个任务。例如,使用前置任务将任务名称传递给 Dynamic 任务。