Netflix 开源了一个用于因果推理的智能代理工作流

Netflix 开源了一个用于观察性因果推断（OCI）的智能代理工作流。该工作流可以减轻因果分析过程中的繁琐工作。基于观察数据和人类用户的分析计划，该智能代理能够利用行为者-批评者循环来评估因果关系、撰写报告并提出后续步骤的建议。

该智能代理工作流基于 Netflix 现有的 OCI 工具构建。其目标是自动化易出错或重复性任务（如敏感性分析或跟踪多次迭代），将更高层次的任务（如问题构建和结果评估）留给人类用户。OCI 分析被定义为目标试验仿真，即寻找能够解答该问题的最优 A/B 测试方案。Netflix 团队使用大西洋因果推断会议（ACIC）竞赛数据集对该工作流进行了评估，发现其与各类基准系统相比非常“具有竞争力”。据 Netflix 说：

在因果推断中使用智能代理面临着一个挑战：在没有真实标注数据的情况下，我们如何评估智能代理在各项任务中的表现？为了应对这一挑战，我们的工作流程将流程审核与人工监督相结合。为了让其他人能够借鉴并评判这一工作流程，我们已经将一个轻量级的独立版本开源。我们希望，这项工作能激发更多在没有真实标注数据的情况下对智能代理进行评估的研究与开发。

人类分析师可以通过创建一个基于模板的 Jupyter 笔记本和一份分析计划来设置该流程。执行代理会根据该计划生成规格说明书，填写笔记本中的参数并执行笔记本。评审员审查笔记本的输出结果；对其进行评级：not_satisfactory、satisfactory_with_caveats 或 fully_satisfactory；并提出规格说明书修改建议。

OCI 智能代理工作流（图片