跳到主要内容

1 篇博文 含有标签「llm-pipelines」

查看所有标签

智能体流水线中的“传声筒”游戏

· 阅读需 13 分钟
Tian Pan
Software Engineer

你可能目睹过这样一种失败,只是没有给它命名。你的编排者(orchestrator)读取用户请求并向工作代理(worker agent)下达简报。工作代理运行了十几次工具调用,消化输出,然后汇报一份简洁的摘要。编排者将该摘要并入下一名工作代理的任务简报中,后者如法炮制。五跳(hop)之后,系统给出了一个自信的最终答案——却违反了用户在请求的第二句话中明确提出的约束。没有人故意丢掉这个约束。每一跳只是稍微压缩了一下上下文,方向无人选择,而这些压缩不断叠加。

这就是“传声筒游戏”(the telephone game),而多智能体系统(multi-agent systems)本质上就在玩这个游戏。流水线中的每一次交接都是一个有损压缩步骤:编排者的简报是对用户的转述,工作代理的报告是对其工具输出的转述,而最终答案则是转述之上的转述。问题不在于信息是否丢失——它确实丢失了,而且是可衡量的——而在于你是否决定了哪些信息允许被丢失,还是将这个决定留给了采样温度(sampling temperature)。