如何量化 Multi-Agent 相比单 Agent 的净收益?
题目
如何量化 Multi-Agent 相比单 Agent 的净收益?
参考答案
点击展开参考答案
- 必须与经过优化的强单 Agent 基线在相同任务上做配对比较。
- 结果指标包括任务成功率、覆盖率和严重错误率;过程指标包括拆解正确率、子任务重复率、handoff 成功率、通信 Token、冲突率和聚合正确率;工程指标包括 P95/P99、费用、故障恢复能力及维护复杂度。
- 还应按任务难度和类型分层,因为简单任务常被协调开销拖累。
- 只有复杂任务切片上的稳定增益能够覆盖额外成本、时延和故障面,才值得保留 Multi-Agent;否则应退回单 Agent 或确定性 Workflow。