研究:上游错误消息会让多智能体 LLM 下游覆盖正确答案
When Upstream Messages Override Correct Answers: A Controlled Study of Multi-Agent LLM Collaboration
AI 导读
研究者在五个基准和五个接收方模型上做受控实验,固定下游任务与证据,比较无消息、上游原始消息和结论相反消息三种条件,以分离多智能体通信的收益与损害。结果显示,当下游本会答错时消息常有帮助;但当下游本可答对时,错误的上游消息最多在 32% 的情况下改变其答案。在人工审核的有害案例中,94% 是下游直接照抄上游的具体错误答案,作者称之为答案替换。移除不可靠消息能恢复部分损失的准确率,说明通信应依据上游可靠性和下游已有证据进行选择性过滤。