小模型也能吵出大智慧?多智能体辩论的隐藏变量被找到了
多智能体辩论一直被视作提升大模型推理与事实准确性的有效手段,但过去的研究几乎都默认一个前提:参与辩论的智能体是对称的、同质的。这篇来自ArXiv的论文直接挑战了这一假设,提出"认知多样性"才是多智能体辩论真正起作用的关键变量,并在小语言模型上进行了系统验证。研究发现,当参与辩论的智能体具备不同的认知偏好和推理风格时,即便模型规模较小,其集体推理表现也能显著超越单体推理,甚至逼近更大模型的水平。相反,如果智能体只是同一模型的简单复制,辩论带来的增益会大幅缩水。这一结论对当前"堆算力、堆参数"的主流思路构成了有力补充:与其一味追求更大的单体模型,不如设计更具认知多样性的协作机制。对于正在探索多智能体系统的研究者和工程师来说,这意味着智能体的"异质性设计"可能比"数量堆叠"更值得投入。
Beyond Symmetric Agents: Cognitive Diversity and Multi-Agent Debate in Small Language Models
Multi-agent debate (MAD) reportedly improves reasoning and factuality over single-model inference, but prior work treats agents as symmetric peers, le