百川智能：基于LLM的多agent框架SIBYL

📖标题：SIBYL: SIMPLE YET EFFECTIVE AGENT FRAMEWORK FOR COMPLEX REAL-WORLD REASONING
🌐来源：arXiv, 2407.10718

🛎️文章简介

🔸研究问题：当前基于大语言模型（LLM）的代理在处理复杂现实世界推理问题时，由于推理步骤繁多导致错误传播和准确性下降。
🔸主要贡献：论文提出了一个简单而有效的基于LLM的代理框架Sibyl，采用结构化的工作流程和全局工作空间来实现信息共享和协作，实现了基于多智能体辩论的自我完善机制。

📝重点思路

🔺相关工作

🔸基于LLM的代理标志着人工智能领域的重大进步，能够感知环境、做出决策并采取行动。
🔸但大多数基于LLM的代理都是针对特定应用而设计的，聚焦数学求解、编码、角色扮演和社会模拟等，存在功能限制。
🔸配备工具和结构化框架，这些代理可以处理相对简单的任务，对复杂的现实挑战的能力仍然相对有限。
🔸长上下文管理仍然是LLM的一个重大障碍，丰富的外部信息对模型处理能力有很高的要求。

🔺论文方案

🔸概述：Sibyl框架侧重于降低复杂性，同时增强基于LLM的代理的功能能力，包括四个组件：工具规划器、外部信息获取通道、多代理辩论和一个全局工作区。
🔸工具规划器：评估给定的查询和任何相关的步骤历史记录，以选择合适的（工具、函数、参数）三元组和参数。
🔸外部信息获取通道首先获得工具规划器的输出，然后分析、提取并验证查询的相关信息。为了提高信息效率，论文提出了一种表示语言来选择性地压缩信息。
🔸多代理辩论：包括回答问题的参与者和识别逻辑错误的评论家两种角色，采用多数投票集成方法来增强输出答案的稳定性和质量。
🔸全局工作区：充当中央枢纽，促进模块间的无缝信息共享。

🔎分析总结

🔸在GAIA基准测试集上，由GPT-4实例化的Sibyl代理超过了SOTA水平。
🔸多智能体辩论对于解决更简单问题至关重要，但对更复杂的推理任务暂无作用，集成通常提供了更稳定和一致的结果。
🔸将复杂的推理分解为更简单、可管理的子步骤至关重要，可以显着减少错误传播。

💡个人观点

Sibyl通过模块化设计和信息共享，成功将系统一的快思考过渡到系统二的慢思考。