计算机科学 > 多智能体系统
[提交于 2025年10月18日
]
标题: 通过检索推理资源和多智能体分析进行提示优化
标题: Prompt Optimization via Retrieved Reasoning Assets and Multi-Agent Analysis
摘要: 提示优化已成为改进大型语言模型(LLMs)性能的有效替代方法,而不是重新训练。 然而,大多数现有方法将评估视为一个黑箱,仅依赖数值分数,而对提示成功或失败的原因提供有限的见解。 它们还高度依赖于试错式的改进,这难以解释和控制。 在本文中,我们引入了MA-SAPO,一种基于多智能体的评分感知提示优化框架。 与之前的方法相比,MA-SAPO显式地将评估结果与结构化推理相结合,以指导系统的编辑。 该框架具体包括两个阶段:在推理阶段,智能体协作解释指标分数,诊断弱点,并合成可重复使用的推理资产;在测试阶段,智能体检索这些资产以分析优化后的提示,并仅应用基于证据的编辑。 通过将评估信号转化为可解释的推理链,MA-SAPO生成的提示优化更加透明、可审计和可控。 在HelpSteer1/2基准上的实验表明,与单次提示、检索增强基线和先前的多智能体策略相比,取得了持续的改进,验证了我们方法的有效性。
文献和引用工具
与本文相关的代码,数据和媒体
alphaXiv (什么是 alphaXiv?)
CatalyzeX 代码查找器 (什么是 CatalyzeX?)
DagsHub (什么是 DagsHub?)
Gotit.pub (什么是 GotitPub?)
Hugging Face (什么是 Huggingface?)
带有代码的论文 (什么是带有代码的论文?)
ScienceCast (什么是 ScienceCast?)
演示
推荐器和搜索工具
arXivLabs:与社区合作伙伴的实验项目
arXivLabs 是一个框架,允许合作伙伴直接在我们的网站上开发和分享新的 arXiv 特性。
与 arXivLabs 合作的个人和组织都接受了我们的价值观,即开放、社区、卓越和用户数据隐私。arXiv 承诺这些价值观,并且只与遵守这些价值观的合作伙伴合作。
有一个为 arXiv 社区增加价值的项目想法吗? 了解更多关于 arXivLabs 的信息.