研究:长程智能体决策模型可作评判者与教师
热点事件持续更新
研究:长程智能体决策模型可作评判者与教师
2 篇报道2 个报道来源首报4 小时前更新
先了解这件事
AI 综述
一项由 Haochen Liu 等作者发表的研究提出,在长程智能体任务中,表现不佳的决策模型仍可能胜任评判者和教师角色。研究在 ALFWorld 上比较了三个决策模型与三个通用 LLM:作为行动者时,六个模型都会被更容易的子目标带偏,偏离必须先完成的子目标;但作为能看到完整轨迹的评判者时,同一批模型能正确归因通向该子目标的步骤。 研究还发现,询问单个动作是否有帮助,比询问任务能否成功更能区分有效与无效动作。作者据此将评判者(JEV)作为教师用于强化学习训练。
AI 根据报道生成 · 58 分钟前更新
最新进展11月13日 13:00
研究比较决策模型在长程 Agent 中作为行动者、评判者与教师的表现报道时间线
沿着报道,了解事件的不同侧面。
11月13日
- arXiv · cs.CL 计算与语言精选研究比较决策模型在长程 Agent 中作为行动者、评判者与教师的表现
研究在 ALFWorld 上比较三个决策模型和三个通用 LLM 作为行动者与评判者的表现,并在 ALFWorld 和 WebShop 上用 JEV 充当教师。作为行动者时,六个模型都会被更容易的子目标吸引,偏离必须先完成的子目标;作为能看到完整轨迹的评判者时,同一批模型能正确归因通向该子目标的步骤,并且询问每个动作是否有帮助比询问任务能否成功更能区分有用与无用动作。
- Papers with Code · arXiv cs.AI研究区分长程 Agent 中决策模型的行动者、评判者与教师角色
研究比较三个决策模型与三个通用 LLM 在 ALFWorld 上作为行动者和评判者的表现,并将 JEV 作为教师用于强化学习训练。作为行动者时,六个模型都会被更容易的子目标带偏,偏离必须先完成的子目标;作为能看到完整轨迹的评判者时,同一批模型能正确归因通向该子目标的步骤,且询问单个动作是否有帮助比询问任务能否成功更能区分有效与无效动作。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。