跳到正文
热点事件持续更新

研究团队提出GeoWorld平台与LiveGeo基准

2 篇报道2 个报道来源首报4 小时前更新

先了解这件事

AI 综述

研究团队提出 GeoWorld 地理环境平台,并基于它构建 LiveGeo 基准,用于评测 LLM 智能体在真实地理环境中的决策可靠性。GeoWorld 被描述为可控且能持续演化。 LiveGeo 要求智能体主动获取任务相关信息、验证支撑先前决策的证据是否仍然有效,并在必要时修正计划。

AI 根据报道生成 · 30 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月13日
  1. arXiv · cs.AI 人工智能精选
    LiveGeo:在持续演化的地理环境中评测 LLM 智能体

    研究团队提出地理环境平台 GeoWorld 与基于它的基准 LiveGeo,用于评测 LLM 智能体在持续演化的真实地理环境中的决策可靠性。LiveGeo 要求智能体主动获取任务相关信息、核查支撑先前决策的证据是否仍然有效,并在必要时修改计划;结果显示前沿 LLM 在静态任务上已显吃力,且没有模型能在各类任务上稳定领先,静态表现强并不能保证动态可靠性。

  2. Papers with Code · arXiv cs.AI
    LiveGeo:在持续演化世界中评测地理智能体的基准

    研究团队提出 GeoWorld 可控且持续演化的地理环境平台,并基于它构建 LiveGeo 基准,用于评测 LLM 智能体在真实地理环境中的可靠决策。LiveGeo 要求智能体主动获取任务相关信息、验证支撑先前决策的证据是否仍然有效,并在必要时修正计划。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。