ESI-Bench:迈向具身空间智能的感知-行动闭环评估基准

结构提纲

按章节快速跳转。

1. §研究背景

   现有AI评估框架缺乏对具身智能体在物理世界导航和操作能力的全面测试。

2. §ESI-Bench 框架

   ESI-Bench 是首个专门评估具身空间智能体感知-行动闭环能力的基准测试框架。

3. ·评估场景设计

   基准包含8个结构化环境，涵盖家庭、办公室和公共场所等多样化场景。

4. ·任务类型

   任务分为导航和操作两大类，模拟真实世界的复杂指令执行过程。

5. §实验结果

   当前最先进模型在ESI-Bench上表现欠佳，准确率仅在40-60%之间，远低于人类表现。

6. §研究意义

   ESI-Bench为具身智能研究提供了新标准，推动该领域向更接近人类能力的方向发展。

思维导图

用一张图看清主题之间的关系。