官方Microsoft Research Blog2026/03/27 00:035840
• 提出GroundedPlanBench框架整合空间信息提升任务规划
• 利用SAM3技术实现物体精确定位与移动路径追踪
GroundedPlanBench是一个创新框架,通过将机器人演示视频转化为结构化数据,帮助视觉语言模型同时学习任务规划与空间定位能力。该框架基于微软DROID数据集,结合Meta SAM3图像分割技术,构建了1,009个真实世界任务的测试场景。实验验证表明,其在复杂长时序任务中显著提升了机器人动作准确性和任务完成率,为AI在机器人操控领域的发展提供了新方…