您的当前位置:首页 > 热点 > 机器人视觉大飞跃!新模型助力 AI “看懂” 三维世界,成功率提升 31% 正文
时间:2026-11-14 来源:网络整理 编辑:热点
google霸屏优化【tg:seogoogle987】
在机器人领域,让人工智能真正 “看懂” 三维世界一直是一个棘手的问题。传统的视觉语言模型(VLA)大多依赖机器于二维图像和文本数据训练,难以理解真实环境中的三维空间。然而,最近来自上海交通大学和剑桥大学的研究团队提人视出了一种名为 Evo-0的新型增强视觉语言动作模型,通过轻量化的方式注入3D 几何先验,使得机器人在复杂任务中的空间觉大理解能力得到了显著提升。
Evo-0模型的创新在于其利用视觉几何基础模型(VGGT),从多视角的 RGB 图像中提取飞跃出三维结构信息,并将这些信息与已有的视觉语言模型相结合。这种方法不仅避免了使用额外传感器或显式深度输入的!新需要,还显著提升了空间感知能力。在 RLBench 仿真实验中,Evo-0在五个需要精细操作的任务上,成功率模型比基线模型 pi0高出15%,并且在开放 VLA(openvla-oft)上提升了31%。
具体而言,Evo-0助力将 VGGT 作为空间编码器,引入了通过 VGGT 提取的 t3^D token,这些 token 包含了深度上下文和空间 A关系等几何信息。通过交叉注意力融合模块,模型能够将提取的二维视觉 token 与三维 token 进行有效结合,I 提升了对空间布局和物体关系的理解能力。这种方法在保证训练效率的同时,灵活性和部署便捷性也得到了提高。
在真实世“看界的实验中,Evo-0在处理复杂空间任务时表现出色,包括目标居中放置、插孔、密集抓取等任务,均超过了基线模懂”型,平均成功率提升了28.88%。特别是在对复杂空间关系的理解和操控能力方面,Evo-0展现出显著优势。
综上所 三述,Evo-0通过巧妙的空间信息融合,为未来的通用机器人策略提供了一条新的可行路径。该研究成果不仅在学术维世界引发了广泛关注,也为机器人领域的实际应用带来了新的可能性。
论文地址:https://arxiv.org/p界,df/2507.00416
盈利这档子事,百度智能云拿捏了2026-09-24
标签: 掌阅科技 iDrama 短剧 数字阅读2026-09-27
谷歌 AI 模式强势扩张:180个国家解锁,搜索进入“智能代理”时代2026-09-29
标签: 51Talk 黄佳佳 COE 在线教育2026-05-23
标签: 字节跳动 豆包AI眼镜 人工智能眼镜 AI硬件2026-07-06
标签: 京东 京喜2026-08-07
标签: 通用汽车 中国零件 供应链 玛丽·巴拉2026-09-24
2022年六个要避免的顶级云成本优化问题以及应对方式 译文2026-10-25
云计算开发:Python练习实例-将字母输出到新文件C中2026-10-29
标签: 京东游艇会 探海 刘强东 粤港澳大湾区2026-05-19
OpenAI 推出 Workspace Agents:全天候办公时代开启2026-08-30
标签: 黄仁勋 英伟达 CUDA AGI2026-07-20
AI 训练初创公司 Mercor 欲争取超 100 亿美元估值2026-07-08
Figma牵手Google引入Gemini模型:1300万设计师迎来AI助手,图像生成延迟暴降50%2026-10-23
豆神教育与微软 Azure 携手打造 AI 短剧平台2026-11-11
小猪佩奇第一季全集2026-07-26
宣战Clubhouse!Facebook正开发播客和直播音频室功能 预计今夏推出2026-10-12
标签: 地质穹顶 Pemba G1 钦博拉索火山2026-07-08
标签: 松下 YKK 松下家居 住宅设备2026-08-01
抖音重拳出击:封禁千余“AI仿冒于东来”违规带货账号2026-09-07