Meta AI · 世界模型
Meta AI 更新 AI Habitat 仿真平台，新增对象交互能力
Meta AI 发布了 AI Habitat 仿真平台的最新版本，重点加入了对物体交互性的支持。这一更新使虚拟环境中的智能体能够抓取、推动、打开或关闭物体，从而更接近真实世界的物理互动。Habitat 此前已用于具身 AI 训练，新增交互能力后可支撑更复杂的机器人操作任务研究，为基于模拟的感知与行动系统带来更逼真的训练场景。
- 域名
ai.meta.com- 评分
- 5 · 重大发布
导读
2020 年 1 月 Facebook AI 发布 AI Habitat 的重大更新，让仿真平台中的 agent 不仅会移动，也能与场景里的物体发生交互。研究者可以从 YCB 家居物体数据集或家具模型库中调入资产，并通过 “Add a chair here” 一类指令完成程序化场景搭建，这就把以往只能看不能动的虚拟空间转换成了可推、可抓、可碰撞的工作台。
更新的核心是引入 Bullet 物理引擎以支持刚体动力学，可施加力与力矩、检测碰撞；同时通过 Habitat-PyRobot-Bridge 把同一份代码贯通到真实机器人，例如 LoCoBot，并附带针对其执行器与深度传感器的现实噪声模型。Habitat 还新增 WebGL 与 JavaScript API，使整套环境可以跑在浏览器里，研究者得以让真人和 agent 在相同条件下完成同一任务以做对比；TensorBoard 支持、Habitat baselines 的 API 改写、Replica 环境的 HDR 纹理、对 Oculus Quest 的初步适配、以及一项新的 embodied question-answering 任务也一并发布。
Facebook AI 把这次更新视为一次从导航到操作的范围拓展。要训练出可以在真实场景里完成家务的助手或机器人，agent 必须在虚拟空间里就掌握移动之外的推、拉、操控等技能，而新的 Habitat 让这一过程在不同数据集之间也能做受控比较与基准评测。