脸书与Matterport共同发布3D空间资料集

脸书与空间资料厂商Matterport合作,公开了Habitat-Matterport 3D(HM3D)资料集,这是目前最大的室内3D扫描资料集,能够促进社群在空间人工智能应用的研究。目前HM3D免费对外开放,可用于学术与非商业研究上。

HM3D开源研究资料集兼容于Habitat的3D扫描集合,含有1千个精确的缩放住宅空间和商业空间资料。Habitat是脸书的体现AI(Embodied AI)平台,该模拟平台提供研究人员逼真的3D环境,能用来训练像是机器人等体现代理人。

计算机视觉和自然语言处理的人工智能模型,通常能够使用来自互联网的文本、图像、音频和视频进行训练,而具有实体或是虚拟化身的体现机器人,由于其智能系统有不同的需求,因此无法使用这些资料进行训练。

诸如家用机器人等体现机器人,要解决像是“我的钥匙在哪?”、“帮我把桌上的笔记本拿过来”这类问题与要求,脸书提到,这些任务需要人工智能以人类的方式理解世界,并且与这个世界交互,需要具备的能力像是要以各种角度识别物体、区分台面和桌面的不同等。而为了训练出这样的机器人,需要利用大量逼真的3D空间进行模拟训练。

但是能够使用的3D资料很少,虽然2D图像资料集在这几年已经被积极的发展,可使用的图像达到数十亿张,但是3D空间资料集现在只有数十个建筑物可用,阻碍了体现人工智能的发展。而新的HM3D资料集可以大大补充现有的3D训练资料集,推进体现人工智能的研究。

HM3D资料集可用来训练家庭机器人和人工智能助理,使这些代理能够理解现实环境的复杂性,识别物体、房间、空间,或是学习导航和遵循指令,像是要寻找放错位置的物体这类复杂任务,体现人工智能代理需要构建地图,回忆观察到的物体,并且理解语音和音频线索,再执行诸如上下楼梯等复杂的运动控制。

脸书和Matterport合作来开源HM3D资料集,官方提到,这个人信息料集发布的目的,是要共同解决体现人工智能发展所遇到的问题,通过资料来刺激技术创新。脸书未来会扩展这个人信息料集,加入来自更多国家室内空间的扫描,并且加入注释,以方便对象检索等高端任务,另外,他们也要使用这个人信息料集,来研究动态环境,包括空间中移动的人和宠物,也更贴近现实情况。

发表评论