麻省理工、哈佛、斯坦福等研究员联合开发3D世界场景生成AI平台TDW

2021-12-17 06:10:33来源:YiVian


查看引用/信息源请点击:映维网

生成逼真的3D世界,从而为各种AI应用模拟丰富的现实世界交互

映维网2021年12月16日)在厨房里,你将金属碗从柜面大力推向水槽,并因而发出砰的一声。在另一个房间里,听起来像是摇摇欲坠的木块终于倒塌,另外还出现了玩具汽车的巨大相撞声。尽管这个世界看似真实,但事实却并非如此。

在一项研究中,麻省理工学院(MIT)、MIT-IBM沃森人工智能实验室、哈佛大学和斯坦福大学的研究人员开发了一个名为ThreeDWorld(TDW)的平台,并希望创造一个类似于《黑客帝国》的丰富虚拟世界。TDW能够模拟室内和室外的高保真音频和视频环境,并允许用户像在现实生活中一样根据物理定律与对象进行交互。当发生相互作用时,系统能够计算并执行流体、柔体和刚体的对象方向、物理特征和速度,从而产生精确的碰撞和撞击声音。

值得一提的是,这种逼真3D世界可以结合虚拟现实,通过将人类被试放到由TDW生成的逼真场景中来进行各种社会行为学研究。

无我VR 聚合新闻

据介绍,TDW的独特之处在于其设计灵活且可泛化,可实时生成合成照片真实场景和音频渲染,可编译成视听数据集,通过场景内的交互进行修改,并适用于人类和神经网络学习和预测测试。另外,不同类型的机器人代理和虚拟化身可以在受控模拟中生成,从而执行任务规划和执行。例如,利用虚拟现实,人类注意力和游戏行为可以提供真实世界的数据。

研究人员指出:“我们正尝试构建一个通用模拟平台,为各种AI应用模拟现实世界中的丰富交互。”

ThreeDWorld:APlatformforInteractiveMulti-ModalPhysicalSimulation

研究人员指出,所述应用只是冰山一角。通过扩展TDW的物理模拟能力,团队希望能够更准确地描述真实世界:“我们正尝试创建新的基准来推进AI技术,并利用基准来揭示许多迄今为止难以研究的新课题。”

无我VR 聚合新闻

新闻媒体更多>>
  • VR网
  • Yivian
  • 青亭网
  • 麦逗VR
  • VR陀螺
  • 魔多VR