本届GTC大会,NVIDIA释放了不少猛料,单单是涉及AR/VR的就有很多:VRSS2;CloudXR打通AWS、Azure、谷歌云三大国际主流云平台;Omniverse企业套件上线消息。
NVIDIA今天公布了Omniverse企业套件的demo,简单来说,这是一个专注于实时仿真、数字协作的云平台,当然说好听点也是数字孪生,但这并不重要,因为NVIDIA的目标很宏大,那就是让创作者、设计师和工程师等等工作流转移到线上,实现多人实时共享协作,让轻量化操作成为可能。
黄仁勋表示:“科幻小说中的Metaverse已经离我们不远了,未来的虚拟世界将是一个高度逼真的场景,而且和现实世界一样遵循物理定律,这样的场景中未来将有大量人类和AI居住”,“Omniverse的重要特征就是符合现实世界中的物理定律”,“堡垒之夜、我的世界、Roblox更像是Metaverse的早期版本,未来Metaverse不仅仅是游戏,它将是模拟未来的地方”。
实际上,Omniverse平台是Holodeck项目的延伸,这是既为设计师、创作者提供协作平台后的全面升级,不局限于实时协作、多人共享,模式环境,场景模拟,还可完成NVIDIA最新的光线追踪技术,同时支持本地GPU阵列和云串流方案,提供未来云端部署的端到端能力。
因此,Omniverse平台目标应用场景和行业包括:建筑、工程和施工,制造业、媒体与娱乐产业、超级计算、云服务等平台。
据NVIDIA媒体和娱乐部门总经理RichardKerris表示:Omniverse项目已经开发数年时间,而NVIDIA在此项目上也投入了数亿美元资金。其去年底Beta版上线后,已经积累众多大型公司,包括宝马、爱立信、福斯特建筑事务所、WPP等。
简单来说,Omniverse主要特性包括:基于USD格式、高度逼真物理模拟引擎、高性能渲染能力。
1,基于USD格式
据青亭网了解,Omniverse平台特点是基于皮克斯(Pixar)的USD(通用场景描述)。可能在很多人看来USD仅仅是一种3D文件格式,而实际上USD的能力远不止如此。
USD是DCC中传递场景描述信息的文件格式,其API支持复杂属性、分层、延迟加载、多种其他关键功能。
Kerris讲到:我们认为,随着整个社区开始接受这种开放性的平台来处理3D信息,包括3D对象、3D场景和其它所有的3D资产,这是Omniverse最有力的先决基础。
当时在皮克斯负责USD格式推广的GuidoQuaroni表示:2010年时,皮克斯就有了此想法,当时皮克斯在处理大量电影中涉及的多个图书馆场景。甚至某些场景可以在《玩具总动员2》中找到相似点,最终演化成了开源的格式。
Quaroni还谈到:虽然我们清楚每家很多工作室都在做类似的方案,但是我们的目标是打造成标准化的产品,因为对我们来说最大难题是插件、第三方集成。
在皮克斯负责USD的SpbasGrassia表示:USD代表了皮克斯基于电影行业十多年技术和经验迭代的结果,它可以用于协同创作,处理大型3D场景,可以很好的处理3D资产,让更多创作者可以在同一场景中工作。
在USD之前,创作者必须通过创作、数据处理等过程。而基于USD格式,NVIDIA可以可以在所有软件上共享,通过不同的方式进行查看。甚至皮克斯还曾考虑自己开发维三动画软件,但最后发现现有的Maya,3DMAX,Unreal引擎、Blender等在执行特定任务效率高更高,而且这些软件的受众庞大,无需进行专业培训。为此,皮克斯的目标是让USD格式开源。
2,Omniverse深度融合USD
有了USD仅仅是基础,NVIDIA想要做的是,提供一个打通各个3D软件平台的3D资产,构建开放式创作和共享平台,让他们的创作者可以共同进行创作。
皮克斯还有一个数据可视化的渲染构架Hydra,它的作用是连接打通不同数据源,例如Maya的资产,因此开发和创作者可以直接查看各种3D数据资产,而无需进行格式转换。
NVIDIAOmniverse项目工程师MichaelKass和同事发现:USD格式是一个宝藏,它对于资产、资产的变化、场景构架的描述信息更为丰富。为此,NVIDA决定以USD格式为核心来构建Omniverse平台,而皮克斯大部分协作并不能实时完成,为此NVIDIA在USD基础上还添加了多用户同步功能。
真正的难点是,确保USD在媒体和娱乐类的应用场景之外也能正常使用,因为Omniverse平台自身定位是3D内容的开放式、虚拟协作平台,而很多场景可能会是汽车、机器人、建筑、工程制造等领域,因为这些才是NVIDIA客户的主要应用场景。
Kass也感慨道:目前还没有看到类似的方案,我们看到皮克斯USD格式的潜力,并加以更多功能实现。你很难想象没有html网络标准的互联网,这就是之前的3D内容创作现状。到现在为止,还没有哪个3D创作软件支持同一种文件格式,这一现状需要改变,否则就连Omniverse也难以推动。
不仅仅是多人共享、协作,NVIDIA还推出OmniverseCreater工具,它融合NVIDIA自身众多优势,例如实时交互、照明效果、场景模拟、场景渲染等;以及OmniverseView工具,它可以实时呈现高逼真度渲染场景,从而为无缝的团队协作提供支持。
而Omniverse企业套件则是一个全新平台,它的特点部署在经过NVIDIA认证的系统上,订阅方案包括:OmniverseNucleus服务器、Omniverse连接器、OmniverseCreater、OmniverseView、以及RTX虚拟工作站工具。
此外,NVIDIA还推出一系列工具,例如Audio2Face,顾名思义就是通过声音驱动面部表情的AI系统;Kaolin工具,降低3D应用开发中AI的处理时间;Machinima,这是一整套创建逼真虚拟形象的方案,可融合Audio2Face、AI姿态估计等能力。
3,挑战和阻力
当然,任何事情都存在挑战。
福斯特建筑事务所合伙人MarthaTsigkari表示:想要让如此大的创意行业实现协同,是一个巨大的挑战,尤其是例如包含众多技术方案的建筑公司。
在工作流程方面,以建筑行业为例,你的工作流程是通过设计师、工程师对接技术顾问,技术顾问再对接制造商,目前还没有找到更简单的协同方式。
在工程周期方面,从以往的模式到实时协作打通,将有助于加快工程周期。
Autodesk工程部副总裁SusannaHolt表示:我更希望USD在处理大型3D数据集上有重大升级,例如在开发城市级的3D数据集方面,目前来看,这一点还没有实现,因此应用到除建筑行业外的场景上还要做一些改变。
Grassia也表示:目前有些功能还存在加载延迟的情况,这一点也视加载数据集的大小和等级不同而不同。
延迟是一个不可忽视的问题,尤其是在跨设备、远程协作交互的场景。青亭网获知,目前NVIDIAOmniverse渲染共有是3种,分别是30帧,60帧,120帧,客户可根据不同场景进行调整。
Kerris表示:并不是每个人的屏幕都在实时刷新,通过特殊的处理,可以有效提高实时协作的效率。
4,Omniverse能做什么
据了解,NVIDIAOmniverse企业套件将于今年夏季推出,支持Windows和Linux平台。
你可能会问,说了这么多,Omniverse到底能干什么,能完成哪些任务,做哪些事情。
NVIDIA通过这个案例告诉大家。在GTC主题演讲中,黄仁勋表示:目前宝马汽车正在基于Omniverse平台来创建出整个汽车生产工厂的数字版本,也就是很多人说的数字孪生版本。
这样做的好处是,可以直接在线上来模拟整个完整的真实工厂环境,这个虚拟工厂包含了大量细节,甚至在同一时间可以模拟300辆汽车,每辆汽车的数据大小就有10GB左右。
基于这个的一个数字工厂,宝马可以让全球的工程师、设计师、专家等融合到一个场景中协作,共同进行产品规划、设计、模拟等等复杂的工作,甚至在数字工厂中完成整套产品规划,到最终上市的流程。
根据宝马汽车管委会的声明,基于Omniverse平台的生产效率比以往高30%,宝马汽车的目标是在全球31家工厂建立数字化版本。
参考: