视频|这个AR家具预览demo让我看到VST头显的未来

2022-08-21 18:10:32来源:青亭网


之前我们看到过很多AR家具、家装的应用,最头部的莫过于宜家,它也一直紧跟苹果ARKit步伐,而这次Shopfiy工程师则展示了基于苹果最新的RoomPlan​的AR家装预览。

6月份的WWDC我们了解到RoomPlan是一项充分结合了AI重磅功能,它能够识别房间内物体的几何形状,甚至构建一个房间的三维场景,这对今后的AR/MR场景至关重要。

而苹果RoomPlan也见证了AR应用的一些进展:

早期的AR主要以单个物体“虚拟投放”为主,也就是说将一个虚拟的物体投放到真实环境中,这的确能带来不错的效果,宜家IKEAPlace确实体验也非常出色。

之后能在真实环境中投射多个虚拟物体、或大型虚拟场景。宜家IKEAStudio就是如此,它的特点就是支持多个虚拟物体同时投射,但仅支持配备LiDAR的iOS设备,前提是先对房间进行扫描。

现在则可以将“真实物体投射到虚拟场景中”,和第一阶段反了过来。基于LiDAR的房间扫描能力,和苹果原生RoomPlan能力实现投射整个虚拟场景,把需要的物体真实物体抠像显示,具体可以参考上面的视频。应用场景包括:把你家3D场景放进手机,然后到卖场仍然可以预览具体每一件家具在你家的摆放效果。

这段视频展现了几个能力:

  • 1,房间级定位、追踪、识别能力,大规模虚拟场景的AR投射,效果稳定;;
  • 2,场景几何理解能力,iOS16上线的智能抠图,而ARKit6中RoomPlan则是实时的智能3D抠图。将真实物体实时抠像,视频中是一个沙发;
  • 3,相比沙发是静态放置,人则是动态移动的,过程中还融合了人体的实时抠像,在这个场景中,比坐在沙发上时可将腿、鞋等扣除来,而背景依然是虚拟场景,边缘处理也很好。

这样一来,我们就能看到真实、虚拟融合的,房间级别的MR交互能力,由此可见苹果RoomPlan对于发展AR和MR将起到至关重要的作用​。

实际上,这类场景也早在HoloLens1代发布会上演示过,以及Meta近期推出的《TheWorldBeyond》,虽然并不是创意上的突破,但基本上把VSRMR头显的玩法潜力给展露出来。

新闻媒体更多>>
  • VR网
  • Yivian
  • 青亭网
  • 麦逗VR
  • VR陀螺
  • 魔多VR