Linux平台OpenXR Monado手部追踪实现与优化

2022-07-19 18:10:33来源:YiVian


查看引用/信息源请点击:映维网Nweon

手部追踪管道

映维网Nweon2022年07月19日)成立于2005年的Collabora主要从事开源软件的咨询、培训和项目管理,同时是一系列开源软件的贡献者和维护者。这家组织同时是Khronos的成员,并已经发布了开源的OpenXR运行时Monado。

对于这个项目,团队一直在积极实现和优化手部追踪管道。日前,实习生摩西斯·特纳(MosesTurner)撰文介绍了他在2021年夏天时参与相关项目的经历。下面是映维网的具体整理:

无我VR 聚合新闻

作为在Collabora实习的一环,我选择了Monado的手部追踪项目。今天,我将概述我在2021夏天的经历。需要注意的是,团队已从我的撰文描述不断前进,并取得了相当大的进步。最重要的是,这篇文章主要是为了说明在Collabora实习是多么的棒。

我是在项目进行到一半的时候参与其中。当时团队已经完成了模型架构方面的工作,并开发了训练模型的独特技术。对于我加入的时候,团队正在将经过训练的模型部署到Monado。XR的光学手部追踪是一项非常困难的追踪任务。事实上,它涉及获取训练数据,训练神经网络,并将其部署在实时、低延迟的环境中,比如说XR。当我开始工作时,我对计算机视觉几乎没有什么经验。但是,总有人需要承担起工作。所以,上就上吧。

数个月后,Monado运行着这个手部追踪管道:

使用ValveIndex:

使用我定制的NorthStar设置:

性能不是非常好,但据我所知,这依然是迄今为止适合XR和支持Linux的最佳光学手部追踪。据我所知,我是地球第一个利用ValveIndex机载摄像头进行光学手部追踪的人员。

工程职位。我保证你不会后悔,你会遇到一群不可思议的人,并且你会学到很多东西。

新闻媒体更多>>
  • VR网
  • Yivian
  • 青亭网
  • 麦逗VR
  • VR陀螺
  • 魔多VR