代替CV追踪,康奈尔大学开发EchoWrist,利用声波和AI追踪位置

2024-04-03 12:10:31来源:VR陀螺


编译/VR陀螺

近日,康奈尔大学AnnS.Bowers计算机与信息科学学院的研究人员开发了一款名为EchoWrist的智能手环设备,该设备能够通过人工智能驱动的无声声波连续检测手部位置,以及手与之交互的物体。这一技术的出现,为虚拟现实(VR)、通过手势控制智能设备以及理解用户活动等潜在应用领域带来了新的可能性。

EchoWrist技术的小巧尺寸使其可以轻松安装在商用智能手表上,并且能够在标准智能手表电池的供电下持续运行一整天。该技术是未来交互式智能计算机界面(SciFi)实验室最新的低功耗、身体姿态追踪技术之一。实验室由信息科学助理教授郑成(ChengZhang)领导,他表示:“手部动作是非常重要的基本动作,几乎所有的活动都涉及手部,这款设备提供了一种低成本且非常精确的连续追踪手部姿态的解决方案。”

无我VR 聚合新闻

无我VR 聚合新闻

无我VR 聚合新闻图源:论文截图

这项能力使用户能够跟随交互式食谱,追踪厨师的进度并读出下一步——这样厨师们就可以避免弄脏屏幕。与SciFi实验室之前使用摄像头的FingerTrak手部追踪技术不同,EchoWrist要小得多,且能耗显著降低。共同作者、康奈尔大学BowersCIS和多学院设计技术系教授弗朗索瓦·吉姆布里埃(FrançoisGuimbretière)表示:“声学追踪的一个重要附加好处是,它真正增强了用户的隐私,同时提供了与摄像头追踪相似的性能水平。”

该技术还可用于为虚拟现实应用重现手部动作。现有的VR和AR系统通常使用安装在头戴设备上的摄像头来完成这项任务,但这种方法消耗大量电力,一旦手部离开头戴设备的有限视野就无法追踪。郑成表示:“这项技术最令人兴奋的应用之一将使人工智能能够通过追踪和解释日常活动中的手部姿态来理解人类活动。”

研究人员指出,EchoWrist在区分形状高度相似的物体(如叉子和勺子)时仍有困难。但团队相信,随着技术的进一步优化,物体识别能力将得到提升。他们相信,通过进一步的优化,EchoWrist可以轻松集成到现有的市售智能手表中。

更多信息,请参考:Chi-JungLee等人,《EchoWrist:使用低功耗主动声学感应技术在手环上实现连续手部姿态追踪和手-物体交互识别》,arXiv(2024)。

来源:techxplore

新闻媒体更多>>
  • VR网
  • Yivian
  • 青亭网
  • 麦逗VR
  • VR陀螺
  • 魔多VR