AI和混合现实被微软等科技巨头视为未来的计算平台。那么,如果将微软大力投入的混合现实和AI进行融合,能够带来何种体验呢?
混合现实MR可以看做是增强现实AR和虚拟现实VR的集合。前者可以通过可穿戴技术,比如微软HoloLens,把数字图像叠加在用户的视野内,而后者则会通过Oculus Rift这样的VR头显和微软的混合现实头显,把用户沉浸在虚拟环境中。混合现实技术的目标,就是达成AR和VR的结合,并且能够摆脱线缆束缚,而且透镜的透明度介于AR的全透明和VR的不透明之间。
AI是一个计算机科学领域,意在创造出可以像人一样行动、工作和反馈的系统或技术。AI已经开始渗透进我们的生活,智能化的系统已经成为制造业、计算机安全系统、微软的Seeing AI和Hearing AI App、谷歌的Allo信息平台、智能手机摄像头以及大量的数字助理的一部分。微软和谷歌的领袖Satya Nadella和Sundar Pichai已经分别将AI作为公司的驱动力之一。
通过其人机交互平台Conversations as a Platform和Bot Framework战略,微软正在积极将智能融入其产品、服务和物联网。此外,微软的智能云Intelligent Cloud、智能边缘Intelligent Edge和5G都是不断进步的平台,也是支持AI驱动的产品和服务的关键。考虑到AR成为未来计算平台的潜力,以及AI的不断进化,二者的融合能够为商业、医疗和消费领域带来哪些新变化?
HoloLens2.0版本将在设备中引入AI
当HoloLens在2015年首次现身时,即使是微软的批判者们也有深刻印象,这台可穿戴的电脑在使用者的世界中投射出了可互动的全息图像。但受限的视场角、昂贵的价格和消费者版的缺席缓和了这种兴奋感。并且,特定行业的战略导向(从医疗到教育,再到制造业)和微软的混合现实这一不断增长的平台,让微软在AR领域不断前进。
实际上,下一个版本的HoloLens预期会在2019年到来,比最初计划中的时间要早一年,并且将会包含一个定制的AI协处理器。这样解释吧,这个协处理器将会是HoloLens的全息处理单元HPU的一部分,而正是全息处理单元这个多重处理器,让HoloLens成为了第一个和唯一的一个完整支持全息图像的计算机。AI协处理将会让HoloLens本地支持动态神经网络DNN。
深度学习是对计算机视觉和其他计算机系统的识别任务非常重要的功能,比如在HoloLens上,需要“理解”周围的环境。神经网络是一个模仿人脑的功能的系统,让计算机系统以和人类似的方式处理信息。这是确保AI先进性的决定性的基础功能。微软给HoloLens 2.0设计的AI协处理器会持续运行,以确保这款混合现实头显能够带来一致的AI表现。微软HoloLens的科学总监Marc Pollefeys这样介绍道:
“如果你想要设计本身就智能化的混合现实设备,这就是你需要具备的思维方式。混合现实和人工智能代表了未来的计算技术,并且我们非常激动能够推动这一潮流。”
智能边缘,AI驱动的摄像头和混合现实的碰撞
AR设备必须能够“感知”和“理解”周边环境,并且能够通过佩戴者视野中叠加的图像来传输有关数据。这里就是微软的AI驱动的摄像头技术的切入点。它有着强大的能力,能够感知真实世界,理解用户的活动,识别周围的物体和人,并且主动地对它看到的事物做出回应动作。微软正在推广这一能力,来搜索人、物和真实世界中的活动(就像用搜索引擎来搜索数据信息那样简单),并为他们编制目录,将其作为数字世界和真实世界的整合体。通过将这种级别的AI对环境的感知和AR相结合,计算机的未来,混合了数字内容和真实环境的未来计算平台,是逻辑上的下一步。
随着边缘计算变得越来越普遍,AI的能力会不断增强,并且目的会越来越明确。5G网络将于2018年开始应用,这一技术将会为大量的云端数据处理提供基础设施,这对于支持实用的AI场景是非常必要的。5G也会带来更低的延迟,让分布式网络受益,同样它还能支持多人协作的智能AR应用场景。
未来融合了AI的HoloLens或受HoloLens启发的,连接到企业的智能边缘的设备或许能够为商业和生命科学研究带来深远的影响。尤其是当这些设备与微软的AI驱动的摄像头技术进行融合之后。
AI,混合现实和未来的工作场景
未来的员工们(特别是在特殊行业的员工)或许会佩戴公司配备的混合现实眼镜,来替代以前使用的PC电脑。桌面PC把员工们束缚在桌子旁边,当员工们需要在工作区行动时,这就会对其生产力造成负面影响。手机提供了一定程度的自由,但仍然是一个需要专注才能获取信息的屏幕,这并不是一个自然或高效的使用、交互或通讯的方式。此外,对于那些一整天都需要简单地获取信息的特定类型的员工(比如从事制造业的员工)来说,手机和桌面电脑也是不实用的。可穿戴的电脑(AR眼镜)可能会解决这些和其他的挑战。
想象一下,一组机器操作员戴着智能的、互相连接的头显,可以为他们提供一天中生产活动的反馈,在任何时间地点检查设备状态。同时,技术人员通过AR头显或全息图像远程指导或修复故障设备也是完全可能实现的,同样这些智能化的可穿戴设备也可以起到管理和监督工作人员的作用,简而言之,这一切都可能将会给微观管理带来全新的概念。
AI搭配穿戴式摄像头,可以比以往人力更有效率的加强对库存的管理和控制,对设备和工作环境等其他需要人工评估的地方亦是如此。AI
将会在穿戴者的视觉画面中主动提供环境信息,Microsoft还曾展示过其团队是如何将AR数据传输到像电脑这样的传统媒介上的。
AI与AR在医疗健康中的应用
在医疗保健方面,病人信息和生命体中可以随时呈现在医护人员的视野中,而不再仅仅是显示在监视器等医疗设备中。
加持AI的可穿戴设备也可以让整个医疗过程变得更加简便。当医护人员穿戴好这些设备时,此前的工作排班、病人情况等细节都将会显示在他们的视觉画面中,亦或者当医生进行就诊之前,AI可以提供所有有关病人的相关信息。
而AI面部识别技术可以记录病人以及其家属的信息,这可能会帮助医护人员在接手治疗之前就对病人的信息了如指掌。而这些也只是AI和AR技术在医疗领域中应用的冰山一角。
AR技术与AI驱动的未来生活
在日常生活中,智能可穿戴设备可以帮助我们更好的“认识”陌生人。AI可以主动获取来自Facebook、其他社交媒体平台和公共数据的面部识别数据,想象一下当这些技术用在公共治安时,警务人员可以借此指示AI“标记”一些有嫌疑的人,而AI也可以通过其驱动的公共摄像头对该嫌疑人进行追踪,并向警务人员的头显实时传递信息。
在这其中,AI驱动的公共摄像头系统可以主动与警务人员进行联系,这可要比为人工配备多个显示器要高效得多。而类似应用还包括飞行员可以借此了解空中交通管理员的信息,简而言之,类似的应用还有很多。
当然,这里所阐述的未来生活仍处于畅想阶段,即使未来这些情况没有发生,但这些技术应用的大方向也是显而易见的,况且微软和其他技术公司正在努力尝试着将AI融入AR工作组成的一部分。
微软已经证明了AI技术可以帮助人们更好地探索和了解物理世界,并根据实时情况采取不同的行动。由此可见,该公司未来的长期目标很有可能就是打造一个AI增强的全息计算平台,它可助用户更进一步的与物理环境进行交互,而AI则可以主动根据用户情况提供自己的看法和建议,AI协同全息计算将很可能成为未来计算平台的新风向。
那么对于这些新兴技术的未来,你有什么畅想?