查看引用/信息源请点击：映维网Nweon

将生成式人工智能的力量与混合现实相结合

（映维网Nweon2023年11月16日）微软在Ignite2023大会宣布，将把AI助手Copilot带到Dynamics365Guides，从而结合生成式人工智能与混合现实的力量，帮助一线工作人员更快地完成复杂任务并解决问题，同时减少对工作流程的干扰。

新加入技术人员需要在学习如何操作和维护设备的同时快速提升。当设备停止工作时，工作人员必须迅速采取行动诊断问题，实施修复措施，然后记录他们的工作。

CopilotinDynamics365Guides可以协助工人在工业环境处理复杂的设备和工艺。利用这个工具，工作人员不需要搜索大量的数字文档或纸质手册，工作人员可以使用自然语言和人类手势询问相关信息。Copilot使用生成式人工智能从技术文档、服务记录、培训内容和客户管理的任何其他数据源中搜索信息，随后则将信息汇总，并通过叠加在HoloLens的全息图提供交互式指导。

微软表示，混合现实与人工智能的结合可以呈现出以人为本的界面，并有望改变现实世界的运作方式。现在，Copilot可以通过语音和全息图实时帮助一线工人。

以下是微软计划在Dynamics365Guides中解锁Copilot的功能:

点击并提问

人类总是以手动方式从环境中学习并与之交互，并在工作时向他人提问。CopilotinDynamics365Guides以自然交互方式作为基础，并专注于帮助员工更好地理解周围的世界。工人可以指着设备的特定元件并向Copilot提出问题，比如“这种螺栓的扭矩限制是多少?”

另外，新员工可以直接询问一般性的问题，比如“这个组件的功能是什么?”。Copilot可以识别用户所指的内容，并提供答案。3D模型和空间地图为所述技术提供了基础，帮助识别工人正在注视的对象，然后投影全息图来显示操作说明。员工可以询问更复杂的问题，比如“告诉我传感器模块在这台机器的位置”，然后Copilot就会显示全息图，并显示所属位置。

步骤式帮助

由微软大型语言模型MicrosoftAzureOpenAIService支持的CopilotinDynamics365Guides不单单提供一次性的回答。工人可以进行渐进式的谈话，比如“告诉我拆卸这个过滤装置的步骤”，或者“我把马达断开了，下一步怎么办?”这时候，Copilot可以使用精心规划的知识库跟踪流程和对话，并以语音、文本或3D全息图表达答案，同时消除歧义并减少返工需求。

按需信息

微软HoloLens可以在工人周围显示需要参考的相关数据。通过接到物联网传感器，操作数据和服务记录，CopilotinDynamics365Guides可以回答一系列的问题，例如“当前的湿度等级是多少?”或“上次检查是什么时候，当时发现了什么问题吗?”

HoloLens2允许Copilot精确定位特定资产，识别它们，并实时访问相关信息源。一线工作人员可以访问丰富的信息，并在人工智能的帮助下进行故障排除或修复。

现已推出私人预览版，公开预览版即将推出

CopilotinDynamics365Guides目前已经推出私人预览版，并提供了一组有限的功能。即将在公开预览版则首先向HoloLens2提供，并在以后登陆移动设备。

微软最后强调了隐私保护，他们表示CopilotinDynamics365Guides是根据负责任的人工智能标准开发，并符合公司对数据安全和隐私的长期承诺。