您现在的位置是:首页 >技术交流 >混合现实(一)网站首页技术交流
混合现实(一)
【摘要】初步了解混合现实是什么,与物理现实和数字现实的区别,全息影像,混合现实的设计与开发,云服务和应用程序等。(参考文档:Microsoft文档)
一、了解混合现实
1、混合现实MR:一组沉浸式体验,将物理世界与数字世界联系起来,融合到增强现实与虚拟现实中去,提供人类、计算机和环境交互的产物。
2、唯一交互类型(属于人机交互HCI):①环境 ②声音 ③位置和持久性
二、混合现实VS增强现实VS虚拟现实:
1、增强现实AR:现实世界+计算机图像(音频/音频+视觉特效)
2、虚拟现实VR:仅计算机图像
3、混合现实光谱:
三、全息影像(增强应用的基础):
特点:光和声音组成,可编程实现视线、手势和语音输入交互,只属于混合现实中增强现实部分,放置位置可不变,也可跟随变动
距离:1.25-5m,最佳:2m
四、混合现实的设计:
1、身体风暴:使用数字材料对交互、数字对象、UI和动画进行原型制作过程。
2、演示和反馈:三维空间测试想法,外部人员看效果,并提出反馈。
3、情节提要:辅助说服利益关系人或非技术人员,细致或潦草绘图均可。
五、混合现实的工具
全息影像:Unity和Unreal——MRTK(可为空间交互提供输入系统,基础组件,常见构建基块)。
六、混合现实的云服务和应用程序
1、云服务:
Azure:
①远程渲染:实时渲染高度复杂的3D模型,然后通过将渲染工作负载移动到云中的高端GPU,直接将其流式传输到设备。
②构建空间感知:可以按真实世界的规模跨多平台绘制,保留和共享全息内容来定位点,特点:跨平台、适用位置查找,多用户体验和保存对象信息。
Microsoft:
①多项认知服务集成到混合现实应用程序中。
②视觉服务:应用通过视觉服务,识别说明你的图片,对视频和数字笔记内容进行索引和审核。让应用准确识别和分析图像或视频的内容。
2、应用程序:
Dynamic 365 Remote Assist:
可使用HoloLens、HoloLens2、Android或IOS设备获取帮助或从不同物理位置高效协作。此功能在维护和修复、远程检查或培训研讨会等方案中非常有用。
Microsoft Dynamic 365 Guides:
用于Microsoft HoloLens的混合现实,它在需要的时间和位置全息说明,使得操作人员能在工作期间进行学习,这些说明卡直观地附加到必须完成工作的位置,可包含图像、视频和3D全息模型。
3、Microsoft Mesh:
可以从世界各地方体验临场感、跨空间共享及相互协作。
用例:①虚拟协作 ②空间感知设计评论 ③远程帮助他人 ④一起培训和学习 ⑤举办虚拟会议