使用Hololens 2实现混合现实

混合现实是计算领域的下一波浪潮,将取代大型机、个人电脑和智能手机。它对消费者和企业都具有重要意义。与传统的屏幕交互不同,混合现实与我们的生活空间无缝集成,为与朋友的交流带来自然且数据连接的体验。

什么是混合现实?

混合现实涵盖一系列沉浸式体验,连接和混合物理世界和数字世界以及增强现实和视频游戏应用。

混合现实系统与物理和数字交互的不断增长的前景相关,完全受您的想象力限制。Windows Mixed Reality通过个人的华丽全息表示、高保真全息 3D 模型和他们周围的世界将这些用户体验提升到了一个成功的水平。

什么是全息图?

HoloLens可让您体验全息图 – 由光和声音组成的物体,它们看起来像您周围环境中的自然物体。全息图会响应您的注视、手势和语音命令,甚至可以与现实世界的表面交互。它们是无缝集成到您的物理环境中的数字实体。当您为全息图指定特定位置时,您可以将其精确地定位在世界中。当您四处移动时,全息图将保持静止,成为您周围环境中的恒定存在。它会保留其位置,就像您周围世界中的有形实体一样。如果您使用固定功能,系统将在您稍后返回时记住全息图的位置。

操纵捕获和虚拟对象:

混合现实可以产生人、动物、事物等虚拟对象。但是,在这个过程中,你可能需要该对象或角色与其他虚拟角色/物体进行交互以进行扫描。

核心概念:

使用手部射线指向并提交

场景理解

房间扫描可视化和空间映射

眼动追踪

坐标系

全息框架

空间意识

手部追踪

头部追踪和眼球追踪

特征:

相机:优化混合现实应用中的视觉质量和全息稳定性。

世界锁定和空间锚点:解决稳定性问题,调整摄像头,并集成稳定的系统,以确保全息图保持在原位。

共享体验:让多个用户在他们的设备上查看世界各地的相同全息图。

眼动追踪(凝视):帮助用户使用眼睛移动相机或目标物体。

手势:与物体互动并用手操纵它们。

空间映射:使用虚拟网格覆盖映射您的物理区域,以定义对象边界并提供真实世界的感觉。

空间声音:通过沉浸式 360 度音频增强您的应用程序,获得增强的声音体验。

语音输入:捕捉声音并采取相应行动。

头部跟踪:检测头部位置以确定全息图在现实世界中的位置。它通过两种跟踪方法(即头部注视和提交或头部注视和停留)帮助用户轻松与物体交互。

HoloLens将产生巨大影响的行业:

1、医疗保健:

虽然涉及医疗保健,但混合现实工具的应用范围非常广泛,特别是在指导和教学方面。例如肩上手术治疗,医学生可以接受远程培训,并在进行手术时得到专业人员的指导。

HoloLens 帮助医生为复杂的手术做好准备,并在手术期间与其他医生进行虚拟联系以获得指导。

2、工业和制造业:

沃尔沃和梅赛德斯-奔驰等公司在复杂的车辆维修任务培训课程中使用增强现实应用。在维修过程中更换挡风玻璃或其他 ADAS 相关部件后,有专门的 AR 培训来重新调整ADAS传感器。例如,如果工人可以将整个车辆视为3D对象,那就很方便了。新的HoloLens 2通过为工人提供宽阔的视场角来提供帮助。它可以渲染车辆的模式细节,并允许工人近距离查看更大的物体。

3、培训与教育:

HoloLens 在教育领域发挥着至关重要的作用,尤其是在 ROC Mondrian 等平台上。使用该培训平台的学生可以在增强现实中学习复苏课程。借助 CRP Plus 应用程序和 HoloLens2,学生可以学习使用除颤器 (AED) 进行心肺复苏并练习恢复姿势。CRP 中的这些混合现实概念使学生能够随时随地学习、进行现场测试和独立练习。

4、营销:

使用 HoloLens 2,人们可以虚拟体验展厅或任何地方,并购买绘画、家具和电子产品等物品。比利时鲁汶博物馆使用 HoloLens 2 提供虚拟游览,使用户能够在自己的空间中查看和评估艺术品和物品,然后再做出购买决定。

5、娱乐:

随着 HoloLens 混合现实技术的创新,娱乐行业经历了重大转变。与传统的头戴式 VR 体验相比,HoloLens增强了娱乐性,创造了更多激动人心和互动性更强的场景。例如,在万圣节期间,佩戴HoloLens可以让AR模型更具互动性,提供更高的真实感,并在电影、过山车和游戏中带来全新类型的娱乐体验。

在当今时代,电子设备已成为人类生活的一部分,混合现实在许多领域都必不可少,包括医疗保健、娱乐、制造和教育。凭借其远大的愿景和强大的功能,微软的HoloLens未来将有更多发展空间。看看混合现实技术将如何影响不同的商业行业是很有趣的。