混合现实介绍
混合现实是物理世界和数字世界的融合,释放出自然和直观的三维人类、计算机和环境互动。增强现实技术侧重于增强物理世界,而虚拟现实技术则使用户沉浸在一个完全数字化的世界中,而混合现实技术则有望实现两者的完美结合。它是基于计算机视觉、图形处理、显示技术、输入系统和云计算的进步。
HoloLens 2是一个领先于时代的尖端设备,为我们提供了一个混合现实的选择,使我们能够看到全息图进入我们周围的真实世界而不改变它,所有这些只需作为眼镜佩戴。它有一个强大的品牌支持–微软,混合现实领域的领先创新者之一。
HoloLens 2辅助室内导航
具体功能:
1、手掌跟踪主菜单
当用户保持左手掌向他们张开时,菜单会出现在它的右上方附近。默认情况下,菜单的位置被追踪到左手。它也可以被钉在空间里以解放左手。当菜单被夹住时,它可以被角落里的一个手柄抓住并移动。用户可以像使用触摸屏设备那样直观地按下按钮和滚动。菜单底部的按钮可以改变标签/页面。
2、选择一个现有的兴趣点
兴趣点 “选项卡包含先前添加的兴趣点的可滚动列表。在一个项目上按下,会打开一个子菜单,其中有切换到该兴趣点的导航、编辑或删除它的选项。当手移开时,该子菜单自动关闭。
3、添加一个新的兴趣点
添加 “选项卡显示了添加几种类型的新兴趣点的可能性。它们可以由一个名称标签或额外的三维物体表示。目前,这些对象包括一个箭头、一个立方体或一个球体。添加一个新项目后,它可以被抓取并在三维空间中移动。通过在 “POI “选项卡中选择它并按下 “重命名 “按钮,它可以被重命名。
4、导航到一个兴趣点
对任何兴趣点的导航指示可以从兴趣点列表中切换。打开它可以实现几个功能:
- 一个建议的路径在地面上由动画的引导箭头突出显示。
- 视图中央的一个较大的三维箭头显示了当前的方向和到POI的距离。
- 景点以彩色的轮廓突出显示。
5、室内空间的三维可视化
HoloLens的传感器所扫描的空间可以与POI和主动导航路径一起以3D方式可视化。默认情况下,它显示的是一个自上而下的视图,以用户为中心移动和旋转,就像视频游戏的最小地图。它还可以调整大小和拖动以显示建筑物的不同部分,这可以与钉住和移动菜单相结合。
限制和缓解措施:
该应用程序的一个大挑战是了解我们所处的环境,以便我们能够在最小地图上显示它,并计算出通过它的路径。在目前的实施中,我们依靠HoloLens的传感器(摄像头和深度)和其软件建立的3D环境数据。这有两个主要的限制:
局限性: 应用程序使用设备上的3D地图数据
当应用程序启动时,它会查询先前收集的3D环境数据。这意味着,在使用该应用程序之前,设备必须对建筑物进行测绘,以建立一个完整的表示。
解决方案: 在使用应用程序之前对空间进行测绘
提示或提醒用户在使用应用程序之前绘制空间地图。幸好这不需要太多的互动,因为HoloLens 2不断地更新几米范围内的空间映射。无论应用程序是否打开,这都会发生,所以要做的就是访问并看到建筑物内的所有表面。当不在应用程序内时,可以通过点击任何地方来可视化当前的空间映射。我们的应用程序还允许可视化和重新查询空间地图,所以它不必重新启动以使用新收集的数据。