美军特供版HoloLens 2来了

去年11月,彭博曾报道微软赢得4.8亿美元军事合同,为陆军开发用于作战和训练的原型AR头显。据悉,这个军事合同来自于美军的HUD 3.0计划,目前该计划已经更名为集成视觉增强系统(IVAS),在HUD 3.0技术基础上集成了用于团队的合成训练环境功能。

为了解IVAS的开发进度,CNBC记者受邀去美军基地体验了这款美军特供版IVAS头显(以下简称:特供版HoloLens 2),该头显基于微软HoloLens 2进行改进。

参观过程中,他体验了特供版IVAS头显和一款军用软件Demo,并表示这款IVAS还不是成品,因此有点卡顿,甚至中途重启了一次,不过他也透露了关于该头显和一些Demo应用的信息。

1.IVAS项目背景

据悉,IVAS项目旨在通过一系列新技术和功能提升士兵的杀伤力、移动速度和情境感知水平,这些功能包括:

  1. 与当前视觉保护装置具备同样自然视场角的头戴视觉系统(通过高透明度、大视场角立体双目显示系统在作战环境中随时随地增强团队的环境感知,该显示系统搭载两个高分辨率数字色彩传感器、集成射击辅助、防激光和听力保护功能);
  2. 通过个人武器瞄具和远程团队武器瞄具在日/夜间快速获取目标(RTA);
  3. 机器学习/AI功能;
  4. 用于团队的合成训练环境(STE),如:共享世界地形、训练模拟软件、训练管理工具以及相关集成硬件;
  5. 适应性团队操作系统;
  6. 奈特勇士3.0(美军手持智能终端)/战术突击套装的连接功能(在集成战术网络中安全但不保密的部分运行,使用当前军用电台,在开放、战斗、恶劣环境中运行的最基础功能:可视/射击/移动/导航);
  7. 融合日/夜视功能,支持多个传感器/成像信息;
  8. 用于士兵随身携带设备的军队内部无线网连接(多点无线);
  9. 团队杀伤力评级/指标(实时测量团队&士兵表现);
  10. 在导航、锁定目标、路线标记等行动的实时MR作战训练和预演;
  11. 相关威胁的自动或者辅助目标识别(ATR);
  12. 国有士兵/团队架构(由政府和企业在2年间合作开发,其关键界面设计团队识别、建设、验证和应用,由战术力量架构和管理系统组成);
  13. 模块化开源数据、不保密或者限时访问的定位信息和云端储存的信息。

总之,美军希望微软最后提供的成品能结合夜视和热传感技术,可测量士兵的呼吸等生命体征,还有检测脑震荡、保护听力等功能。在项目两年内,微软将首先为美军提供2500台头显,之后要交付的数量可能近10万台。

2.美军为何选择与微软合作

据IVAS收购和行动主任Mark Stephens表示:除了微软外,还有13家公司也获得了美军订单,其中Flir公司为军队特供版HoloLens 2提供热传感器,该传感器就放在头显正前方,外形像是半颗弹珠,这项装置可提供夜视等功能另外,还有一家签订军方合同的公司在为HoloLens提供立体3D图像显示的技术。

而为什么美军选择微软作为AR头显供应商,Stephen解释:我们需要能够频繁迭代产品的公司,比如微软。关于为什么美军会对MR/AR感兴趣,Stephen表示:我们在观察虚拟和混合现实还有微型传感器有一段时间了,一些企业已经开发出独特形态的设备,如头显。

去年5月,McCarthy等高层领导曾向前国防部长Jim Mattis简短汇报过AR的潜在应用场景,在观看过这些场景的视频后,他最终批准美军区采用这种技术,后来在11月选择微软作为合作伙伴。

MR模拟训练场

据悉,美军将会与微软达成为其24个月的独家合作,也就是说谷歌、苹果或Magic Leap等AR方面的科技公司现在已经没机会继续投标。

微软和美军签合同这件事引起了该公司和员工之间的一些争议,今年2月,100名微软员工给时任CEO Satya Nadella写公开信要求取消IVAS合作。而Nadella对于此事的回应是不会放弃,并将继续与员工协商。

McCarthy表示:IVAS的目的不仅仅是提升军队杀伤力,它的重点目前还是提高士兵对周围环境的感知,提高鉴别敌军的能力,避免误伤平民百姓。

3.特供版HoloLens 2体验

戴上头显后,CNBC记者看到地上显示出他所在地的鸟瞰地图,地图中显示了他脚下的大楼和附近的建筑,样式有点像网上能找到的卫星地图。他一转头,发现地图上代表他位置的小箭头标志也改变了方向,此外地图上还有其他小箭头,代表了其他同样带着特供版HoloLens头显的同伴。

军方表示,在早期测试中发现士兵可能会觉得这款地图有点不方便使用,部分原因是它不够透明,遮挡了背景,因此该应用中还加入了一个指南针,只需要抬起头就能看到。

据CNBC记者称,自己在移动的时候能看到代表方向的度数标志(有点像吃鸡游戏中的定位方式),士兵可以利用这个功能定位队员和敌人。

此外,特供版HoloLens 2还有热成像功能。据悉,目前军队使用的夜视镜会释放绿光,同时敌人也将看到这种光。而特供版HoloLens 2并不是那么亮,但也能让士兵在黑暗中看到其他人。

夜视仪效果渲染图

CNBC记者在试用这项功能的时候,看到周围人身上发出白色亮光,有点像鬼影,即使是躲在障碍物后面的人也能被识别。

陆军部副部长Ryan McCarthy表示:现在的夜视镜在烟雾中可能会被挡住视线,而利用热成像技术,你可以看透烟雾,摧毁目标敌人,同时特供版HoloLens 2也会通过MR图像辅助士兵瞄准。

模拟战斗指挥系统

McCarthy还表示:IVAS的应用将不只是战场,我们可以通过它来手机训练士兵的数据,以此来提高射击水平,而且它还有测量心率的功能。

据悉,现在的特供版HoloLens 2体积较大,难以与头盔配合使用,不过美军在想办法大幅降低它的体积,一位军队领导人称,预计六个月内,能将AR头显的体积缩减到普通眼镜大小。

4.关于士兵的反馈

三名体验过特供版HoloLens 2的士兵表示:很喜欢“行动报告”功能,它总结了在训练过程中士兵的准确性和表现。他们还认为,这项系统有望颠覆训练和未来的海军。

士兵们认为IVAS系统对战斗有加成的效果,给他们带来更高杀伤力,这对于战前的训练来说尤为重要。

其中一位表示:利用MR训练可逼真模拟战斗现场,利用IVAS系统中的图像我们可以预测出真实的战场,这将大大提高训练效果。

记者体验到的特供版HoloLens 2还处于测试阶段,是在几个月前才被开发出来,士兵们也才刚刚开始为它提供真实反馈,因此该头显技术短期内不会被军队使用。

McCarthy预计,最早在2022和2023年之间将有中数千名士兵用上IVAS。关于这项技术正式在军队中应用的时间,军事指挥官Michael A. Crosby表示:在正式投入使用之前,我们必须确保这项技术足够稳定,能够为战士所用,同时还透露:美军特供版HoloLens 2可能会在2028年大量投入使用。

(文章转载自青亭网  )