大家对HoloLens这种MR头显的一般印象是黑科技、科幻片成真,但实际上HoloLens APP也是可以充满温情的,例如下面的这个应用就可以帮助视觉障碍人群进行室内导航,原理据说类似蝙蝠的回声定位。
***
***
尽管实际体验过的人其实不多,但经过一年多的普及,很多人至少已经听说过VR头显,而MR和HoloLens则仍然只有科技爱好者知道。这些设备诞生的根本原因还是在于为人们带来更加方便的生活。人们探索VR和AR在医疗等方面的应用,并考虑让它们进入日常生活中。
***
现在,一位波特兰的HoloLens开发者Javier Davalos就展示了MR硬件在帮助视障人士方面的作用。
***
***
在开发者上传到YouTube的视频介绍中,Davalos使用HoloLens的音频辅助正常地在室内环境中走动。我们知道HoloLens拥有扫描周围3D环境构建实时地图的能力,Davalos就借助HoloLens的音频提示确定方向和物品的距离等。这个应用模仿了蝙蝠的回声定位系统,将检测到的视觉信息转化为容易理解的音频波动,用户听到的声音会因为距离物品的远近而发生变化。
***
首先,Davalos展示了一个单视场版本的应用,它可以根据用户前方的物品的不同而改变音频。例如楼梯的这一层和另一层就听起来不同。屋子里的其他物品也拥有自己独有的声音。这个系统可以让人凭声音分辨不同的物品。
***
***
然后就是立体模式,或者说你将拥有“两只眼”,而我们知道双目视觉可以识别出物体的远近了。这时,来自两个不同点的声音会分别进入用户的左右耳,这样我们甚至能听出是不是到墙边了或者前面是否是桌角等信息。总之就是精确度提升。
***
除了立体模式,Davalos还设计了简单的语音命令系统,用户可以听到HoloLens SLAM系统测量物品长度的结果,或者电子罗盘提供的方向信息,又或者让HoloLens帮你数楼梯阶数。
***
目前,Davalos还在完善这个HoloLens应用,他还需要一些视障人士帮助他正确评估软件功能。
***