HoloLens应用模仿回声定位帮助视障人士导航

时间:2020-02-07 18:55:02   浏览:次   点击:次   作者:   来源:   立即下载

  大家对HoloLens这种MR头显的一般印象是黑科技、科幻片成真,但实际上HoloLensAPP也是可以充满温情的,例如下面的这个应用就可以帮助视觉障碍人群进行室内导航,原理据说类似蝙蝠的回声定位。尽管实际体验过的人其实不多,但经过一年多的普及,很多人至少已经听说过头显,而MR和HoloLens则仍然只有科技爱好者知道。这些设备诞生的根本原因还是在于为人们带来更加方便的生活。  

  人们探索VR和AR在医疗等方面的应用,并考虑让它们进入日常生活中。现在,一位波特兰的HoloLens开发者JavierDavalos就展示了MR硬件在帮助视障人士方面的作用。在开发者上传到YouTube的视频介绍中,Davalos使用HoloLens的音频辅助正常地在室内环境中走动。  

  我们知道HoloLens拥有扫描周围3D环境构建实时地图的能力,Davalos就借助HoloLens的音频提示确定方向和物品的距离等。这个应用模仿了蝙蝠的回声定位系统,将检测到的视觉信息转化为容易理解的音频波动,用户听到的声音会因为距离物品的远近而发生变化。首先,Davalos展示了一个单视场版本的应用,它可以根据用户前方的物品的不同而改变音频。  

  例如楼梯的这一层和另一层就听起来不同。屋子里的其他物品也拥有自己独有的声音。这个系统可以让人凭声音分辨不同的物品。  

  然后就是立体模式,或者说你将拥有“两只眼”,而我们知道双目视觉可以识别出物体的远近了。这时,来自两个不同点的声音会分别进入用户的左右耳,这样我们甚至能听出是不是到墙边了或者前面是否是桌角等信息。总之就是精确度提升。  

  除了立体模式,Davalos还设计了简单的语音命令系统,用户可以听到HoloLensSLAM系统测量物品长度的结果,或者电子罗盘提供的方向信息,又或者让HoloLens帮你数楼梯阶数。目前,Davalos还在完善这个HoloLens应用,他还需要一些视障人士帮助他正确评估软件功能。微软表示:混合现实(MR)视频拍起来也不是那么困难嘛,不过,首先你得有HoloLens。  

  ...。  

收起

相关推荐

相关应用

平均评分 0人
  • 5星
  • 4星
  • 3星
  • 2星
  • 1星
用户评分:
发表评论

评论

  • 暂无评论信息