分享好友 资讯头条首页 频道列表

VR技术赋予视障人士辨别方向和物体识别的能力

2020-03-31 13:424280

计算机有视觉而人没有,我们为什么不试图让前者帮助后者呢?或许这就CARA背后的主旨,CARA 是加州理工学院开发的一款新的 HoloLens 应用程序。

该软件借助 HoloLens 的深度感知能力,使用计算机视觉算法扫描环境并识别物体。然后,该应用程序向视力受损的用户告知物体的存在,使用空间音频让用户确定物体在他们空间中的相对位置。

加州理工学院(Caltech)生物科学教授、神经生物学执行官马库斯 · 梅斯特(Markus Meister)博士和本杰明 · f · 比亚吉尼(Benjamin f. Biaggini)博士在一份声明中表示:“想象一下,在这个世界里你周围所有的物体都有声音,都能和你说话。无论你注视着什么,你关注的不同物体都会被激活,并对你说出它们的名字。你能想象在这样一个世界里四处走动,完成一些我们通常使用视觉系统完成的任务吗?这就是我们在这里所做的——为物体赋予声音。”

VR技术赋予视障人士辨别方向和物体识别的能力

Cara 是由研究生 Yang Liu 领导的科学家团队在 Meister 的实验室开发的,可以提供了几种模式来帮助使用者。当 HoloLens 扫描环境时,系统的聚光模式可以根据用户的视线来识别物体,而Scan模式则可以从左到右来识别物体。

研究小组通过设计一条通往加州理工学院贝克曼行为生物学大楼的路线来测试这个应用程序。在使用Cara 系统时,每个测试对象都成功地根据HoloLens的导航走出迷宫。 此外,研究小组还设计了一个虚拟现实环境,作为其他研究人员评估自己辅助设备的考试。

VR技术赋予视障人士辨别方向和物体识别的能力

该应用程序仍在开发中,目前的工作包括改进和加强计算机视觉算法。这个团队设想在银行、酒店和商店等场所部署软件来帮助客户浏览他们的环境。Meister 、 Liu以及合著者、南加州大学的博士后学者 Noelle Stiles,在一篇名为《AR为盲人提供认知帮助的能力》的研究论文中详细说明了该研究小组的发现。

去年,游戏开发者 Javier Davalos 用 HoloLens 创造了一个类似的概念验证。他的版本也使用环境扫描识别表面和空间音频给用户提示他们的相对位置,但不是以口述识别的对象的形式:演示应用程序会在用户接近障碍物的时候增强音量,并发出警报。

我们很欣喜的看到,越来越多的从事增强现实和视觉辅助工具应用的公司在用各种技术来帮助残疾人。比如,此外VR网曾报道过的纽约大学的学生团队开发了一个可以实时翻译手语的应用程序,甚至 Magic Leap 也获得了类似的专利技术。与此同时,Starks 的AR耳机也可以通过头戴式显示器为听力受损的人提供字幕。经常有人把增强现实描述为给普通人“超能力”,如果你了解自己的超级英雄传说,这可能是件好事,当然也可能是件坏事。但是现在,为了给那些没有拥有能力的人提供虚拟视觉的礼物,至少我们在用这些能力做好事。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容图片侵权或者其他问题,请联系本站作侵删。 侵权投诉


反对 0
举报 0
打赏 0
相关信息
NDFOS全息幻影成像膜 以科技之光,点亮凤凰沉浸式演艺的千年传奇
在文旅融合的新时代,如何让传统文化与现代科技碰撞出惊艳的火花?如何让一场演艺从“观看”升华为“沉浸”?凤凰古城的大型沉浸式实景演出,凤凰沉浸式演艺场地给出了答案——借助NDFOS品牌全息幻影成像膜,这座千年古城的故事被赋予了超越想象的视觉生命力,为观众开启了一场穿越时空的奇幻之旅。当千年凤凰遇见未来科技

0评论2025-03-1898

与哪吒来场屏幕互动是什么体验
电影《哪吒之魔童闹海》票房破百亿元大关后,仍在持续刷新纪录。这股“哪吒热”不仅在电影院激荡,还触发了公共文化服务的“新玩法”。近期,浙江省文化馆主办的“文艺赋美”盲盒音乐会第七季(简称“盲盒音乐会”)频频“出圈”,哪吒、悟空等IP形象跃上商圈大屏,与民乐演奏互为应和。活动不仅成为市民和游客的热门打卡点

0评论2025-03-11166

视听行业高峰论坛(19th)邀请函——AI跨界融合 智能影音+ 重构未来生态
视听行业高峰论坛(19th)邀请函——AI跨界融合 智能影音+ 重构未来生态由中投传媒主办,ISLE、侨交会、鼎校甄选、视听学院联合协办,携手环球视听网、中国投影网、Audio160音响网、教育装备网、LED大屏网、《视听中国》等权威媒体共同打造的视听行业高峰论坛,将于2025年3月7日在中国·深圳国际会展中心(宝安)盛大启幕。

0评论2025-03-11120

深圳市时代中视科技发展有限公司取得全息激光投影机专利,提高了设备的便携性
全息投影网 2025年2月13日消息,国家知识产权局信息显示,深圳市时代中视科技发展有限公司取得一项名为“一种全息激光投影机”的专利,授权公告号CN 222439828 U,申请日期为2023年12月。专利摘要显示,本实用新型涉及投影技术领域,公开了一种全息激光投影机,包括机体,所述机体的底部设置有伸缩组件,所述伸缩组件设置于

0评论2025-02-21175

评论

0

收藏

点赞