文章图片
文章图片
文章图片
在日常社交场合中 ， 人们通常会采用各种形式的交流方式 ， 除了文字交流、谈话等直接的方式 ， 眼神、姿态、动作也是人与人沟通的关键方式 。 然而 ， 正常的社交为盲人、视障人士带来诸多困难 ， 就像电视里常演的那样 ， 盲人在说话的时候通常不会对着其他人 ， 因为他们难以定位周围人的位置 ， 而且也无法确定对方是否在看着他说话 。
PeopleLens
对于天生失明的孩子来讲 ， 与周围人社交、互动更加困难 ， 在一群人交流的场景中 ， 他们可能需要将头放在桌子上 ， 用一只耳朵来定位周围讲话的人 。 而这就造成他们在正常社交技能上的缺失 。 也就是说 ， 盲人/视障人难以像普通人一样专心交流 ， 很难自然流畅的保持话题 ， 进而产生社交障碍 。
于是 ， 为了训练失明/视障儿童的社交技能 ， 帮助他们与同龄人正常互动和交流 ， 微软研发了一种基于AR眼镜的人脸识别和定位系统：PeopleLens 。 该系统的特点是通过摄像头来定位周围的人 ， 并将他们的坐标组成一个3D地图网络 ， 帮助失明/视障儿童定位这些人 。 此外 ， 它还可以帮助识别这些人的名字、眼神 ， 并通过空间语音来提示用户 。
具体来讲 ， 其具有五大功能：识别眼前人的身份；提示你有人在看你；通过声音帮你定位周围的人；用声音引导你转头面向特定的人；用LED灯提示周围的人你在看他/她 。
灵感来自残奥会
据青亭网了解 ， 微软这一系列研究的灵感 ， 实际上来自2016年的巴西里约热内卢残奥会 ， 其目的是在很多人的社交场合中 ， 帮助盲人/视障人士处理和不同人的对话 ， 弥补眼神和肢体交流的缺失 。
Project Tokyo
在过去几年里 ， 微软的AI团队持续利用计算机视觉技术来帮助盲人/视障人士感受世界 ， 以及识别周围的人 ， 曾推出可识别照片内容的Seeing AI应用 ， 或是基于HoloLens的人脸识别系统Project Tokyo等等 。
在Project Tokyo基础上 ， 微软又研发了一款HoloLens人脸识别应用：PeopleLens 。 与Project Tokyo相似 ， PeopleLens也是通过计算机视觉来识别人脸 ， 然后通过语音提示来帮助盲人/视障人士识别周围的人 。 区别在于 ， PeopleLens将周围的人定位 ， 并生成一种地图网络（People Map） ， 当HoloLens用户靠近周围人所在的位置时 ， 系统便可以快速识别并说出这个人的名字 。 此外 ， 还通过语音提示来引导HoloLens看向特定的人 。
也就是说 ， PeopleLens不再只是单纯的识别人脸 ， 而是进一步定位并保存周围人的位置 ， 好处是响应速度更快 。
微软表示：PeopleLens通过定位和识别空间中的人 ， 帮助盲人、视力障碍人士了解周围的社交环境 。 它还结合了基于心理学、语言治疗的研究和实验成果 ， 通过一系列游戏来训练盲人/视障人士的社交技能 ， 允许他们更好的与同龄人交流 。
技术细节
据了解 ， PeopleLens是一个开放的AI系统 ， 它可以增强盲人/视障人士的日常社交体验 ， 帮助他们更好的感知世界 。 它需要结合AR头显来运行 ， 比如Nreal Light 。 与基于HoloLens的Project Tokyo相比 ， PeopleLens更轻量化 ， Nreal Light更接近普通眼镜形态 。
相关经验推荐
- 安卓|这个月开始，你手机里这些APP都要凉凉！
- 波轮洗衣机|轻薄本｜Acer非凡S3 最便宜的i5-1240P，真实体验，实测分享
- 支付宝|支付宝新版本终于对自己下手了，这个新功能真实用！
- 微软|空调电辅热有什么用？买空调选带电辅热得好，还是不带得好？
- 微软|全球首例！中国家电能否过关？
- 洗衣机|天玑8100手机卖1999真香！但6G+128G现在还能用吗？
- 安卓|这个世界上80%以上的人，都不是手机编程，或者自己搞小技巧的大神
- 折叠屏|Intel、AMD及微软已放弃 又一操作系统也淘汰传统BIOS
- 微软|苹果12换到华为mate40 pro，重度使用7天后，我有话想说
- 显示器|难怪手机充电速度这么慢，原来是这个开关没关闭，涨知识了