东大与索尼研发:一种胜过读唇术的传感器

时间:2020-04-03 09:20:29       来源:快科技

不出声,仅仅通过喉咙和下颚的皮肤震动就能知道你想说什么。这可不是读唇术,更不是在拍特工电影。

据外媒报道,近日,东京大学和索尼计算机科学研究所共同研发出的AI系统“Derma”,通过将传感器贴合在喉咙周围的皮肤上,就能成功实现从口形(无声说话)到语音的转化。

据了解,该设备的研究灵感来源于视听障碍者的触诊唇读法,研究者们利用机器学习把整个过程自动化,完成了深层学习的无声语音交互。

该设备只要在下颚皮肤的两个位置安装加速度计和角速度传感器,辅之机器学习,就能通过随着说话发生的下颚运动和舌肌运动引起的从下颚到喉咙的皮肤颤动,进行无声的“语音识别”。

目前,研究者从传感器上获取到了12维皮肤运动信息,能够分析识别35种发声命令短语,准确率达到了94%以上。

该设备体积小、重量轻、耗电量低,不易受到照明条件等周围环境因素的影响。在生活中,该设备也不会影响到使用者的正常生活,吃饭和日常的交流可以照常进行,非常实用。

未来,相信这个设备能够造福大批残障人士。

关键词: 东大 索尼 读唇术