可穿戴智能手套借助电子传感器 可将手语实时转换为语音
6月30日消息,加州大学洛杉矶分校(UCLA)的生物工程师设计了一种类似于手套的设备,可以通过智能手机应用程序将美国手语实时转换为英语语音。他们的研究发表在《自然电子》杂志上。
该系统包括带有细长传感器的手套,该传感器可伸展五个手指中每个手指的长度。
UCLA萨穆里分校工程学院生物工程学助理教授陈俊说:“我们希望,这为使用手语直接与非签字人交流而无需其他人翻译的人们提供一种简便的方法。此外,我们希望它可以帮助更多的人自己学习手语。”
该系统包括一副带有细长传感器的手套,该传感器沿着五个手指中的每个手指的长度延伸。这些由导电纱线制成的传感器拾取代表单个字母、数字、单词和短语的手部动作和手指位置。
然后,该设备将手指的运动转换为电信号,然后将其发送到戴在手腕上的一美元硬币大小的电路板上。电路板将这些信号无线传输到智能手机,该智能手机以每秒大约一个单词的速度将其转换为语音。
研究人员还在眉毛之间和嘴巴一侧的测试者脸上增加了粘性传感器,以捕捉作为美国手语一部分的面部表情。
系统的数字渲染,有助于将手语转换为语音。
研究人员解释道,以前提供美国手语翻译功能的可穿戴系统受到笨重设备设计的限制,或者穿着不舒服。UCLA团队开发的设备是由轻便、便宜、但经久耐用的可拉伸聚合物制成的,电子传感器也非常灵活且便宜。
在测试该设备时,研究人员与四名聋哑人一起使用美国手语,佩戴者每个手势重复15次。定制的机器学习算法将这些手势转换为它们所代表的字母、数字和单词。系统识别出660个符号,包括每个字母和0到9的数字。
UCLA已为该技术申请了专利,基于这种技术的商业模型将需要增加词汇量和更快的翻译时间。
自新型冠状病毒肺炎疫情爆发以来,传感器专家网一直密切关注疫情进展,根据国家及地方政府的最新调控与安排,为更好的服务相关企业,在疫情期间,传感器专家网免费发布企业相关文章,免费成为传感器专家网认证作者,请点击认证,大家同心协力,抗击疫情,为早日打赢这场防控攻坚战贡献自己的一份力量。