新型可穿戴技术能“读懂”聋哑人肢体语言

[摘要]传感器通过捕捉手语信号“读懂”他们要说的话。

新型可穿戴技术能“读懂”聋哑人肢体语言

全世界目前有7000万聋哑人,作为一个特殊群体,聋哑人可以使用肢体语言来跟别人进行交流,但是如果遇上了看不懂肢体语言的人,双方就无法正常交流。 近期美国德州农工大学(Texas A&M University)开发出了一种新型可穿戴技术,它或许在未来能够打破聋哑人与其他看不懂肢体语言人的交流障碍。

跟其他可穿戴设备相似,这款可穿戴设备也是依赖于传感器来工作,其中包括了可以追踪聋哑人手势运动的传感器,以及可以捕捉聋哑人在做肢体语音时肌肉产生的肌电图或者EMG信号的传感器,系统能够识别、分析这些信号,从而“读懂”他们所说的话。

美国德州农工大学生物医学工程教授Roozbeh Jafari表示,这种新型可穿戴设备系统能够“解码”从手腕捕获的肌肉运动,其中有些运动通过追踪手指运动来以间接方式获取,比如有时候聋哑人用拳头来做肢体语言,这种肌肉活动跟手臂运动会有不同。

对于研究人员来说,这种差异是他们开发这套系统中遇到的最大挑战。因为在现实生活中,聋哑的交流动作很多,系统需要准确、实时地处理和翻译这些不同的信号动作,这个过程就需要成熟的算法来支持。

另一个挑战就是,即便是一个动作,让两个聋哑人来做,做出来也不会是一模一样,这也就意味着,这些肢体语言,并没有统一的标准,这样就增加了系统识别难度。不过,研究人员通过设定程序让系统来向用户“学习”。

“当你首次使用这款可穿戴设备时,系统的操作可能会存在一些误差,但是随着你使用这款设备次数越多,系统将会逐步地学习用户的行为,并围绕用户建立一种自己的学习模式” Jafari表示。

目前,这款设备还是原型产品,需要通过使用蓝牙将设备与电脑或者智能手机连接,来发送已翻译出的肢体语言。不过,该团队表示,未来他们将把这款设备的体型缩小,以便能够让用户将其戴在手腕上,类似于智能手表。

另一方面,人与人的交流应该是连续性,不间断的,因此研究人员希望这套系统能够完整地按一段话来翻译,而不是仅仅几个字。此外,研究人员还希望在这款可穿戴设备中加入合成声扬声器,这样就能够让那些聋哑人不光能够看懂别人的手势,还能够“发声”说话。

来源:腾讯数码

传感物联网专注物联网新闻报道,每日推送最新物联网、人工智能、智能穿戴设备等相关产业资讯。扫描下方二维码关注 传感物联网 官方微信(或微信中搜:chuanganwang )。

传感物联网微信

编辑: 发表于 2015 年 11 月 30 日
文章栏目: 国外资讯, 智能穿戴, 看点, 标签: ,