对喑哑人士而言,手语是重要的沟通方式之一,然而一般人不懂手语沟通还是隔阂。不过美国德克萨斯州农工大学(TEXUA A&M UNIVERSITY)大学生物医学工程学系的助理教授鲁思贝.贾法理(Roozbeh Jafari)和他的团队正努力研发一款可以解读手语的穿戴感测装置。
鲁思贝.贾法理(Roozbeh Jafari)表示,目前针对美国标准手语(ASL-American Sign Language)自动翻译的系统,主要透过摄影机记录、追踪手部动作,将手语动作分解,透过影像追踪肢体轨迹,把手势转为文字,显现在电脑或手机屏幕上,
但当手语姿势不够精准或多人处在摄影镜头前都会失效,使用者必须随时携带相机也造成相当大的不便利性。
▲ 不同手语动作转译。
鲁思贝.贾法理(Roozbeh Jafari)开发的新型穿戴式感测装置,记录的不再是影像动作,而是使用者在比手语时,手臂、手腕肌肉产出的肌电图(EMG- Electromyography),从手臂运动神经传导的电流讯号,解读转化成文字。鲁思贝.贾法理( Roozbeh Jafari)研究团队也将这套系统设计加装学习功能,即随着使用者长期互动,系统会做行为学习并调整对不同手势动作的认知。
▲ 透过穿戴感测,动作可转译成文字。
未来,鲁思贝.贾法理(Roozbeh Jafari)期望除了能让手语沟通零距离之外,也能让人跟物之间的沟通强化,将传感装置的技术更多元推广到智慧生活中。新时代的沟通模式正在改变,对话或许不再局限于声音和文字,而是可能借由肌肉、动作和讯号传导传达更多样的互动。
(本文由 i创科技 授权转载)