聋人无障碍双向交互系统获大学生全国科创总冠军

　　一套基于多元信息融合的手语双向交互系统在日前于上海闭幕的2018“未来力大会”大学生社会创新大赛全国赛上脱颖而出，斩获创行中国科创冠军赛全国总冠军。记者今日（21日）从该奖项获得团队所在高校东北大学获悉，这一名为“妙手回声”的创新研发项目，为聋人在日常生活中与健全人进行无障碍交流提供了极大便捷，也为他们身心重返社会创造了有利条件。今年10月，该团队还将代表中国前往美国硅谷参加2018创行世界杯总决赛。 

　　该项旨在改善聋人在日常生活中与健全人交流困难问题的创新研发，由东北大学学生曾振、贺潇、李荣颉等在该校机器人科学与工程学院副教授王斐指导下完成并实验成功。“妙手回声”的系统由可同步采集上肢肌电与惯性信息的佩戴式手环、安装有手语双向交流APP的平板电脑和手语识别云服务器构成。“我们研发的手语双向交互系统为聋人架起一座与世界沟通的桥梁，用一双妙手化无声为有声。”王斐表示。 

实现手语与语音及文图间自然转换 

　　在与健全人进行交流时，上述系统对手环采集得到的聋人上肢多源信息进行实时处理，并基于深度学习完成手语关键词在线识别，然后使用语法模型获得手语词句，并通过语音芯片合成，实现手语到语音的转换。同时，健全人的语音可以通过APP转化为文字和手语动图反馈给聋人，从而实现了二者的自然无障碍的双向交流。 

　　与传统基于机器视觉的手势识别方法相比，该项目使用的肌电手环可避免光照、遮挡、干扰和手指细微动作无法捕捉等严重缺陷，在便携实用的同时，更增加了手语识别的实时性和准确性。 

10月代表中国出战硅谷 

　　作为本次科创冠军赛的总冠军，东北大学“妙手回声”项目团队将于今年10月代表中国出战在美国硅谷举行的2018创行世界杯总决赛。在本月17-18日的全国比赛期间，该项目从全国47个科创赛项目中脱颖而出，获得评委一致认可。 

　　据悉，成立于1975年的创行（Enactus，原SIFE-Students in Free Enterprise），是由37个国家超过1700所高校在校大学生和学术界人士以及来自全球500强企业的商界领袖组成的国际性非营利组织，总部设在美国，是全球三大国际大学生组织之一。每年赛事期间，在各国站大赛结束后，当年度的各国总冠军会代表该国参加世界杯总决赛，通过自主设计并印刷的年报和配合试听效果的现场陈述，向所有人展示其社会实践项目的成果。
来源：大公网