我院学生所在团队研发的智能手环“妙手回声”项目获全国总冠军

2018年5月17日-18日，2018“未来力大会”大学生社会创新大赛全国赛在上海跨国采购中心举行，我院2015级计算机科学与技术专业本科生李荣颉、曾振作为主力队员所研发的智能手环“妙手回声”项目，从全国280多所高校脱颖而出，获得创行中国社会创新大赛区域赛一等奖、创行中国科创冠军赛区域赛金奖，并将于今年10月赴美国硅谷参加 2018创行世界杯总决赛，探访创业公司并对话创业导师。此项目还得到了中国日报、沈阳新闻综合频道的报导。
这套基于多源信息融合的手语双向识别系统，针对听力残疾人与健全人的交流困难问题而制成。该系统由三部分组成：佩戴式手环（用于采集上肢肌电与惯性信息），安装手语双向交流APP的平板电脑，手语识别云服务器。交流过程中，系统实时处理由手环采集得到的聋人上肢多源信息，基于深度学习在线识别手语关键词，通过语法模型获得手语词句，经过语音芯片合成，实现手语到语音的转换。同时，健全人的语音可以通过APP转化成为文字和手语动图，反馈给听力残疾人，从而实现两者无障碍交流。