近日，黑龙江大学本科生创业团队的参赛名目“传情达意——让机器手语翻译不再冰冷”凭借其私有的创意和系列工夫冲破，在第十四届“挑战杯”秦创原中国大学生创业盘算竞赛中荣获金奖。这个名目研发了宇宙首个和会面部肌电信号的手语翻译工夫和有关AR眼镜开发，不仅让手语被“听到”，还能让声息被“看见”。
团队通过调研发现，现在人妻熟女助聋开发普及率只好5%，且大宗价钱高，适配场景少，准确率较低。为此，团队决定在助聋开发方面作念进一步探索。他们历时两年，研发出样品并进行完善，现在已与徐州市畸形教师中心等机构刚烈购买意向书。
国产婷婷综合在线精品“咱们的改进居品主要由臂环和AR眼镜两部分构成。”名目慎重东谈主、黑龙江大学电子工程学院朱铭熙说，臂环通过汇集并识别聋哑东谈主作念手语时的肌电信号，将其滚动为语音，竣事了手语的“听觉化”。在这如故由中，电极贴片起到了关节作用。它们豪放捕捉肢体动作的微弱变化，将其滚动为特征向量，与事前成就的手语向量数据库进行比对，从而准确识别脱手语的含义。
然则，仅有臂环的手语识别并不及以达到精确翻译的办法。朱铭熙先容：“手语中面部神采所占的权重不低于40%，而东谈主的心理主要通过眉毛和脸颊两侧的肌肉来体现。”
为了擢升准确率，团队进一步擢升了开发精确捕捉神采、分解心情的本事。他们将电极贴片安装在AR眼镜的引擎上，研发了我国首个和会面部肌电信号的手语翻译工夫。当佩带者因心理产生微神采的时候，开发就能精确捕捉这些微细的面部神采，并将其滚动为特征向量后与数据库中的信息进行比对，从而让手语翻译愈加精确。
同期，团队还扩大了数据蒙胧量，竣事开发时延小于0.1秒，能及时完成13000余条手语数据的调用。恰是基于这些工夫，与同类居品比拟，团队居品的及时性翻译本事更强，准确度更高。
朱铭熙团队的效果，不仅让手语被“听到”，还让声息被“看见”。沟通到许多听障东谈主士存在识字穷苦，朱铭熙团队开发了一个豪放流露在AR眼镜上的数字东谈主。当识别到周围有东谈主语言时，笔墨骨子不错径直匹配到数字东谈主的手语动作上。这么，佩带者就能在AR眼镜上看到数字东谈主打手语，无需识字就能分解对方的意念念。
这一改进为听障东谈主士提供了极大便利，为他们掀开了一个全新的相通世界。该工夫不仅不错用于个东谈主外交行径，也能看成聋哑学校基础的教会扶持安装。“通过让学生佩带臂环，咱们不错检测他们的手语抒发是否圭臬，中控台不错及时流露适度，让手语教会更直不雅，也大大镌汰了教会资本和期间。”朱铭熙先容。
现在，2000余位听障东谈主士佩带了团队研发的居品。河南郑州张哥助残奇迹平台首创东谈主意继磊试用居品后予以高度评价：“这款居品豪放切实匡助聋哑东谈主群，诈欺阛阓相当普遍，但愿能链接完善，让更多有需要的东谈主受益。”
现在，团队正在向数据库链接补充手语数据，扩大居品的诈欺场景。（记者 朱虹 实习生 何雨竹）
