豫都网 > 河南新闻 > 开封新闻 > 本地社会 >

从开封走出的学子王娜娜成功研发手语翻译器

[摘要]王娜娜(右)和共同研发手语翻译器学生。 近日,来自清华大学、北京航空航天大学的两位姑娘和团队研发的一款针对失语者的小众产品荣获全球责任创新挑战赛一等奖。2017年5月9日,《中国青年报》专版刊载文章《以爱的名义 北航清华女学霸研发手语翻译器》。文...

0520wba4-1-12

王娜娜(右)和共同研发手语翻译器学生。

近日,来自清华大学、北京航空航天大学的两位姑娘和团队研发的一款针对失语者的小众产品荣获“全球责任创新挑战赛”一等奖。2017年5月9日,《中国青年报》专版刊载文章《以爱的名义 北航清华女学霸研发手语翻译器》。文章称,“手音”创始人王娜娜领衔的团队经过两年的艰苦努力终于成功研发出了手语翻译器。该款手语翻译器依靠穿戴在手臂上的手环来捕捉手部运动的肌电信号,并将信号转化为文本或语音,达到帮助我国近7000万失语者进行日常交流的目的。

据了解,这款手语翻译器的研发者之一王娜娜现就读于北京航空航天大学,毕业于河大附中,是从我市走出的学子。近日,记者辗转与王娜娜取得联系,听她讲述研发手语翻译器的始末。

为了失语好友研发手语翻译器

“因为我的一位失语朋友,激发了我研发手语翻译器。”王娜娜说。在一次活动中,她认识了从北京联合大学特殊教育学院毕业的失语者张权,两人很快成了好朋友。由于不会手语,在日常交流中即使面对面也无法像正常朋友那样交流,需要借助手语进行沟通。王娜娜坦言,她和张权的相处更像网友。

后来,王娜娜认识了更多的失语者,在与他们沟通的过程中愈发感到困难。“有时我觉得我说话是在‘伤害’他们,聊得开心了就在想是不是忽略他们了,甚至有些自责。”王娜娜说。

与失语者的沟通障碍,让王娜娜产生了思考。她和室友开始关注失语者这类特殊人群,她上网查询发现,中国失语者(包含听障人士、脑中风患者、脑瘫患者和渐冻症患者)的数量达7000万人,占总人口的5%。“这是一个非常庞大的人群,他们平时如何与人沟通,他们可能无法像正常人的工作、生活、交往。”王娜娜说。

在和室友探讨时,王娜娜想到了学术科技作品竞赛时的图像识别项目,当时这个项目获得了一等奖,或许可以用这种技术帮助失语者。于是,她和室友开始着手研究手语翻译的可行性,查论文、做实验、写代码,用项目获得的50000元奖金作为启动资金行动起来。“我们发现了一个没有人发现的需求,想成为第一个实现需求的人,也让我们所学的知识产生价值。”王娜娜说。

为了研发产品 亲自体验失语

研发手语翻译器的过程并非一帆风顺,在图像识别等被否决后,王娜娜和室友最终确定了通过臂环捕捉肌电信号的方法进行研发。最难能可贵的是,为了研发出更适合失语者的产品,王娜娜和室友亲自体验失语。王娜娜说,当时,她们到商店购物,因为结账时需要了解价格,失语者只能通过手机和店员沟通,时间稍长排在后面的人开始不耐烦地催促。王娜娜说,“如果别人知道我是失语者可能会体谅,但不知道就会埋怨,越埋怨我越着急。”

确定研发方向后,关键是不断地输入数据、调试数据以保证手语翻译的准确性。为了检验模型的可靠性,最初只有两个人在录手语数据,整天戴着臂环不停地做动作。为了保证数据的多样化,并且真正让失语者喜欢,她们后来联系了天津理工大学聋人工学院,合作进行数据采集和智能臂闭环开发,还与北京市朝阳区残联达成合作意向,为“手音”的产品服务化提供咨询、指导。

如今,“手音”涵盖了200个手语动作,为了保证精确度,每一个动作录制了1000人次。在有了自己的手势数据库之后,团队还搭建了一个7层BP神经网络(一种按误差逆传播算法训练的多层前馈网络,是目前应用最广泛的神经网络模型之一)对数据速度进行训练,目前识别准确度已经达到95%。

“过程充满艰辛,但我们一天都没有想过放弃。”王娜娜说,做研发她们都是在自己的实验室里,开会就去咖啡厅、餐厅、教室。后来,团队内有人因出国而退出,王娜娜在北航保研继续深造,室友黄爽保研至清华大学。但是她们没有因升学而放弃团队,继续坚定地吸引人才,研发产品。她们对未来有很多设想,“手音”可以实现面对面小聊和长时间对话功能,未来还可以推出手语教学、手语字母和智能臂环闭环,解决手语教师缺乏等各种问题。此外,这种人工智能技术成熟后还可以应用到其他方面,例如可以教学钢琴的孩子更加准确地弹琴。

据介绍,“手音”是一款针对失语者的小众产品,预计今年5月下旬上线。普通人可能难以想象,这款产品的意义在于——手语是失语者彼此沟通的桥梁,但对于普通人来说这是比所有外语都难学的语言,“手音”将做润物细无声的沟通桥梁。

会学会玩的优秀学子

据了解,王娜娜是河大附中2011届毕业生,据她当年的班主任欧阳亮老师回忆,王娜娜属于既会学又会玩还会工作的学生,是学校培养的具有优异成绩、创新潜质和社会责任的优秀典范。

欧阳亮说,高中三年,王娜娜成绩一直名列前茅,2010年获得高中化学全国联赛一等奖,2011年以661分的优异成绩被北京航空航天大学录取。后来,在北京航空航天大学继续读研。“她不是死读书的那类好学生,她很会玩,积极参加学校和班级组织的各种活动。”欧阳亮说。在活动中,王娜娜总有奇思妙想,总能给大家意想不到的惊喜。有一次,班级与联通公司组织联谊活动,其中有一个节目需要黑色风衣作道具。但是,临时找不到合适的黑色风衣,这把同学们急坏了。王娜娜却笑呵呵地说她有办法。第二天一早,王娜娜真拿来了一件“黑色风衣”。不过令大家眼前一亮的是,这是一件黑色的“塑料风衣”。原来,王娜娜花了一个晚上的时间用废旧的黑色塑料袋自己缝制了一件“黑色风衣”,既为班级解了燃眉之急,又体现了环保理念。

除了会学习、会玩之外,王娜娜还是一名尽职尽责的班干部。她担任过宏志班班长、学习委员、生活委员和年级学生会干部。班主任和各科老师对王娜娜的评价是:工作有方法、有担当、认真负责、关爱同学。


《从开封走出的学子王娜娜成功研发手语翻译器》河南新闻-豫都网提供,转载请注明出处:http://kaifeng.yuduxx.com/shehui/818560.html,谢谢合作!

[责任编辑:admin]

豫都网版权与免责声明

1、未经豫都网(以下简称本网)许可,任何人不得非法使用本网自有版权作品。

2、本网转载其他媒体之稿件,以及由用户发表上传的作品,不代表本网赞同其观点和对其真实性负责。

3、如因作品版权和其它问题可联系本网,本网确认后将在24小时内移除相关争议内容。

详细声明请点击进入>>

返回豫都网首页
版权所有: 豫都网 Copyright(c) 2010-2015 YuDuWang Network Center. All Rights Reserved 豫ICP备13014680号
若无意侵犯了贵司版权,请来信通知,我们会及时处理和回复,谢谢!邮箱:admin@yuduxx.com
未经豫都网书面特别授权,请勿转载或建立镜像 违者依法追究相关法律责任