把语音转换成文字,再将文字翻译成手语,在第25个“全国助残日”到来之际,江苏科技大学的一群平均年龄不到22岁的年轻创业者们,研发出了一款“聋人自然手语翻译器”,为普通人与聋哑群体搭建沟通的桥梁。

拿起手机,点击机器人图标,说出你想对聋哑朋友说的话,只需几秒钟,一张张手语图便跳了出来,实现普通人与听障者的零距离沟通。

这原本只是一个简单的概念设想,目前,一群平均年龄只有22岁的大学生做到了,让不懂手语的人也能和听障群体进行交流。

5月14日,江苏科技大学计算机系的5名志愿者来到镇江市特教中心,在没有手语老师翻译的情况下,通过一个手机APP——聋人自然手语翻译器,与高一年级10位聋哑学生交流互动。

去年10月,TouchVoice创新团队宣布,开始研发助听障群体沟通的软件,目前该团队已扩容至9人。理工科背景加上对自然语言处理的核心优势,几人一拍即合,决定潜心研究一个惠及聋哑群体的手机软件。把语音转换成文字,再将文字翻译成手语,为普通人与聋哑群体搭建沟通的桥梁。

设想勾画完成之后,“三大库”的建立至关重要:手语图片库、手语动画库、手语视频库。研发团队核心成员吴琪在接受媒体采访时表示,此外,为了该款软件研发的顺利推进,团队成员分别负责3D人体骨骼动画研究、安卓端的开发、算法研究、以及自然语言分析几大块工作。

“目前来看,我们已经完成最基础的构想——手语图片库,并且取得了良好的用户体验,和同学们交流了40多分钟,每句语音都被准确翻译成了手语图,他们都能看懂。” 吴琪介绍,几经周折,团队将“我爱手语网”列为最佳选择对象,在计算机系老师编写的“爬虫”软件支持下,目前已经成功收录5234张手语识别图片。

据介绍,为了呈现出动态手语,并将手语与文字翻译互通,用动画和视频进行呈现。团队购置了Leap Motion设备拍摄手语动画,并加入了配备RealSense 3D摄像头的笔记本配合图像采集。

但是,研发也不是一帆风顺,据团队另一核心成员陈璟透露,团队构思了各种手语识别算法,考虑平行关节、手指点、深度图等问题,最终由于手指关节数据的误差较大,产品研发优化在这方面的瓶颈尚待突破。

计算机学院五名学生开发手语app,大学生团队研发成功“聋人自然手语翻译器”APP...相关推荐

  1. 计算机学院五名学生开发手语app,参考答案2020知到APP妙手传译-实用手语

    摘要: 标准曾经者.参考者.者和者的将顾经常潜在初次分为使用使用使用使用是(客划.特定买旅品的总量)购的旅群(游者游产,手传需求在一定的域内旅游和区是指时间.题而不么"的问是"是什 ...

  2. 五邑大学计算机学院白明,五邑大学计算机学院2015年学生工作简报(第五期)

    目 录 ★我院举行学生干部时间管理与应用文学习专题培训会 ★计算机学院召开C语言学业指导会 ★计算机学院举行2015年考研分享暨动员大会 ★计算机学院召开离散数学学业指导会 ★计算机学院召开操作系统学 ...

  3. 北航计算机学院李卫国,北航学生评选“心目中最爱戴的老师”

    尊师重教历来被中华民族奉为传统美德,北航师生亦努力将其发扬光大.近日北航校工会.教务处.校团委联合主办,各院系团委承办了第四届我爱我师的评选活动,旨在加强学校学风建设,同时以此为契机展现老师个人风采, ...

  4. 计算机学院考勤管理办法,学生考勤管理规定

    根据<学院学生学籍管理实施细则>第二章规定,对学生考勤和请销假的有关事项规定如下: 一.学生自开学第一天起实行考勤.学生必须按学院规定按时报到注册,按时上课,按时参加教学计划规定和学院统 ...

  5. 天河计算机学院,23名90后加入国防科大“天河”超级计算机团队

    初春,记者来到国防科大计算机学院"天河"创新团队采访,随处可见一张张稚嫩的面孔.该院院长廖湘科教授告诉记者:"他们是最近加入团队的一批本科生,都是90后!" & ...

  6. 廉洁文化 计算机学院,计算机学院关于在学生中开展第五届“廉洁诚信,从我做起”教育活动的通知...

    为了积极营造"诚信.守法.勤俭"的廉洁文化氛围,牢固树立全体师生正确的世界观.人生观.价值观,培养学生廉洁奉公.诚信守法的意识,建立全方位廉政教育,着力建设良好的"敬廉崇 ...

  7. 计算机教师结构化方式面试,市计算机:17名学生通过全国教师资格证结构化面试...

    近日,从教育考试部门获悉,我校2017级学前教育专业23名学生首次参加全国教师资格证结构化面试考试,17人顺利通过教资结构化面试,通过率高达73.91%,在全省中职学校学前教育专业此类考试中名列前茅. ...

  8. 潍坊科技学院计算机学院刘君,2019年山东省高校大学生计算机科技创新大会暨第十一届山东省大学生科技节计算机学会六项赛事研讨会在潍坊科技学院举行...

    3月16-17日,2019年山东省高校大学生计算机科技创新大会暨第十一届山东省大学生科技节计算机学会六项赛事研讨会在潍坊科技学院举行. 济南市科学技术协会副主席李武,山东高教学会计算机教学研究专业委员 ...

  9. 武汉大学计算机学院李明,第一届CSIG全国SLAM技术论坛成功举办

    2018年7月28日-29日,中国图象图形学学会主办的"第一届全国SLAM技术论坛"在浙江大学成功举办. 本次论坛由深蓝学院承办,浙江大学计算机辅助设计与图形学国家重点实验室协办. ...

最新文章

  1. ABS是啥,为什么区块链可以与它完美结合?
  2. ERROR:非静态成员引用必须与特定对象相对
  3. 阿里开发者招聘节 | 面试题08:NAS(Network Attached Storage)协议NFS和SMB相关问题
  4. 剥开比原看代码03:比原是如何监听p2p端口的
  5. 基于mysql的分析型数据库_数据仓库_数据分析_分析型数据库_MySQL查询
  6. lisp6 暖通cad_这些高效插件,学CAD的基本用过两种以上
  7. 高中计算机高考时vb试题,高中信息技术vb试题及答案
  8. 如何使用腾讯云存储图片
  9. 2019年区块链安全事件总结,全球损失超60亿美元 | 盘点
  10. 【转载】参数返回值及NRV优化
  11. 云计算技术基础复习知识点
  12. oracle 全文检索实践
  13. feded计算机音乐,Romeo And Jazzie/Alan Walker《Faded Refix》[FLAC/MP3-320K]
  14. video.js API
  15. sysbench花式采坑之一:自增值导致的TPS不可靠
  16. 百度网盘快速下载小工具:ENFI下载器、Speedkoala、PanDownload、SpeedPan
  17. HTML+CSS简单静态页面——安利首页
  18. JavaScript - 内置构造函数(内置对象)
  19. python OCR Tesseract 训练
  20. axure文件如何加密_Axure发布到AxShare的加密与非加密方案

热门文章

  1. 7-2 哈夫曼编码 (30 分)
  2. nmap地址段下的ip_安服福音——花式nmap扫描整理结果(文末重磅消息)
  3. sql 两个表列包含_Oracle数据库扩展语言PL/SQL之运算符
  4. pytorch数据预处理
  5. XGBoost的安装与介绍
  6. C 和 C++ 文件操作详解
  7. Java加密与解密的艺术~数字签名~ECDSA实现
  8. ajax将响应结果显示到iframe,JavaScript:iframe / Ajax / JSON
  9. java loadonstartup_java的web配置文件的“load-on-startup0/load-on-startup”一个问题
  10. MultipartFile文件上传