聋哑人心感手语翻译APP的研究

翟冠群，田相克*，马保聪*，田相密，张国凤，赵新甜，曲 增，袁天琦

（1.临沂大学机械与车辆工程学院，山东 临沂 276000；2.沂水县杨庄镇第一初级中学，山东 临沂 276000）

0 引言

根据资料表明，我国听力语言残疾位于五大残疾之首。数据显示，我国每年约有2000万新生儿出生，其中听力受损的新生儿约有3万。在无声的世界里需要我们无声的话语。在他们的健康成长里，需要手语，更需要关爱。希望关注这个项目，实行这个计划，关注弱势群体，传递正能量。

随着信息时代的到来，很多人肯定已经跟不上新时代的脚步，我们通过市场上的调查发现大多数都聋哑人们不能够很好的融入新科技时代，由于先天的不足他们很难适应这个快速变化着的世界，即使可以通过手语沟通，但是现在又有多少人能去看懂手语呢？聋哑人的手语有不同的种类，大众对手语并不普及，减少了聋哑人的许多就业机会。他们急需一项产品来解决这种问题。

1 国内外研究现状和发展动态

手语翻译器一般指UNI的手语―音频―文字转换装置（可以简单理解为语言及听力障碍者的随身翻译机），可以识别手语并转化翻译为语音，同时可将对方的语音转换成文字显示在屏幕上。手语翻译器将帮助语言与听力障碍者与普通人进行双向交流。

图1是旧金山某某公司的UNI装置是一台带专用附件的平板电脑，它利用运动感应摄像头和语音识别技术，把美式手语实时翻译成口语，并把口语翻译成文本。此款产品处于较为初级阶段，可识别手势约300个左右，预计正式推向市场时可识别手势将达到15000个。《时代周刊》评价该发明为“2014年25项最佳发明”。该产品仍然具有许多局限性，是一台带专用附件的平板电脑，限制了翻译功能实时性，并不十分方便。

图1 UNI装置

2019年5月16日全球无障碍宣传日，腾讯优图实验室宣布攻克AI手语识别技术，并联合深圳市信息无障碍研究会，正式发布“优图AI手语翻译机”。使用优图AI手语翻译机，听障人士只要面对摄像头做手语，经过后台计算机高速运算，翻译机屏幕就能快速把手语转换成文字，让健听人士秒懂。

目前，这款翻译机能识别听障者大部分的日常手语表达用语。其背后的手语识别数据集覆盖了近千句日常表达，900个常用词汇，是全球最大的中文手语识别数据集。这是优图通过AI技术协助警方找回多名被拐超过10年儿童之后，腾讯在计算机视觉人工智能领域的又一重大技术突破。未来，优图AI手语翻译机有望在机场、高铁、民政窗口等公共场所部署应用，助力信息无障碍城市建设。

虽然我国信息无障碍领域的投入在逐渐增加，但全国致力于听障者专业服务的人士仍只有大约一万名，大部分公共服务没有配备专门的便利设施。听障人士出门办事往往“鸡同鸭讲”，难以得到正常沟通。未来的AI手语翻译会应用到更多场景，更加便捷强大。

2 心感手语语翻译APP总体方案设计

2.1 产品功能设计

心感手语语翻译APP总体方案设计思路如图2所示。心感手语翻译APP提倡简约，遵循客户至上的原则，为客户提供高性价比、更人性化的手语翻译平台。作为当前潮流下很普通的一款智能APP，没有设计复杂的产品内容，也没有过多的冗余设计以致用户难以操作，用户只需通过APP注册用户，并绑定自己手机、智能手环、平板等带有摄像功能的电子产品，依靠移动网络链接到相应APP与固定的云端，便可享受优质服务，提供更好生活质量。

图2 心感手语语翻译APP总体方案设计思路

2.2 规格参数

产品载体：带有摄像头的智能移动客户端

耗电量：8mA/min（开启后台而不使用的情况下5mA/min）

版本：1.0

续航时间：10天

连接方式：手机下载官方APP，注册登录即可

防护等级：公司承诺保护所以注册用户的个人信息

设备要求：Android5.0、IOS7 以上

产品包装：采用暖色风格，给人一种温暖的感觉，同时也会有一定的安全感，应用界面打开时展示公司LOGO，其下方写有“用心感受、温暖你我”。

3 APP平台设计

心感手语翻译平台能让用户在第一时间进行手语无障碍沟通，拉近心的距离，与之搭配的智能设备在使用时，可实时进行查询、搜索、拍摄翻译等功能，并设有人工智能（AI）及人工客服专门实时解答，大大减小了客户交流时的难度，为客户生活提供便利。

APP承担着数据分析处理的使命，使用者获得热门查询词汇、词汇学习建议等等这些都是通过APP来实现的，APP与智能设备及云端处理器同步连接，实时上传更新记录及储存数据，方便用户实时掌握词汇学习情况，更好地了解手语。

心感手语翻译APP具有监测数据分析、趣味手语操、常用词汇推荐等功能与模块，同时提高配套服务所带来的深度体验，具体功能如下：

（1）打开APP时会出现心感LOGO标志，标志下方写有“用心感受，温暖你我”，突出心感手语翻译APP的桥梁使命。

（2）进入首页后，初次使用时用户可看到心感手语翻译APP的具体介绍，它大致描述了心感手语翻译APP的功能定位，以方便用户快速了解心感手语翻译APP。在首页上同时也可以直接看到自己的词汇查询使用信息以及对用户词汇学习的建议。根据数据库反馈的信息，为使用者制定合理的个人手语学习计划，提供更为便捷的生活方式。右下角设有功能──我的，用户可以绑定账号，修改用户信息，以及设定各种个人信息等等。

（3）APP中还开设有每日词汇推介，搜索查询等功能，用户可以了解一些关于手语方面的知识，APP设有客户服务功能，人工智能助理与人工客服实时为您解答手语问题，以方便用户了解自己的手语学习情况。

（4）APP可与家人账号进行绑定，获取权限后方可了解家人词汇使用情况，若有判断错误的问题，利用APP反馈环节，用户将信息上传到APP，通过专线联络解决问题，设有向朋友分享词汇数据的独特功能，使用者只需点击分享功能即可发送到朋友圈、QQ空间、微博等一些第三方软件，方便快捷。

（5）APP界面的背景采用明亮温柔的暖色──浅粉色，避免白色带来的色彩冲击、黑色的阴暗压抑。

4 产品特性及适用人群

4.1 核心竞争力分析

本产品采用AI分析技术，加入了“手环、手机等+APP+云端”的新模式，可以存取调取数据的功能，在未来的产品中会出现全息技术的融合及升级。具有数据准确切实，翻译随时随地，应对突发情况能力强的特点。

手语是聋哑人不可或缺的语言工具，是一种很美的语言，也是一种心与心的交流。手机APP与线下相关联，APP承担着数据分析处理的使命，使用者通过拍摄聋哑人的手语达到交流理解的目的。本研究致力于让手语变成一种可以让更多人理解的语言，来拓宽聋哑人范围更广的就业机会，增加对聋哑人更多的关爱。

4.2 消费者特征与需求

聋哑人的手语有不同的种类，大众对手势语言并不普及，减少了聋哑人的许多就业机会和人与人之间的沟通交流。他们急需一项产品来解决这种问题，正是抓住了消费者的这一需求和心理。在生活中消费者心理分为好几种，比如从众心理、求实心理等。其中，从众心理指的是盲目的模仿；求实心理，是根据自己的实际经济实力购买合理的物品。该产品正符合消费者各种心理，产品更具有竞争力。

5 结语

本文主要是针对聋哑人与正常人以及聋哑人与聋哑人之间交流的困难提供一种解决方案即手语翻译器，让不同群体可以实现无障碍交流，通过该手语翻译器，可以将聋哑人表达的手语表达给另一个健全人或者表达给使用手语不同于该聋哑人的另一个聋哑人，也可将健全人的说话翻译成相应的手语表达给聋哑人，克服了聋哑人和健全人之间以及不同地域、不同民族的聋哑人之间交流所面临的问题。对于AI这种善于模仿人类能力的技术来说，它的产生就可以成为搭建各个群体之间交流的桥梁，Al技术不仅可以进行语言交流，甚至可能成为跳动的心脏。未来会有越来越多的科学工作者和企业家关注到他们。聋哑人虽然不会说话，但他们渴望别人理解自己。Al技术虽然没有灵魂，但他可以实现语言的跨越。未来让我们一起努力用科技造就世界。