聾啞人心感手語翻譯APP的研究

翟冠群，田相克*，馬保聰*，田相密，張國鳳，趙新甜，曲 增，袁天琦

（1.臨沂大學(xué)機(jī)械與車輛工程學(xué)院，山東 臨沂 276000；2.沂水縣楊莊鎮(zhèn)第一初級(jí)中學(xué)，山東 臨沂 276000）

0 引言

根據(jù)資料表明，我國聽力語言殘疾位于五大殘疾之首。數(shù)據(jù)顯示，我國每年約有2000萬新生兒出生，其中聽力受損的新生兒約有3萬。在無聲的世界里需要我們無聲的話語。在他們的健康成長里，需要手語，更需要關(guān)愛。希望關(guān)注這個(gè)項(xiàng)目，實(shí)行這個(gè)計(jì)劃，關(guān)注弱勢(shì)群體，傳遞正能量。

隨著信息時(shí)代的到來，很多人肯定已經(jīng)跟不上新時(shí)代的腳步，我們通過市場上的調(diào)查發(fā)現(xiàn)大多數(shù)都聾啞人們不能夠很好的融入新科技時(shí)代，由于先天的不足他們很難適應(yīng)這個(gè)快速變化著的世界，即使可以通過手語溝通，但是現(xiàn)在又有多少人能去看懂手語呢？聾啞人的手語有不同的種類，大眾對(duì)手語并不普及，減少了聾啞人的許多就業(yè)機(jī)會(huì)。他們急需一項(xiàng)產(chǎn)品來解決這種問題。

1 國內(nèi)外研究現(xiàn)狀和發(fā)展動(dòng)態(tài)

手語翻譯器一般指UNI的手語―音頻―文字轉(zhuǎn)換裝置（可以簡單理解為語言及聽力障礙者的隨身翻譯機(jī)），可以識(shí)別手語并轉(zhuǎn)化翻譯為語音，同時(shí)可將對(duì)方的語音轉(zhuǎn)換成文字顯示在屏幕上。手語翻譯器將幫助語言與聽力障礙者與普通人進(jìn)行雙向交流。

圖1是舊金山某某公司的UNI裝置是一臺(tái)帶專用附件的平板電腦，它利用運(yùn)動(dòng)感應(yīng)攝像頭和語音識(shí)別技術(shù)，把美式手語實(shí)時(shí)翻譯成口語，并把口語翻譯成文本。此款產(chǎn)品處于較為初級(jí)階段，可識(shí)別手勢(shì)約300個(gè)左右，預(yù)計(jì)正式推向市場時(shí)可識(shí)別手勢(shì)將達(dá)到15000個(gè)?！稌r(shí)代周刊》評(píng)價(jià)該發(fā)明為“2014年25項(xiàng)最佳發(fā)明”。該產(chǎn)品仍然具有許多局限性，是一臺(tái)帶專用附件的平板電腦，限制了翻譯功能實(shí)時(shí)性，并不十分方便。

圖1 UNI裝置

2019年5月16日全球無障礙宣傳日，騰訊優(yōu)圖實(shí)驗(yàn)室宣布攻克AI手語識(shí)別技術(shù)，并聯(lián)合深圳市信息無障礙研究會(huì)，正式發(fā)布“優(yōu)圖AI手語翻譯機(jī)”。使用優(yōu)圖AI手語翻譯機(jī)，聽障人士只要面對(duì)攝像頭做手語，經(jīng)過后臺(tái)計(jì)算機(jī)高速運(yùn)算，翻譯機(jī)屏幕就能快速把手語轉(zhuǎn)換成文字，讓健聽人士秒懂。

目前，這款翻譯機(jī)能識(shí)別聽障者大部分的日常手語表達(dá)用語。其背后的手語識(shí)別數(shù)據(jù)集覆蓋了近千句日常表達(dá)，900個(gè)常用詞匯，是全球最大的中文手語識(shí)別數(shù)據(jù)集。這是優(yōu)圖通過AI技術(shù)協(xié)助警方找回多名被拐超過10年兒童之后，騰訊在計(jì)算機(jī)視覺人工智能領(lǐng)域的又一重大技術(shù)突破。未來，優(yōu)圖AI手語翻譯機(jī)有望在機(jī)場、高鐵、民政窗口等公共場所部署應(yīng)用，助力信息無障礙城市建設(shè)。

雖然我國信息無障礙領(lǐng)域的投入在逐漸增加，但全國致力于聽障者專業(yè)服務(wù)的人士仍只有大約一萬名，大部分公共服務(wù)沒有配備專門的便利設(shè)施。聽障人士出門辦事往往“雞同鴨講”，難以得到正常溝通。未來的AI手語翻譯會(huì)應(yīng)用到更多場景，更加便捷強(qiáng)大。

2 心感手語語翻譯APP總體方案設(shè)計(jì)

2.1 產(chǎn)品功能設(shè)計(jì)

心感手語語翻譯APP總體方案設(shè)計(jì)思路如圖2所示。心感手語翻譯APP提倡簡約，遵循客戶至上的原則，為客戶提供高性價(jià)比、更人性化的手語翻譯平臺(tái)。作為當(dāng)前潮流下很普通的一款智能APP，沒有設(shè)計(jì)復(fù)雜的產(chǎn)品內(nèi)容，也沒有過多的冗余設(shè)計(jì)以致用戶難以操作，用戶只需通過APP注冊(cè)用戶，并綁定自己手機(jī)、智能手環(huán)、平板等帶有攝像功能的電子產(chǎn)品，依靠移動(dòng)網(wǎng)絡(luò)鏈接到相應(yīng)APP與固定的云端，便可享受優(yōu)質(zhì)服務(wù)，提供更好生活質(zhì)量。

圖2 心感手語語翻譯APP總體方案設(shè)計(jì)思路

2.2 規(guī)格參數(shù)

產(chǎn)品載體：帶有攝像頭的智能移動(dòng)客戶端

耗電量：8mA/min（開啟后臺(tái)而不使用的情況下5mA/min）

版本：1.0

續(xù)航時(shí)間：10天

連接方式：手機(jī)下載官方APP，注冊(cè)登錄即可

防護(hù)等級(jí)：公司承諾保護(hù)所以注冊(cè)用戶的個(gè)人信息

設(shè)備要求：Android5.0、IOS7 以上

產(chǎn)品包裝：采用暖色風(fēng)格，給人一種溫暖的感覺，同時(shí)也會(huì)有一定的安全感，應(yīng)用界面打開時(shí)展示公司LOGO，其下方寫有“用心感受、溫暖你我”。

3 APP平臺(tái)設(shè)計(jì)

心感手語翻譯平臺(tái)能讓用戶在第一時(shí)間進(jìn)行手語無障礙溝通，拉近心的距離，與之搭配的智能設(shè)備在使用時(shí)，可實(shí)時(shí)進(jìn)行查詢、搜索、拍攝翻譯等功能，并設(shè)有人工智能（AI）及人工客服專門實(shí)時(shí)解答，大大減小了客戶交流時(shí)的難度，為客戶生活提供便利。

APP承擔(dān)著數(shù)據(jù)分析處理的使命，使用者獲得熱門查詢?cè)~匯、詞匯學(xué)習(xí)建議等等這些都是通過APP來實(shí)現(xiàn)的，APP與智能設(shè)備及云端處理器同步連接，實(shí)時(shí)上傳更新記錄及儲(chǔ)存數(shù)據(jù)，方便用戶實(shí)時(shí)掌握詞匯學(xué)習(xí)情況，更好地了解手語。

心感手語翻譯APP具有監(jiān)測(cè)數(shù)據(jù)分析、趣味手語操、常用詞匯推薦等功能與模塊，同時(shí)提高配套服務(wù)所帶來的深度體驗(yàn)，具體功能如下：

（1）打開APP時(shí)會(huì)出現(xiàn)心感LOGO標(biāo)志，標(biāo)志下方寫有“用心感受，溫暖你我”，突出心感手語翻譯APP的橋梁使命。

（2）進(jìn)入首頁后，初次使用時(shí)用戶可看到心感手語翻譯APP的具體介紹，它大致描述了心感手語翻譯APP的功能定位，以方便用戶快速了解心感手語翻譯APP。在首頁上同時(shí)也可以直接看到自己的詞匯查詢使用信息以及對(duì)用戶詞匯學(xué)習(xí)的建議。根據(jù)數(shù)據(jù)庫反饋的信息，為使用者制定合理的個(gè)人手語學(xué)習(xí)計(jì)劃，提供更為便捷的生活方式。右下角設(shè)有功能──我的，用戶可以綁定賬號(hào)，修改用戶信息，以及設(shè)定各種個(gè)人信息等等。

（3）APP中還開設(shè)有每日詞匯推介，搜索查詢等功能，用戶可以了解一些關(guān)于手語方面的知識(shí)，APP設(shè)有客戶服務(wù)功能，人工智能助理與人工客服實(shí)時(shí)為您解答手語問題，以方便用戶了解自己的手語學(xué)習(xí)情況。

（4）APP可與家人賬號(hào)進(jìn)行綁定，獲取權(quán)限后方可了解家人詞匯使用情況，若有判斷錯(cuò)誤的問題，利用APP反饋環(huán)節(jié)，用戶將信息上傳到APP，通過專線聯(lián)絡(luò)解決問題，設(shè)有向朋友分享詞匯數(shù)據(jù)的獨(dú)特功能，使用者只需點(diǎn)擊分享功能即可發(fā)送到朋友圈、QQ空間、微博等一些第三方軟件，方便快捷。

（5）APP界面的背景采用明亮溫柔的暖色──淺粉色，避免白色帶來的色彩沖擊、黑色的陰暗壓抑。

4 產(chǎn)品特性及適用人群

4.1 核心競爭力分析

本產(chǎn)品采用AI分析技術(shù)，加入了“手環(huán)、手機(jī)等+APP+云端”的新模式，可以存取調(diào)取數(shù)據(jù)的功能，在未來的產(chǎn)品中會(huì)出現(xiàn)全息技術(shù)的融合及升級(jí)。具有數(shù)據(jù)準(zhǔn)確切實(shí)，翻譯隨時(shí)隨地，應(yīng)對(duì)突發(fā)情況能力強(qiáng)的特點(diǎn)。

手語是聾啞人不可或缺的語言工具，是一種很美的語言，也是一種心與心的交流。手機(jī)APP與線下相關(guān)聯(lián)，APP承擔(dān)著數(shù)據(jù)分析處理的使命，使用者通過拍攝聾啞人的手語達(dá)到交流理解的目的。本研究致力于讓手語變成一種可以讓更多人理解的語言，來拓寬聾啞人范圍更廣的就業(yè)機(jī)會(huì)，增加對(duì)聾啞人更多的關(guān)愛。

4.2 消費(fèi)者特征與需求

聾啞人的手語有不同的種類，大眾對(duì)手勢(shì)語言并不普及，減少了聾啞人的許多就業(yè)機(jī)會(huì)和人與人之間的溝通交流。他們急需一項(xiàng)產(chǎn)品來解決這種問題，正是抓住了消費(fèi)者的這一需求和心理。在生活中消費(fèi)者心理分為好幾種，比如從眾心理、求實(shí)心理等。其中，從眾心理指的是盲目的模仿；求實(shí)心理，是根據(jù)自己的實(shí)際經(jīng)濟(jì)實(shí)力購買合理的物品。該產(chǎn)品正符合消費(fèi)者各種心理，產(chǎn)品更具有競爭力。

5 結(jié)語

本文主要是針對(duì)聾啞人與正常人以及聾啞人與聾啞人之間交流的困難提供一種解決方案即手語翻譯器，讓不同群體可以實(shí)現(xiàn)無障礙交流，通過該手語翻譯器，可以將聾啞人表達(dá)的手語表達(dá)給另一個(gè)健全人或者表達(dá)給使用手語不同于該聾啞人的另一個(gè)聾啞人，也可將健全人的說話翻譯成相應(yīng)的手語表達(dá)給聾啞人，克服了聾啞人和健全人之間以及不同地域、不同民族的聾啞人之間交流所面臨的問題。對(duì)于AI這種善于模仿人類能力的技術(shù)來說，它的產(chǎn)生就可以成為搭建各個(gè)群體之間交流的橋梁，Al技術(shù)不僅可以進(jìn)行語言交流，甚至可能成為跳動(dòng)的心臟。未來會(huì)有越來越多的科學(xué)工作者和企業(yè)家關(guān)注到他們。聾啞人雖然不會(huì)說話，但他們渴望別人理解自己。Al技術(shù)雖然沒有靈魂，但他可以實(shí)現(xiàn)語言的跨越。未來讓我們一起努力用科技造就世界。