电竞下注-中国电竞赛事及体育赛事平台

當(dāng)前位置:新聞 > 社會(huì)新聞 > 正文

牛!2名90后女生發(fā)明翻譯臂環(huán) 可將手語(yǔ)翻譯成語(yǔ)音

2017-05-26 15:11:27  中國(guó)青年網(wǎng)    參與評(píng)論()人

王娜娜和黃爽,是北京航空航天大學(xué)和清華大學(xué)的一年級(jí)研究生,一個(gè)23歲,一個(gè)22歲。和許多這個(gè)年紀(jì)的女孩不同,她倆并不熱衷梳妝打扮,也很少關(guān)注流行的影視劇、偶像明星。大約兩年前,她們開(kāi)始用業(yè)余時(shí)間,為失語(yǔ)者群體,研究一款直接將手語(yǔ)轉(zhuǎn)化成語(yǔ)音的翻譯臂環(huán)。

兩名90后女生決心幫助失語(yǔ)者群體

兩年前,讀大三的王娜娜結(jié)識(shí)了聾人朋友張權(quán)。因?yàn)椴欢终Z(yǔ),即使當(dāng)面交流,她也不得不用微信打字。明明是現(xiàn)實(shí)中的朋友,相處起來(lái)卻更像網(wǎng)友。特別當(dāng)許多人一起聊天時(shí),她更為無(wú)聲世界中的張權(quán)感到抱歉,擔(dān)心自己說(shuō)話,是不是忽略、傷害了他?當(dāng)時(shí),計(jì)算機(jī)專(zhuān)業(yè)的王娜娜,正在實(shí)驗(yàn)室里研究基于圖像的手勢(shì)識(shí)別技術(shù)。她想,手語(yǔ)也是有一定規(guī)則的手勢(shì),是不是可以用攝像頭識(shí)別,轉(zhuǎn)化成語(yǔ)音,打破無(wú)聲到有聲的隔閡?

王娜娜:

“黃爽就跟我說(shuō),用攝像頭去做不現(xiàn)實(shí),在大街上誰(shuí)幫失語(yǔ)者拿攝像頭?”

黃爽是王娜娜的本科室友。這次交談前,王娜娜已經(jīng)為翻譯手語(yǔ)忙了八、九個(gè)月。聽(tīng)到“閨蜜”幾乎從根本上否定自己的研究,王娜娜不但沒(méi)有生氣,反而感到慶幸。她說(shuō),自己一直在沿著技術(shù)邏輯推進(jìn),卻忽略了最重要的部分——如何才能讓失語(yǔ)者使用。

從鋼琴指法得到啟發(fā)把手語(yǔ)轉(zhuǎn)化成語(yǔ)音

王娜娜:

“后來(lái)我看家里的小朋友,學(xué)彈鋼琴,老師說(shuō)手指該用力的時(shí)候,小朋友沒(méi)用力。我就問(wèn)老師這怎么能看出來(lái)的,老師說(shuō)看肌肉的用力情況,肌肉沒(méi)有動(dòng)指法肯定不對(duì)。這點(diǎn)提醒了我,我就上網(wǎng)查,有一種研究是戴著一個(gè)臂環(huán)來(lái)判斷小朋友的指法正確不正確,我立馬就想到了手語(yǔ)?!?/p>

不同的手指動(dòng)作,會(huì)觸動(dòng)不同區(qū)域的小臂肌肉,發(fā)出不一樣的肌肉電信號(hào)。受益于鋼琴臂環(huán)的啟發(fā),王娜娜和黃爽打算也應(yīng)用這項(xiàng)技術(shù):將每個(gè)手語(yǔ)詞匯的肌肉電信號(hào)錄入系統(tǒng),讓人工智能深度學(xué)習(xí),再次遇見(jiàn)時(shí),識(shí)別和轉(zhuǎn)化成語(yǔ)音,應(yīng)該并不難。在運(yùn)動(dòng)手環(huán)、智能手表普及的今天,佩戴臂環(huán),也不會(huì)讓失語(yǔ)者顯得突兀。然而,想讓電腦準(zhǔn)確識(shí)別一個(gè)手勢(shì)動(dòng)作,需要反復(fù)采集肌肉電信號(hào)上千次。

黃爽:

“我們兩人就成天不停地在那兒抬手放手、抬手放手。”

讓失語(yǔ)者像普通人一樣流利對(duì)話

一個(gè)多月時(shí)間,王娜娜和黃爽對(duì)著手語(yǔ)教材,完成30個(gè)手勢(shì)的錄入,每人至少重復(fù)比劃了一萬(wàn)五千多次。證實(shí)方案可行后,她們將更多志同道合的朋友拉入團(tuán)隊(duì)。如同八萬(wàn)多個(gè)漢字,只有3500字常用,8000多個(gè)手語(yǔ)手勢(shì),也只有一小部分被失語(yǔ)者熟知。

經(jīng)過(guò)天津理工大學(xué)聾人工學(xué)院的推薦,團(tuán)隊(duì)決定先錄入400個(gè)常用的手語(yǔ)動(dòng)作。盡管目前,臂環(huán)只能逐個(gè)翻譯手語(yǔ),實(shí)現(xiàn)失語(yǔ)者像普通人一樣流利對(duì)話,也存在許多技術(shù)難題,但她們相信,隨著人工智能的成熟,這些都將迎刃而解。

手語(yǔ)識(shí)別臂環(huán)在聯(lián)合國(guó)獲獎(jiǎng)

一個(gè)多月前,王娜娜團(tuán)隊(duì)的手語(yǔ)識(shí)別臂環(huán),在聯(lián)合國(guó)和國(guó)內(nèi)一家互聯(lián)網(wǎng)公司共同舉辦的創(chuàng)新大賽上,奪得冠軍。同臺(tái)競(jìng)技的,還有2074份來(lái)自國(guó)內(nèi)外知名高校、科研機(jī)構(gòu)的創(chuàng)新方案。與大多數(shù)盯緊收益的項(xiàng)目相比,這份冠軍創(chuàng)業(yè)計(jì)劃,顯得另類(lèi)。王娜娜和黃爽說(shuō),團(tuán)隊(duì)開(kāi)始做這個(gè)項(xiàng)目,只是想解決失語(yǔ)者朋友遇到的難題,沒(méi)太考慮過(guò)賺錢(qián)的事。

黃爽:

“我們沒(méi)想通過(guò)這個(gè)來(lái)賺到錢(qián),就是發(fā)現(xiàn)了朋友這個(gè)迫切的需求,只想幫他們解決這個(gè)溝通的問(wèn)題?!?/p>

王娜娜:

“這個(gè)世界買(mǎi)房的人太多了,誰(shuí)知道誰(shuí)。但是你會(huì)記得那些,為社會(huì)進(jìn)步做出一點(diǎn)點(diǎn)貢獻(xiàn)的人?!?/p>

白巖松:讓科技進(jìn)步打破障礙

白巖松:

“科技的發(fā)展的確有時(shí)太快了,讓我們更忙碌、更奔波,但我們還是喜歡科技的進(jìn)步,因?yàn)樗鼛椭覀兏】?,很多障礙可以打破,行走及交流更自由、更無(wú)障礙。歸根到底,讓生活更好,讓生命更有尊嚴(yán)。所以,讓科技更進(jìn)步吧,說(shuō)小了,讓失語(yǔ)者有方法談話并交流?!?/p>

(責(zé)任編輯:孫啟浩 CN037)
關(guān)閉