
李榮頡正在演示供聾啞人交流使用的“神奇手環(huán)”
央廣網(wǎng)沈陽7月8日消息(記者郭威)東北大學三名學生研發(fā)出一種“手語轉(zhuǎn)換發(fā)聲”手環(huán),通過連接服務器可以讓手語發(fā)聲,并把外界語音轉(zhuǎn)化為文字,實現(xiàn)聾啞人和外界的無障礙溝通。5月18日,該項目獲得了2018“未來力大會”大學生社會創(chuàng)新大賽全國總冠軍。今年10月,該團隊將代表中國前往美國硅谷參加2018創(chuàng)行世界杯總決賽。
“你好,我們幫助聾啞人交流,請大家支持我們,謝謝!”隨著佩戴著手環(huán)的李榮頡所做的手語動作,平板電腦上清晰的發(fā)出了完整意思的語音。讓聾啞人與完全不動懂手語的健全人進行交流,這一看起來“不可完成”的任務,就這樣在東北大學李榮頡、曾振、賀蕭三個大三學生的手中成為了現(xiàn)實。李榮頡說:“企業(yè)做1到1萬的商業(yè)轉(zhuǎn)化,而學生實驗室可以不計回報地做從0到1的技術研發(fā)。經(jīng)過各種各樣的努力,這個算法模擬出各種問題之后,第一次做的手勢發(fā)出聲音時,真的特別開心!
在機器人科學與工程學院教師王斐的指導下,這個由三個大學生組成的團隊研發(fā)出了一套基于多源信息融合的手語雙向識別系統(tǒng)。通過連接服務器把手語動作轉(zhuǎn)化為語句,同時還可以把外界語音轉(zhuǎn)化為文字。與傳統(tǒng)基于視覺的手語識別方法相比,可避免光照、遮擋、干擾和手指細微動作無法捕捉等嚴重缺陷,在便攜實用的同時,保證了識別的實時性和準確性。王斐介紹:“視頻捕獲抓肢體的動作沒有問題,就像體感游戲,但是手指的動作是采不到的,還有外界自然光的干擾。而手環(huán)的優(yōu)勢是,手指在做動作的時候是由手臂的肌肉來牽引的,表面就有微弱的電信號,通過這個設備也可以清晰地采集到!

王斐教授正在和學生們分析交流研發(fā)問題
在研發(fā)過程中,團隊曾遇到了智能硬件核心技術的瓶頸問題,開發(fā)到一定程度就受制于國外的技術封鎖,無法再進行深層次開發(fā)。為了能夠做到從軟件到硬件都是自有技術,團隊經(jīng)歷了千萬遍枯燥重復的實驗和數(shù)不清的“推倒重來”。王斐說:“硬件的困難主要體現(xiàn)在微弱電信號、生理電信號的采集、放大還有處理。軟件的難度則是如何能夠把手語拆成單體的手語,在這個模型里組合,從語句變到句子,是最難的也是將來能夠保住自己東西的壁壘!
充分考慮到聾啞人是普遍收入偏低的弱勢群體,研發(fā)團隊通過對多種材料反復比對試驗,最終選擇了在保證產(chǎn)品性能的基礎上,材料成本最低的方案,以實現(xiàn)項目成果的市場化轉(zhuǎn)換。王斐表示,目前這個手環(huán)成本才250美元,價格很便宜。將來如果實現(xiàn)生產(chǎn)估計售價將在200、300塊錢人民幣,殘疾人群體是完全負擔得起的。
目前,包括一家國企在內(nèi)的多家國內(nèi)電子信息企業(yè)正在積極與研發(fā)團隊就該項目進行接觸。研發(fā)團隊成員李榮頡說:“他最希望的事就是看到這個項目真正能夠商品化,能夠?qū)嵱,真正解決聾啞人群體生活不便的問題,這比發(fā)幾篇論文,獲不獲獎都來得重要的多!
張家界天門山出現(xiàn)云海云瀑景觀