演示者用手指向前方,又做出點贊的手勢,“你好”的文字快速地反應(yīng)在App“手音”的界面上。捕捉手部運動的肌電信號的是演示者手臂上的黑色臂環(huán),看上去像跑步時用的護(hù)腕。
“手音”是一款針對失語者的小眾產(chǎn)品,預(yù)計今年5月下旬上線。普通人可能難以想象這款產(chǎn)品的意義所在——手語是失語者彼此溝通的橋梁,但對于普通人來說是比所有外語都難的語言,“手音”將做潤物細(xì)無聲的溝通橋梁。
美女學(xué)霸研發(fā)手語翻譯器 通過臂環(huán)捕捉肌電信號
“手音”的創(chuàng)始人王娜娜和聯(lián)合創(chuàng)始人黃爽原是北京航空航天大學(xué)2012級的學(xué)生,她們是同一個宿舍的閨蜜,兩個充滿活力的女生在2015年開始想為失語者做些什么。
在一次活動上,王娜娜認(rèn)識了北京聯(lián)合大學(xué)特殊教育學(xué)院畢業(yè)的失語者張權(quán),并成了好朋友。因為王娜娜不會手語,這兩位現(xiàn)實中的朋友相處更像網(wǎng)友,即便見面也往往會求助微信溝通。
回到宿舍,王娜娜把張權(quán)的故事告訴了黃爽。她們此后認(rèn)識了更多的失語者,也愈發(fā)感到溝通的困難。“有時我覺得我說話是在‘傷害’他們,一聊得開心就在想是不是忽略他們了,甚至有些自責(zé)。”王娜娜說。
兩個善良的姑娘一直在想,張權(quán)是失語者中的幸運兒,不僅可以上學(xué)還有工作,更多的失語者因為溝通一直是社會的邊緣人,她們假想:老板開會聽不見,點外賣沒辦法和店家溝通,別人怎么能接納他們?《新聞聯(lián)播》有手語同步翻譯,可其他直播節(jié)目如果沒有字幕,失語者就永遠(yuǎn)無法享受它。
上網(wǎng)一查,數(shù)字更讓兩人咋舌:失語者(包含聽障人士、腦中風(fēng)患者、腦癱患者和漸凍癥患者)在中國的數(shù)量達(dá)到7000萬人,占總?cè)丝诘?%,這是一個非常龐大的數(shù)字。
兩個人想起了參加“馮如杯”(馮如杯為北航校內(nèi)學(xué)生學(xué)術(shù)科技作品競賽)時的圖像識別項目,當(dāng)時這個項目獲得了一等獎,或許可以用這種技術(shù)幫助失語者。王娜娜回憶:“我們感覺發(fā)現(xiàn)了一個沒有人發(fā)現(xiàn)的需求,想成為第一個實現(xiàn)它的人,也讓我們所學(xué)的知識有價值。”
于是,她倆著手研究手語翻譯的可行性,開始查論文、做實驗、寫代碼,用馮如杯一等獎獎金5萬元作為啟動資金行動起來。圖像識別被否決了,因為不能隨時攜帶攝像頭;手套被否決了,因為太引人注意,最終確定了通過臂環(huán)捕捉肌電信號的方法。因為智能手表逐漸普及,失語者帶著臂環(huán)看上去并不突兀。
產(chǎn)品一次次迭代,為的是要保護(hù)失語者的尊嚴(yán)。黃爽記得,她們做過“體驗一天失語者”的活動。在便利店,因為結(jié)賬時需要了解價格,失語者只能通過手機(jī)和店員溝通,時間稍長排在后面的人開始不耐煩地催促。“如果別人知道我是失語者可能會體諒,但不知道就會埋怨,越埋怨我越著急。”一些失語者不愿意別人稱呼他們?yōu)?ldquo;聾人”,自己會寫成“龍人”。
確定研發(fā)方向后,關(guān)鍵是不斷地輸入數(shù)據(jù)、調(diào)試數(shù)據(jù)以保證手語翻譯的準(zhǔn)確性。為了檢驗?zāi)P偷目煽啃,最初只有兩個人在錄手語的數(shù)據(jù),整天戴著臂環(huán)不停地做動作,黃爽開玩笑說:“練下去咱倆就要成為‘麒麟臂’啦!”
“當(dāng)你真正去幫助他們,他們就知道是為他們好,就會非常配合。”王娜娜說,為了保證數(shù)據(jù)的多樣化,并且真正讓失語者喜歡,她們后來聯(lián)系了天津理工大學(xué)聾人工學(xué)院,合作進(jìn)行數(shù)據(jù)采集和智能臂閉環(huán)開發(fā),還與北京市朝陽區(qū)殘聯(lián)達(dá)成合作意向,為“手音”的產(chǎn)品服務(wù)化提供咨詢、指導(dǎo)。張權(quán)也成了團(tuán)隊的顧問。
如今,“手音”涵蓋了200個手語動作,為了保證精確度,每一個動作錄制了1000人次。在有了自己的手勢數(shù)據(jù)庫之后,團(tuán)隊還搭建了一個7層BP神經(jīng)網(wǎng)絡(luò)(一種按誤差逆?zhèn)鞑ニ惴ㄓ?xùn)練的多層前饋網(wǎng)絡(luò),是目前應(yīng)用最廣泛的神經(jīng)網(wǎng)絡(luò)模型之一)對數(shù)據(jù)速度進(jìn)行訓(xùn)練,目前識別準(zhǔn)確度已經(jīng)達(dá)到95%。
直到去年8月,團(tuán)隊里只有王娜娜和黃爽兩個人,后來其他人逐漸加入。他們沒有辦公室,開會都是“打游擊戰(zhàn)”,咖啡廳、餐廳、教室都被征用過,做研發(fā)都是在自己的實驗室里,但王娜娜說:“我們一天都沒有想過放棄。”后來,團(tuán)隊內(nèi)有人因出國而退出,王娜娜在北航保研繼續(xù)深造,黃爽保研至清華大學(xué)。兩個女學(xué)霸沒有因升學(xué)而放棄團(tuán)隊,繼續(xù)堅定地吸引人才研發(fā)產(chǎn)品。
由女生主導(dǎo)的技術(shù)型創(chuàng)業(yè)團(tuán)隊很少見,兩個人也經(jīng)歷了磨合。最初,黃爽遇到意見不同時會等著雙方都冷靜下來回宿舍再溝通。王娜娜告訴她,團(tuán)隊溝通對事不對人,要彼此敞開心扉,現(xiàn)在兩個人可以為一件事辯論個“你死我活”,也能在達(dá)成一致意見后手挽手去吃吃喝喝。團(tuán)隊里還有其他技術(shù)人員,大家一起熬夜寫代碼的時候,兩個女生也會偶爾化身為“程序員鼓勵師”,一起為團(tuán)隊加油打氣。
這兩個分別出生于1994年、1995年的女生笑著說:“或許因為我們現(xiàn)在還沒有走向社會,沒有買房的苦惱和社會的壓力,只是覺得我們所擁有的技術(shù)能夠?qū)ι鐣袃r值,能夠真正幫助一些人,我們又有時間,那就做吧!”
她們關(guān)于未來有很多設(shè)想,“手音”可以實現(xiàn)面對面小聊和長時間對話的功能,未來還可以推出手語教學(xué)、手語字母和智能臂環(huán)閉環(huán),解決手語教師缺乏等各種問題。此外,這種人工智能技術(shù)成熟后還可以應(yīng)用在其他方面,例如可以教學(xué)鋼琴的孩子更加準(zhǔn)確地彈琴。
在前不久百度與聯(lián)合國開發(fā)計劃署共同主辦的“極·致未來”責(zé)任創(chuàng)新挑戰(zhàn)賽上,“手音”團(tuán)隊獲得了一等獎和最佳人氣獎,被譽(yù)為最有“包容性”的項目。