手音app

手音app是一款為失語者提供的手語識別軟件，對于失語者的世界手語是最常用的溝通方式，可是并不是所有人都懂得手語的含義，所以失語者在生活當中總會碰到很多麻煩。這款軟件可以配合手環(huán)使用，幫助失語者快速識別手語，推薦有需要的用戶下載使用。

軟件介紹：

演示者用手指向前方，又做出點贊的手勢，“你好”的文字快速地反應在App“手音”的界面上。捕捉手部運動的肌電信號的是演示者手臂上的黑色臂環(huán)，看上去像跑步時用的護腕。

“手音”是一款針對失語者的小眾產(chǎn)品，預計今年5月下旬上線。普通人可能難以想象這款產(chǎn)品的意義所在——手語是失語者彼此溝通的橋梁，但對于普通人來說是比所有外語都難的語言，“手音”將做潤物細無聲的溝通橋梁。

開發(fā)背景：

“手音”的創(chuàng)始人王娜娜和聯(lián)合創(chuàng)始人黃爽原是北京航空航天大學2012級的學生，她們是同一個宿舍的閨蜜，兩個充滿活力的女生在2015年開始想為失語者做些什么。

在一次活動上，王娜娜認識了北京聯(lián)合大學特殊教育學院畢業(yè)的失語者張權，并成了好朋友。因為王娜娜不會手語，這兩位現(xiàn)實中的朋友相處更像網(wǎng)友，即便見面也往往會求助微信溝通。

回到宿舍，王娜娜把張權的故事告訴了黃爽。她們此后認識了更多的失語者，也愈發(fā)感到溝通的困難�！坝袝r我覺得我說話是在‘傷害’他們，一聊得開心就在想是不是忽略他們了，甚至有些自責�！蓖跄饶日f。

兩個善良的姑娘一直在想，張權是失語者中的幸運兒，不僅可以上學還有工作，更多的失語者因為溝通一直是社會的邊緣人，她們假想：老板開會聽不見，點外賣沒辦法和店家溝通，別人怎么能接納他們？《新聞聯(lián)播》有手語同步翻譯，可其他直播節(jié)目如果沒有字幕，失語者就永遠無法享受它。

上網(wǎng)一查，數(shù)字更讓兩人咋舌：失語者(包含聽障人士、腦中風患者、腦癱患者和漸凍癥患者)在中國的數(shù)量達到7000萬人，占總?cè)丝诘?%，這是一個非常龐大的數(shù)字。

兩個人想起了參加“馮如杯”(馮如杯為北航校內(nèi)學生學術科技作品競賽)時的圖像識別項目，當時這個項目獲得了一等獎，或許可以用這種技術幫助失語者。王娜娜回憶：“我們感覺發(fā)現(xiàn)了一個沒有人發(fā)現(xiàn)的需求，想成為第一個實現(xiàn)它的人，也讓我們所學的知識有價值�！�

于是，她倆著手研究手語翻譯的可行性，開始查論文、做實驗、寫代碼，用馮如杯一等獎獎金5萬元作為啟動資金行動起來。圖像識別被否決了，因為不能隨時攜帶攝像頭；手套被否決了，因為太引人注意，最終確定了通過臂環(huán)捕捉肌電信號的方法。因為智能手表逐漸普及，失語者帶著臂環(huán)看上去并不突兀。

產(chǎn)品一次次迭代，為的是要保護失語者的尊嚴。黃爽記得，她們做過“體驗一天失語者”的活動。在便利店，因為結賬時需要了解價格，失語者只能通過手機和店員溝通，時間稍長排在后面的人開始不耐煩地催促�！叭绻麆e人知道我是失語者可能會體諒，但不知道就會埋怨，越埋怨我越著急�！币恍┦дZ者不愿意別人稱呼他們?yōu)椤懊@人”，自己會寫成“龍人”。

確定研發(fā)方向后，關鍵是不斷地輸入數(shù)據(jù)、調(diào)試數(shù)據(jù)以保證手語翻譯的準確性。為了檢驗模型的可靠性，最初只有兩個人在錄手語的數(shù)據(jù)，整天戴著臂環(huán)不停地做動作，黃爽開玩笑說：“練下去咱倆就要成為‘麒麟臂’啦！”

“當你真正去幫助他們，他們就知道是為他們好，就會非常配合�！蓖跄饶日f，為了保證數(shù)據(jù)的多樣化，并且真正讓失語者喜歡，她們后來聯(lián)系了天津理工大學聾人工學院，合作進行數(shù)據(jù)采集和智能臂閉環(huán)開發(fā)，還與北京市朝陽區(qū)殘聯(lián)達成合作意向，為“手音”的產(chǎn)品服務化提供咨詢、指導。張權也成了團隊的顧問。

如今，“手音”涵蓋了200個手語動作，為了保證精確度，每一個動作錄制了1000人次。在有了自己的手勢數(shù)據(jù)庫之后，團隊還搭建了一個7層BP神經(jīng)網(wǎng)絡(一種按誤差逆?zhèn)鞑ニ惴ㄓ柧毜亩鄬忧梆伨W(wǎng)絡，是目前應用最廣泛的神經(jīng)網(wǎng)絡模型之一)對數(shù)據(jù)速度進行訓練，目前識別準確度已經(jīng)達到95%。

中文名：會聲

包名：com.baidu.deafhelper

MD5值：1b2bffe21867cd3961d784b60d72618c