你是否遇到過這樣的場(chǎng)景——公交車上、餐廳里兩個(gè)人在用手語(yǔ)快速交流。科技發(fā)展日新月異，數(shù)字技術(shù)不斷創(chuàng)新，應(yīng)該給包括聽障人士在內(nèi)的所有人創(chuàng)造美好，不讓任何一個(gè)人在數(shù)字世界掉隊(duì)。能為聽障人士做些什么呢？
為幫助聽障人在日常生活中自如交流，更方便地融入社會(huì)生活，有一群來(lái)自華中科技大學(xué)的青年學(xué)子通過大量實(shí)際調(diào)研并利用專業(yè)所學(xué)開發(fā)出了知音App，可通過語(yǔ)音識(shí)別、手語(yǔ)手勢(shì)識(shí)別等AI技術(shù)將語(yǔ)音轉(zhuǎn)文字讓聽障人看到或?qū)⑽淖洲D(zhuǎn)語(yǔ)音讓健聽人聽到。團(tuán)隊(duì)還在App中嵌入了專業(yè)手語(yǔ)客服視頻在線，希望未來(lái)能隨時(shí)隨地幫助聽障人交流。
團(tuán)隊(duì)聽障者馮桂杰的真實(shí)反饋?zhàn)屩鬉pp不斷優(yōu)化，更貼近聽障人需求
“我們希望通過科技的力量幫助聽障人士解除生活靜音鍵，感受生活煙火、蟲鳴鳥叫和清風(fēng)細(xì)雨。”秉持著這種信念，這群年輕人希望幫助聽障人活得有聲有色。對(duì)于這樣一個(gè)傾注了團(tuán)隊(duì)熱情和心血的產(chǎn)品，團(tuán)隊(duì)希望能借助更多的外部力量讓更多有需要的人了解并使用到知音App。而在產(chǎn)品二次優(yōu)化過程中，知音App非常重要的體驗(yàn)改進(jìn)則來(lái)自華為HMS Core提供的語(yǔ)音識(shí)別與合成等技術(shù)支持。如今，知音App已經(jīng)參加了2021華為HMS全球應(yīng)用創(chuàng)新大賽，同時(shí)也加入了華為耀星計(jì)劃，這讓團(tuán)隊(duì)有了更多動(dòng)力和信心將知音App持續(xù)推向市場(chǎng)惠及更多聽障人群。
置身于聽障者日常生活，傾聽來(lái)自他們的“聲音”
“社會(huì)在飛速發(fā)展，聽障人群卻往往在溝通中遇到諸多障礙。很多看似日常的小事，對(duì)他們來(lái)說(shuō)都格外奢侈，而他們又是非常渴望交流的。”知音App團(tuán)隊(duì)對(duì)聽障人群有著特別的關(guān)注，這要源于他們長(zhǎng)期在聾人學(xué)校做志愿服務(wù)的經(jīng)歷，不會(huì)手語(yǔ)和聾人兒童溝通非常麻煩。朱佳怡作為團(tuán)隊(duì)一員，則講述了一次去養(yǎng)老院做義工的經(jīng)歷，“當(dāng)時(shí)遇到一位后天聽障老人，有著意料之外的開朗熱情，每次看到義工們，他就會(huì)特別開心地跑過來(lái)比手勢(shì)，想要交流。后來(lái)了解到由于聽障，他和家人疏于交流，長(zhǎng)期在養(yǎng)老院的生活也讓他日顯孤單。我特別難過，覺得這部分群體不應(yīng)該被忽略。”很多類似經(jīng)歷讓團(tuán)隊(duì)越來(lái)越清晰地了解到聽障人群的社會(huì)現(xiàn)狀，并深受觸動(dòng)。于是，這群定期探訪聽障人群的年輕人一拍即合，希望發(fā)揮各自力量開發(fā)出一款能真正幫助聽障人群交流的產(chǎn)品。他們分別來(lái)自信息系統(tǒng)專業(yè)、產(chǎn)品設(shè)計(jì)專業(yè)、市場(chǎng)營(yíng)銷專業(yè)等，專業(yè)不同初衷相同的青年學(xué)子為此傾注著滿滿精力和熱情。
知音App希望幫助聽障人群建立信心，更好融入社會(huì)生活
“產(chǎn)品的實(shí)用性一定要通過目標(biāo)用戶的不斷體驗(yàn)加以驗(yàn)證，好的應(yīng)用一定是能滿足用戶需求的。而要想開發(fā)出好的聽障輔助應(yīng)用，就要深入到聽障人群當(dāng)中。”為此，團(tuán)隊(duì)與聽障人群保持著長(zhǎng)期溝通，項(xiàng)目創(chuàng)始人周江南更曾跟聽障人群同吃同住過一段時(shí)間，有很強(qiáng)的同理心，因此非常熟悉他們的需求，這也是保證產(chǎn)品實(shí)用性的關(guān)鍵因素。團(tuán)隊(duì)中的馮桂杰是一名聽障者，同時(shí)擔(dān)任產(chǎn)品體驗(yàn)官，對(duì)知音進(jìn)行更細(xì)致更真實(shí)的反饋，并提出針對(duì)性的建議，從而確保產(chǎn)品的精準(zhǔn)優(yōu)化。他坦言：在知音不僅學(xué)到了很多技術(shù)和知識(shí)，還感受到了愛和力量。
此外，為促進(jìn)聽障人交流溝通速度，更方便地享受生活，團(tuán)隊(duì)目前在研發(fā)一款A(yù)R智能眼鏡，由話筒、鏡片屏幕、攝像頭、喇叭等組件構(gòu)成。借助技術(shù)手段，話筒可捕捉健聽人語(yǔ)音，AI手語(yǔ)客服將語(yǔ)音轉(zhuǎn)化為文字顯示在屏幕上讓聽障人看見，同時(shí)攝像頭可獲取聽障人手語(yǔ)，AI算法將其轉(zhuǎn)化為語(yǔ)音通過喇叭播放。目前相關(guān)功能均在完善中。
授人以魚不如授人以漁，華為HMS讓知音App更懂聽障人
從成員招募、調(diào)研、志愿服務(wù)、設(shè)計(jì)，熱愛聽障公益事業(yè)且具備同理心是知音團(tuán)隊(duì)不變的堅(jiān)守，也是團(tuán)隊(duì)像知音朋友一樣和聽障人群對(duì)話并幫助建立自信的初衷。而數(shù)字化時(shí)代，公益和科技有著更深層次的相輔相成關(guān)系，為開發(fā)出更契合聽障者的產(chǎn)品，知音團(tuán)隊(duì)一直在積極尋找更具針對(duì)性的先進(jìn)技術(shù)支撐。
“調(diào)研過程中，我們第一個(gè)想到的便是華為，因?yàn)檎Z(yǔ)音識(shí)別與合成是產(chǎn)品的核心功能之一，這方面團(tuán)隊(duì)無(wú)法自己完成，依托華為HMS Core的語(yǔ)音識(shí)別合成技術(shù)進(jìn)行擴(kuò)展是最優(yōu)解。”知音App團(tuán)隊(duì)介紹道，“集成HMS Core的ML Kit后，我們的產(chǎn)品有了更為具體的優(yōu)化。比如聲音場(chǎng)景識(shí)別，可以充當(dāng)聽障人的耳朵，幫助聽障人識(shí)別周圍的場(chǎng)景，而語(yǔ)音識(shí)別合成是非常快速的集成，可充當(dāng)嘴巴發(fā)出聲音，從而產(chǎn)品更為理想化。”具體而言，語(yǔ)音識(shí)別、語(yǔ)音合成和聲音識(shí)別等頁(yè)面是知音App的核心功能頁(yè)面的一部分。聽障人可在聲音識(shí)別頁(yè)面按住“開始”按鈕，把說(shuō)話人的實(shí)時(shí)語(yǔ)音轉(zhuǎn)化為文字；可在語(yǔ)音合成頁(yè)面輸入文字，點(diǎn)擊“開始合成”按鈕把文字轉(zhuǎn)化為個(gè)性化語(yǔ)音播放出來(lái)。在產(chǎn)品測(cè)試過程中，集成HMS Core的ML Kit的則讓知音App對(duì)場(chǎng)景語(yǔ)音識(shí)別更精準(zhǔn)，語(yǔ)音合成更快速，交流體驗(yàn)更順暢。
說(shuō)起集成HMS Core的ML Kit，團(tuán)隊(duì)還分享道，“在這之前，我們對(duì)AI技術(shù)和機(jī)器學(xué)習(xí)的底層技術(shù)不太了解。加入華為開發(fā)者聯(lián)盟后，我們得以瀏覽到很多華為開發(fā)者文檔，對(duì)AI技術(shù)有了更深入的了解，其中聲音場(chǎng)景的識(shí)別幫助我們優(yōu)化了很多解決方案。”目前，二次優(yōu)化已進(jìn)入技術(shù)收尾階段，不久將在華為應(yīng)用市場(chǎng)上線。
如果沒有聲音，我們的世界會(huì)變成怎樣呢？城市沒有喧囂、森林沒有鳥叫，圍繞我們的或許是一片沉寂。“聽障人群不應(yīng)陷入沉寂。知音App愿意搭建起聽障人信息交流的橋梁，與他們有更好溝通并建立他們的信心，讓每一位聽障人士得以自由交流、表達(dá)感受、分享快樂。我們覺得這是一件特別有意義特別酷的事情。”知音App團(tuán)隊(duì)年輕的聲音里洋溢著堅(jiān)定和憧憬。
