讓他們的手語被“聽見”

暑假里，河北工業(yè)大學“譯音”團隊創(chuàng)始人、電氣學院學生樊灝澤來到天津市殘疾人之家，為那里的聽障兒童帶去團隊自主研發(fā)的“譯音”手套產(chǎn)品，以及河北工大1000多名大學生為聽障兒童手寫的愛心明信片。隨著聽障兒童打出的手語，手套發(fā)出了悅耳的聲音：“我今天很開心！”

樊灝澤告訴記者，這款特殊的手套，其核心部件是位于腕部、手背部、指部的3種觸覺傳感器。聽障人士佩戴后，手套可根據(jù)他們的手部動作翻譯手語含義、實時發(fā)聲，突破了連續(xù)手語和自然手語翻譯技術壁壘。

為什么要研發(fā)這樣一款手套？這要從3年前的一次經(jīng)歷說起。2019年8月的一天，樊灝澤訂好外賣卻始終無法打通配送員的電話，直到看見外賣平臺上那句“部分外賣員為聽障人士，如需聯(lián)系，請在線上平臺打字交流”，他才明白了其中的緣由。自此，他開始關注聽障群體，在了解到聽障人士因聽力、發(fā)聲障礙而在生活中存在諸多不便時，他萌生了要幫助他們與世界暢通交流的想法。

說干就干，樊灝澤跟志同道合的小伙伴們組建起“譯音”技術團隊，將目光聚焦到手語產(chǎn)品的開發(fā)上。此后數(shù)月，團隊實地調研了多所特殊教育學校，詳細了解聽障人士及志愿者的訴求，將產(chǎn)品重點定位在手語與語音的轉換上。

研發(fā)起步階段，團隊采用市面上的傳感器，完成了一代產(chǎn)品的研發(fā)，但發(fā)現(xiàn)翻譯效果不盡如人意。連日泡在實驗室、逐一檢測各個技術環(huán)節(jié)后，他們發(fā)現(xiàn)，市面上的傳感器性能低且數(shù)據(jù)采集維度單一，無法做到實時翻譯。

在王志華、張哲兩名教師的指導下，團隊自主研發(fā)了二代產(chǎn)品的核心部件——柔性觸覺集成傳感器。相較傳統(tǒng)傳感器，柔性觸覺傳感器翻譯精度更高，且具有記憶功能，可翻譯因個人習慣不同而形成的自然手語。

在設計集成電路后，團隊通過上百次的實驗仿真，逐步優(yōu)化各項指標。終于，他們的手語翻譯產(chǎn)品——“譯音”手套問世了。

經(jīng)過多次實驗檢驗，“譯音”手套可翻譯手語百余條且準確率高達94％。為了檢測產(chǎn)品的實際應用情況，團隊成員聯(lián)系天津市聾人學校等特教學校開展試用，產(chǎn)品獲得一致好評。

“目前我們的產(chǎn)品已經(jīng)處于終試階段，接下來我們想從產(chǎn)品升級和推廣上著手，讓更多聽障人士使用我們的產(chǎn)品，讓他們的手語可以被世界‘聽見’?！狈疄疂筛嬖V記者，他們的團隊已經(jīng)有了新的目標。

《中國教育報》2022年08月31日第2版