AI技術助力→他們為聽障兒童按下“發聲鍵”
來源:中國青年志愿者
編者按
青年志愿服務是高校共青團立德樹人、實踐育人的重要載體,是青年學生服務社會、成長進步的重要方式。為進一步加強高校志愿服務項目建設,“中國青年志愿者”微信公眾號常態化開設“高校青年志愿服務項目案例分享”專欄,展示一批高校青年志愿服務項目案例,以期為大家提供一些可學習、可借鑒、可復制、可推廣的經驗做法。
本期為大家推送的是華中科技大學“AI助聾,讓愛發聲”志愿服務項目。
“對于聽障人士而言,‘聽不見’并不意味著‘不能說’。實際上,他們大多數擁有完好的發聲器官,只是缺少聽覺系統的反饋,導致他們學習發聲、說話比普通人困難許多。”
在湖北省聾兒康復中心,華中科技大學青年志愿者正在利用AI唇語輔助訓練系統,教聽障小朋友們練習發聲。“他們說一個字,會比正常的小朋友學一個字,要付出十倍或者一百倍的努力,但是他們卻一直堅持下來了。他們也是很積極、很熱情地和我互動,很熱情地向我展示、向我表達。 ”
在調研中志愿者發現,聽覺反饋上的缺失有望通過視覺途徑來彌補。于是,2021年,來自華中科技大學新聞學院、人工智能學院、軟件學院、未來技術學院各專業學生,探索以“科技助聾+公益教學”模式幫助聽障人士開口說話。
志愿者們自主研發了AI唇語輔助訓練系統,聽障人士可通過系統學習發聲時的唇部細節,進行模仿練習,根據實時反饋結果糾正唇形。此外,志愿者為完全失去發聲能力的聽障人士,開發硬件設備,通過唇語識別替代發聲,實現更便捷的無障礙交流。
在開發過程中,為了讓系統更貼合聽障用戶的需求,志愿者們也做了很多功課。他們一邊收集聽障用戶的反饋,一邊根據不同人的特點為系統進行升級與改進。如今,研發人員已經在系統中加入了舌位、氣息等圖示,并通過從音素到字再到詞的學習方案,帶著聽障用戶學習。
團隊構建了“技術研發+實地教學+線上支持”三位一體的立體化服務模式,形成了從技術到服務、從線上到線下的完整助聾生態鏈。這一模式不僅解決了單一技術或單一服務難以持續的問題,還通過資源整合實現了效益最大化。志愿者們帶著定制化的系統走進社區和學校,在一對一教學中,讓聽障人士觸摸聲帶振動、感受氣息流動、示范唇形變化,使發聲學習更加直觀和有效。通過線上交流,幫助聽障群體解決部分系統使用及其他社會融入問題。
團隊已在北京、武漢、長沙、臨滄、昭通等地的50多個社區和20多所學校,累計開展100余場唇語講解、發聲教學、科普教育和公益攝影等活動,服務聽障人士超過1190人次,成功幫助343位聽障人士開口說話。團隊打造的“AI助聾,讓愛發聲”志愿服務項目榮獲第七屆中國青年志愿服務項目大賽金獎。
團隊還搭建了助聾科普全媒體矩陣,通過微信公眾號、短視頻平臺等渠道傳播聽力健康知識、分享成功案例,擴大社會影響力,目前已發布原創推文、視頻318篇,全平臺播放量超50萬次。
同時,團隊特別注重社區嵌入式服務。從2022年起,項目志愿者們每周日定期前往武漢旺山公園手語園,與其他手語愛好者共同學習交流,并為聽障人士進行科普教育和發聲教學。這種常態化、社區化的服務方式不僅建立了持久的信任關系,也使技術工具能夠根據實際使用反饋不斷優化。項目計劃在未來3年內,持續優化核心算法,吸納特教老師、社會工作者等志愿者,培訓特教老師300人,服務語言康復機構及聾校180家。
讓志愿者們最難忘的是暑假期間在云南昭通做志愿服務時的一個感人瞬間。
“爸-爸-媽-媽”。校對著屏幕前的唇部動作,剛上初中的小磊小亮(化名)兩兄弟相繼發出了13年來的第一個音節。因先天性耳聾,他們自出生以來就存在語言功能障礙。為救治孩子、貼補家用,二人的父母已外出務工數年,家里只有年邁的 爺爺,平常和孫子通過手勢進行交流。出乎大家意料的是,只通過一個下午的教學,他們就能比較清晰地說出“爸、媽”——這是團隊創造的“第247個奇跡”。
“當他叫出爸媽,他的爺爺和周圍的人瞬間紅了眼眶。他爺爺一直在念叨說,天吶,我孫子開口說話了,他叫爸媽了。我能夠感受到他們的開心和喜悅 ,這樣的開心和喜悅帶給我的就是,我覺得我做的事情是有意義的,是值得我去做的。”團隊志愿者譚琦說道。
云南聽障少年的故事,讓志愿者們感受到了聽障朋友們強烈的表達愿望與實際需求。他們也在根據聽障用戶的使用反饋,不斷對系統進行升級與改進。
團隊成員、2022級新聞學院本科生李靜宜表示:“我們深刻感受到了,我們所學的知識是可以真正運用于實際,去幫助到更多人的。在未來,我們將不斷優化、推廣我們的技 術,更好把科技的優勢融入到志愿服務當中,讓更多聽障人士能夠受惠于這項技術,能夠開口說話。”
未來,團隊還希望朝著更加輕量化、智能化的方向發展,不僅幫助失聰不失語者、也幫助失聰且失語者,覆蓋更多有需要的群體。
來源:綜合整理自央視新聞客戶端、新華社客戶端,微信公眾號“華中科技大學新聞與信息傳播學院”“華中科技大學招生辦公室”等