突破性創新！高雄大學資工團隊打造93%準確率手語辨識系統

【焦點時報／記者 蔡宗憲報導】

國立高雄大學資訊工程學系（資工系）教授余亞儒，指導江東庭、李思恩、王雋硯、蔡東祐等4位大四學生，結合「光流（Optical Flow）」、「深度學習（Deep Learning）」與「大語言模型（Large Language Model，LLM）」，開發即時手語辨識系統「手語之聲」，造福瘖啞人士，解決日常溝通不便困擾。該成果入選國科會大專學生研究計畫，並獲得校內「激發學生創意競賽—創業實作組」第一名殊榮。

余亞儒表示，根據政府資料，台灣約有18萬9千名瘖啞人士，其中台灣手語使用者2至3萬人，但全台僅有591名具備證照的專業手語翻譯員。加上多數民眾不諳手語，使得瘖啞人士在購物、銀行、醫院等生活場景中無法得到即時回應。雖然這類少數族群的需求使商機有限，企業較少願意開發解決方案，但對社會確有重大助益，因此團隊積極運用專業知識，協助改善其生活品質。

「手語之聲」系統運用光流技術、深度學習和資料生成技術，只需普通攝影鏡頭即可捕捉使用者手部動作及臉部表情並即時分析，能準確快速地轉換為文字或語音，準確率高達93%。此即時手語辨識系統應用潛力廣泛，能融入教育、醫療、公共服務等多個領域，例如協助學校教師與聽障學生教學互動、幫助醫護人員與聽障患者溝通病情，以及設置於政府與商業場所服務窗口，提升聽障人士在公共空間的便利性與參與度。

團隊成員江東庭表示：「我們突破手語資料稀缺的瓶頸，透過少量資料進行生成和擴充，使系統能正確識別詞彙並將其組成完整句子。」該技術核心在於用影像取代傳統感測器方案，既降低成本又提升便利性。余亞儒補充，系統目前能辨識單詞並串接成句，未來若能克服判斷句子斷點等挑戰，並擴充至穿戴裝置或手機應用程式，應用場景將更為廣泛，例如與緊急救援系統整合，協助瘖啞人士進行更順暢的報警與救援溝通。

「手語之聲」成果獲得肯定，不僅通過113學年度國科會大專學生研究計畫，也榮獲校內本（12）屆激發學生創意競賽—創業實作組第一名。

#國立高雄大學資工系,手語辨識系統,手語之聲,光流技術,深度學習技術,大語言模型