Don't Miss
HandsTalk|科大AI譯手語 兩秒變英文
By 信報財經新聞 on January 13, 2025
原文刊於信報財經新聞「EJ Tech 創科鬥室」
為貼近港產片《看我今天怎麼說》飾演的聽障人士角色,戲中男女主角游學修及鍾雪瑩在開拍前特意學習手語。香港科技大學計算機科學及工程學系的多位學生,研發一款即時手語翻譯應用程式HandsTalk【圓圖】,利用電腦視覺技術辨識手語,並結合人工智能(AI)模型補充與整合,約兩秒就能把手語翻譯為英文句子。
應用程式HandsTalk獲獎
HandsTalk近期獲評「2024香港資訊及通訊科技獎」學生創新(大專及高等教育)銀獎。HandsTalk團隊成員李焯森憶述參賽經歷,笑言評審提問相當尖銳。例如有評審表示,聾啞人士可透過打字溝通,沒必要特意開發手語翻譯工具。
李焯森認為,手語作為自然語言,能更直觀地表達情感。文字在表達情感或更深層語義時有一定限制;提供多元的溝通方式,讓特殊需求人士如健聽者一樣,自由決定與他人互動的方式。
他透露,團隊正向坊間創科機構申請基金,希望在資金充裕情況下,構思下一步商業計劃。團隊現已接洽各類非政府組織(NGO)商討未來發展方向。他指程式原理就是以數據訓練AI模型,惟團隊資源有限,冀首要發展手語翻譯需求最大的醫療領域。