中大夥Google、日本財團
推網上學習遊戲「手語村」

中大夥Google、日本財團
 推網上學習遊戲「手語村」
字體大小
AAA
分享

9月23日是國際手語日,香港中文大學聯同Google、日本財團和關西學院大學推出全球首個結合人工智能和手語語言學理論的多語言網絡遊戲「手語村」(https://sign.town),讓市民可以學習一些日常生活中能用到的手語,從而引起大眾對手語的興趣。

「手語村」融合有趣的場景和生動的設計,玩家需在一個以手語為主要語言的虛構小鎮上,通過電腦和網絡攝像鏡頭一邊打手語一邊完成各種日常生活任務,如為旅行準備物件、尋找住宿的酒店等。過程中,人工智能識別系統會對玩家所打手語的準確度作出回應,並向玩家解釋手語、聾人、聾人文化等概念。該遊戲的測試版本已於今年5月在香港和日本發布,並已累積逾8500人使用。

負責項目的中大手語及聾人研究中心助理電腦主任鄭家耀表示,該網絡遊戲運用人工智能「手語自動識別技術」,分析手部動作、肢體動作和面部表情的特征,令系統能識別到意思不同但動作相似的手語。

研究團隊為此建立了一個「亞洲手語庫」,目前已有7種語言,下一階段希望推出「手語詞典」。他說,無論是聾啞人士或健聽人士,越多人接觸手語就越有助加強社會共融,消除歧視。他相信,「手語村」的開展能成功為自動手語識別及翻譯技術奠下基礎,提升大眾對手語及聾人社區的認知,推動聾健共融。

中大手語及聾人研究中心副主任施婉萍表示,未來還將會有不同國家的手語加入「手語村」,團隊希望利用先進的技術,建構一個平等、包容及和諧的社會。

 

編輯:Sun