跨足多專業領域的手語辨識研究團隊 Kinect Sign Language

兩天前分享給各位 Skype 翻譯預覽版讓語言無國界,語言不通也能交談!

今天我們要談的也同樣是跟語言相關的科技訊息:手語辨識

手語被當成一種溝通工具已有好長一段的時間,世界上估計有 3.6 億的人在使用手語,特別是那些患有嚴重聽力受損的人。

由於多數人不懂手語所以面對使用手語來溝通的人總是無法在第一時間回覆,但現在技術卻有望能使這種情況改善。

期望可以推動一個介於使用手語和非使用手語族群間的團體,微軟的研究在 2012 二月時初時和中國科學院(CAS)北京聯合大學合作啟動了 Kinect 的手語辨識專案

Kinect 的手語辨識專案促成了這場使用手語族群與非使用族群之間能更即時溝通的活動。

十一月初,Kinect Sign Language 這個分享資料和演算法的工作團隊在北京建立了電腦科技中心(CAS)P.Anandan,一位來自微軟研究中心的高層主管也以創立這個團隊(CAS和北京聯合大學所攜手合作的團隊)的成員名義參與了這次的活動。

我們鼓勵來自其他研究機構、聾啞學校及重聽或非政府組織的專家一同參加 Kinect Sign Language 團隊。

Kinect Sign Language 團隊的目標是推動研究手語辨識,第一步,我們正和一間中國的手語資料庫公司 DEVISIGN 進行學術交流。

視覺資訊團體(VIPL)所編製的,在微軟亞洲研究院的資助下,DEVISIGN 涵蓋了約 4,400 個經過中國手語中心標準化的詞彙,裡面總共約 331,050 個來自 30 位不同的手語使用者(13 位男性、17 位女性)集成的單字。而這些單字包括了 RGB 影片(AVI 格式) 和具有深度的資訊(BIN 格式)。

DEVISIGN 因此提供了手語研究者豐富的數據儲存訓練和評估他們演算法以及創立最先進的應用實例,像是訓練系統適應無紀錄手語者的解決方案。

在不遠的未來,我們希望可以得到新成員的貢獻得以擴展手語資料庫的規模,希望可以藉此促進研究和開發進度,將手語辨識的發展推向新的高峰,除此之外,我們打算組織來自世界各地的研究人員並舉辦活動和發布手語辨識的演算法。

只有單一的專業領域並無法實現這樣一個重大的使命,這樣做需要”跨足多專業領域的合作”像是機器學習、手語、社會科學和更多的專業。

Guobin Wu 補充說,“從長遠來看,社會將共同努力,把想法變成現實,我們有充分的理由去相信 Kinect Sign Language 團隊將提供聾啞人士符合成本效益、方便和可靠的通訊。”

 

原文請至此閱讀