對瘖啞人士而言,手語是重要的溝通方式之一,然而一般人不懂手語溝通還是隔閡。不過美國德克薩斯州農工大學( TEXUS A&M UNIVERSITY)大學生物醫學工程學系的助理教授魯思貝.賈法理( Roozbeh Jafari)和他的團隊正努力研發一款可以解讀手語的穿戴感測裝置。
魯思貝.賈法理( Roozbeh Jafari)表示目前針對美國標準手語(ASL-American Sign Language)自動翻譯的系統,主要透過攝影機記錄、追蹤手部動作,將手語動作分解,透過影像追蹤肢體軌跡,把手勢轉為文字,顯現在電腦或手機螢幕上,但當手語姿勢不夠精準或多人處在攝影鏡頭前都會失效,使用者必須隨時攜帶相機也造成相當大的不便利性。
魯思貝.賈法理( Roozbeh Jafari)開發的新型穿戴式感測裝置,紀錄的不再是影像動作,而是使用者筆畫手語時,手臂、手腕肌肉產出的肌電圖(EMG- Electromyography),從手臂運動神經傳導的電流訊號,解讀轉化成文字。魯思貝.賈法理( Roozbeh Jafari)研究團隊也將這套系統設計加裝學習功能,即隨著使用者長期互動,系統會做行為學習並調整對不同手勢動作的認知。
未來,魯思貝.賈法理( Roozbeh Jafari)期望除了能讓手語溝通零距離之外,也能讓人跟物之間的溝通強化,將傳感裝置的技術更多元推廣到智慧生活中。新時代的溝通模式正在改變,對話或許不再侷限於聲音和文字,而是可能藉由肌肉,動作和訊號傳導傳達更多樣的互動。