
手語者在和其他人交流時,對方可能會因不懂手語而無法溝通,需要輔助設備來向他人表達自己的想法,而傳統的手語翻譯設備存在使用不便的問題。
近日,加州大學洛杉磯分校(UCLA)的研究人員開發了一款配有可伸縮傳感器的手套裝置,通過手機應用程序將美國手語實時翻譯成英語,幫助手語者更好地表達自己。
這些傳感器由導電紗線制成,可以延伸到使用者的五個手指,檢測手的動作和手指位置。當手指彎曲時,傳感器會將這種運動轉化為電信號,傳遞給戴在手腕上的硬幣大小的電路板。利用機器學習算法,研究人員將這些手勢信號轉換成其代表的單個字母、數字、單詞和短語。
不同手勢動作與對應的信號
電路板接收到傳感器的信號后,將這些信號無線傳輸到手機應用程序上,實時讀取和解釋手語表達的單詞和短語。目前,該系統能夠以每秒一個單詞的速度對手語進行解讀,系統支持讀取包含660個符號的詞匯表。
該設備小巧輕便,將所有電子設備都放在手套背面的小電路板上,并依靠智能手機進行數據處理,足以用于日常生活。此外,采用的材料耐用性好且成本低廉,有望推廣普及。
手語識別系統工作流程示意
首席研究員Jun Chen表示:“我們希望這項技術為手語者開辟一條簡單的途徑,讓他們能夠和其他人直接交流,無需翻譯人員的輔助。此外,我們還希望它可以幫助更多的人自己學習手語。”
目前,研究人員致力于加快軟件讀取和解釋的速度以及擴大系統識別的單詞數量,便于商業推廣。
觀看視頻了解更多:
UCLA Sign Language Glove352 播放 · 0 贊同視頻
參考資料:
Wearable-tech glove translates sign language into speech in real timenewsroom.ucla.edu/releases/glove-translates-sign-language-to-speech
傅利葉是誰?
