臺灣手語辨識
使用說明

用自己的鏡頭比臺灣手語(Taiwan Sign Language),看它被辨識成文字,再選擇唸出來。

這是支援 25 個單詞的專題展示,適合初步體驗與試比。目前免費,直接在瀏覽器使用。

開始辨識

三步開始試比

手機先固定,讓頭、手與上半身完整入鏡。

  1. 開啟鏡頭

    按「我要比比看」,允許鏡頭權限,就可以直接開始。不必先從選單挑詞,系統會在 25 個支援詞中辨識。

  2. 比手語,確認文字

    完整比一個詞、停一下,再比下一個。確認後的詞會依序留下,誤辨的詞可單獨刪除;想重複記錄同一個詞,可以先把手放下再比。

  3. 選擇唸出

    按「唸出整句」朗讀目前文字,也能點一個詞單獨聽。上方可切換男女聲及自動/手動唸出。

想先看動作時,再從選單挑詞、按「看示範」,可切換 0.5 倍速。選單只決定示範內容,不會限定辨識結果。

「暫停」會停止辨識,鏡頭仍開著;結束使用時,請按「關閉鏡頭」。

目前認得的 25 個詞

依教材前三個單元排列。支援辨識的詞,不一定都已有站內示範影片。

起床囉!第 1 單元

  • 起床
  • 早安
  • 刷牙
  • 洗臉
  • 穿衣服
  • 開心
  • 讀書

老師好!第 2 單元

  • 老師
  • 同學
  • 畫畫
  • 運動

我的朋友第 3 單元

  • 朋友
  • 一起
  • 聊天
  • 跑步
  • 我們兩個
  • 你們

目前已有站內示範:起床、早安、刷牙、洗臉、穿衣服。其他詞尚未有示範影片。

使用前,知道這幾件事

它會翻譯整句手語嗎?
目前是辨識單詞、依序串接文字並朗讀,不會解析臺灣手語的句法,也不會自動翻譯完整語句。
為什麼有時會認錯?
不同人的動作習慣、速度、角度與光線都可能影響辨識。系統只從上述 25 詞中選擇,其他動作也可能被誤認成其中一詞;請先確認文字再播放。
鏡頭影像會上傳嗎?
影像由瀏覽器在你的裝置上處理,網站不會上傳鏡頭影像。第一次使用需連網下載模型與辨識元件,載入及執行速度會依裝置與網路而異。
每台裝置的語音都一樣嗎?
單詞提供男女聲音檔;整句優先使用裝置的中文語音,未支援時改為逐詞播放。實際音色與播放方式依瀏覽器及裝置而異。

作者與教材來源

專題作者林欣頤,中原大學智慧運算與大數據學士班畢業。

詞彙參考臺灣手語教材資源網第一冊前三個單元,由教育部國教署委託、國立中正大學承辦。本站示範影片由作者自行錄製;外部教材影片未由本站重製,也未用於模型訓練。

查看開源元件與授權