學位論文

Permanent URI for this collectionhttp://rportal.lib.ntnu.edu.tw/handle/20.500.12235/73912

Browse

Search Results

Now showing 1 - 2 of 2
  • Item
    結合 Focal Loss 之 CenterNet 於數位彎曲感測器手勢辨識中的類別不平衡對策研究
    (2025) 許玳維; Hsu, Tai-Wei
    在Open-set場景中的手勢辨識應用中,背景資料往往具有數量龐大與高度變異的特性,對模型造成前景辨識上的挑戰。然而,在本研究所使用的數位彎曲感測器中,資料主要反映手指的彎曲與否,背景樣本雖然數量龐大,但變異度相對有限。基於此特性,本研究的問題核心轉為在樣本極度不平衡的情況下,有效抑制背景類別對模型學習造成的主導效應。為解決此問題,本研究提出一套結合 Focal Loss 與 CenterNet 概念的手勢辨識方法,並採用 Sliding Window 技術進行資料切分與時間特徵擷取。Focal Loss 能提升模型對少數前景手勢的關注度,提升前景手勢的學習效果,同時降低背景樣本的干擾。配合以手勢中心時間點為標註依據的設計,強化模型對手勢發生時機的掌握能力。在推論階段,系統設計雙門檻判斷機制進行手勢偵測,並以編輯距離衡量連續手勢序列的整體預測準確度。實驗結果顯示,本研究提出的方法可於高比例背景樣本的資料情境下穩定辨識各類前景手勢,並於連續手勢序列辨識任務中優於傳統交叉熵法,展現出在類別不平衡下的實用性與穩健性。
  • Item
    利用硬體加速器在RISC-V平台實現智慧手勢識別之研究
    (2024) 田敬瑄; Tien, Ching-Hsuan
    隨著手勢辨識技術在多媒體娛樂和智慧家電控制等領域的廣泛應用,隱私保護和低延遲推論速度已成為提升用戶體驗的關鍵因素。邊緣計算,由於其能在本地設備上即時處理數據,強化了數據的隱私保護並顯著減少數據傳輸和處理的延時,因而被重視。本研究開發的智慧手套手勢辨識系統採用開源的RISC-V指令集架構SoC,並在FPGA平台上實現了低成本及高效能的部署。透過整合Gemmini硬體加速器,本系統顯著提升了邊緣設備的計算效能及模型的推論速度。實驗結果顯示,配備硬體加速器的SoC相較於未搭載加速器的SoC,推論速度提升達55倍,同時維持了手勢識別的高準確度。該邊緣系統的實施不僅確保了用戶數據的安全,也通過硬體加速器顯著降低了推論時間,進一步提升了用戶體驗。本研究證明了開源技術和硬體加速器在邊緣計算領域的有效性,為未來智慧裝置的技術進步提供了一個經濟且高效的解決方案。