多模式动作语意输入介面-昆山科技大学.pdf

財團法人工業技術研究院 南分院 FY96分包學術機構研究報告-期末報告 ************************************************* * * * * * 多模式動作語意輸入介面之研究 * * * * * ************************************************* 契約編號：B200-96CD5 執行期間：九十六年一月一日至九十六年十二月三十一日 計畫主持人：莊昌霖 執行機構：崑山科技大學 中 華 民 國 九十六 年 十一 月 二十 日 0 中文摘要 本計畫主要藉由動作擷取方式進行人機互動模式之研發，同時建立相關簡 化模組的應用能力，希望藉由現有之模組整合進行相關應用可行性之評估，初 步將採動作及簡易影像擷取模式，作為動作語意實際應用方向之構思與設計， 重點將放在人機介面應用之結合，以確認 相關操控數位角色動作之動作語意輸 入想法之可行性。 本計畫將分為兩個方向同時進行。 一、 動作擷取：透過陀螺儀動作擷取系統、無線模組及即時操作軟體，做為 人體動作操控數位腳色動作之應用開發。 二、 影像擷取：初步將利用 CCD或 CMOS影像模組進行影像追蹤測試，在 此過程中了解簡化影像擷取所需之相關資訊，作為動作輸入應用之依據。 本計畫透過動作者身上裝置之陀螺儀及無線模組，將擷取之動作動作資 料傳輸至電腦，經 Motion Builder （MB ）軟體；分析及動畫結合達到同步互 動之效果。同時透過雙 CCD或 CMOS取得動作者之肢體影像（結合從眼球 追蹤系統建立之 3D 人臉辨識模組及光學式動作擷取系統），取得之輸入訊號 可與陀螺儀得道之動作訊號結合，透過 一些簡易回饋機制反應影像輸入相關 資料。最終希望能建立一套利用簡易雙鏡頭動作輸入及回饋機制之互動模 式。 關鍵詞：動作語意輸入；動作擷取；影像擷取 1 ABSTRACT This project base on motion capture carried on human factors interaction. We plan to combine relevant assessment of gyroscopes and CCD mould to developing movements inputting system and application. This project will divide into two directions and go on at the same time . 1. Motion Capture: Base on small inertial gyroscopes placed on each of the Actors bones, or rigid bodies. These gyroscopes measure the rotation of the bones and app