一、專案背景與文化介紹
宋江陣是臺灣傳統廟會中最具代表性的陣頭之一，具有深厚的宗教和文化意涵。早期在清代時期，民間為防衛家園自組武術隊伍，後來融入廟會酬神表演，成為融合武術、舞蹈和宗教儀式的民俗技藝。宋江陣的演出人數眾多（通常以36人或72人編制，象徵三十六天罡、七十二地煞）。表演時武師手持刀、槍、棍等傳統兵器，陣型走位多變且充滿力量美感。例如常見的八卦陣據稱最為威力，是十八套陣法中精彩的一環。整體而言，宋江陣展現了團隊武術的力與美，象徵保境安民的護衛力量，也成為地方節慶中凝聚社區的文化活動。
然而現代生活節奏加快，年輕世代接觸傳統陣頭的機會日漸稀少。為了讓現代人能以創新方式體驗這門古老技藝，技術團隊發起了「VR觸覺手套宋江陣」專案，嘗試將虛擬實境(VR)與觸覺回饋技術結合，用沉浸式體驗來傳承傳統文化。在此專案中，參與者透過穿戴VR裝置與觸覺手套，親身投入宋江陣的虛擬演練，感受傳統武術的魅力。這不僅是娛樂性的VR體驗，更是一種文化創新嘗試，期望以科技手段讓使用者沉浸於臺灣民俗文化，對宋江陣產生更深的理解與認同。
二、動作捕捉與資料建構
要在虛擬環境中重現真實的宋江陣演武動作，首要步驟是動作捕捉與資料建構。專案團隊邀請宋江陣的武師演示陣法，並利用多元感測設備記錄其動作細節。典型做法是讓演練者穿戴含有慣性測量單元(IMU)的動作捕捉服或在關節處貼上光學標記，由多臺高速攝影機從不同角度追蹤肢體姿態。此過程中，還可在武師的武器或身體上附加感測器，以捕捉揮舞刀劍和步伐移動的路徑。針對手部精細動作，則透過資料手套來取得指尖、手腕的運動數據。例如，帶有彎曲傳感器和IMU的手套能同步量測每根手指的彎曲角度與手掌姿勢，確保連握拳出招等細節都被記錄。
取得大量原始動作數據後，接下來進行資料建構。工程師會將這些時空座標資料轉換為三維動作模型，校準每個關節的運動範圍與速度，形成可在電腦中重現的數位骨架動畫。必要時可運用演算法濾除雜訊並平滑動作，以貼近人類自然的武術動態。同時，團隊也會整理出宋江陣的一套動作資料庫：包含基本招式、陣型走位以及武器使用的軌跡等。這套資料庫不僅用於後續VR內容製作，也是一種數位保存——將宋江陣的珍貴身段套路以數位形式永久保存。值得一提的是，該專案在開發過程中大量運用了動態捕捉與骨架動畫重建等現代開發工具，為傳統武藝的數位再現奠定了紮實基礎。
三、虛擬實境整合與觸覺回饋
將捕捉到的動作資料導入虛擬實境後，團隊打造出高度擬真的宋江陣數位場景。典型場景設定在廟宇廣場，虛擬觀眾圍繞四周，使用者在VR中化身為宋江陣武師，按照指引演練陣法。為增強沉浸感，環境中運用了高解析度的紋理貼圖和動態光影效果，營造出廟會現場的氛圍。使用者佩戴VR頭顯（Meta Quest3、HTC Vive）後，可以360度環視四周，看到虛擬的同伴和對手，以及自己拿在手中的虛擬兵器。例如，當使用者做出「開四門陣」的動作時，系統會即時比對其手腳位置與預錄的標準姿態，並在虛擬場景中同步呈現相應的招式效果。
圖：配戴觸覺手套與VR頭戴裝置，在虛擬廟宇廣場中體驗宋江陣演武；觸覺手套可讓使用者感受到揮舞兵器的力度與重量。
本專案的一大創新亮點在於觸覺回饋的導入。使用者雙手戴上的觸覺手套（SenseGlove Nova 2）內建多種致動器，能夠在VR互動中提供真實觸感。當使用者在虛擬中抓握刀柄或持盾抵擋時，手套會產生對應的力回饋：透過微型馬達或剎車裝置對指尖施加阻力，模擬出握住實物的重量與硬度。例如，揮舞一柄虛擬長刀時，使用者會明顯感到手套對手指施加了重量感與慣性阻力，彷彿真的有一把刀在手中。又或者當兩把武器在VR中相撞，手套會瞬間釋放震動，讓使用者感到碰擊的震感。這種多模式觸覺回饋（包括力覺與震動）能模擬物體的重量、質地和衝擊，大幅提升了虛擬物件互動時的沉浸感。透過視覺與觸覺的雙重刺激，使用者不僅看見自己在舞動宋江陣，還能觸覺上感受到每一次出招的力度，真正達到身臨其境的效果。
四、技術架構與系統流程
本系統由感測與動作擷取、數據處理、虛擬呈現和觸覺回饋四部分組成，各模組環環相扣協同運作：
1. 感測與動作擷取：演練者或使用者身上配備各類感測器，包括動作捕捉相機、慣性傳感器(IMU)以及觸覺手套內建的彎曲/旋轉傳感器等。這些感測設備實時蒐集人體骨架姿態、四肢關節角度和手指曲度等原始數據。為提高追蹤精度，系統採用混合感測技術，例如將IMU與磁追蹤融合以校正漂移，或將手套內部機械傳感器與計算機視覺手部追蹤演算法結合，取長補短來獲取精準的手部動作。
2. 資料處理與動作辨識：收集到的感測數據會即時傳送到資料處理模組。這一層利用動作捕捉中介軟體或遊戲引擎（如Unity/Unreal）的插件，將感測數據解析為標準化的骨架模型參數。接著，透過先前建立的宋江陣動作資料庫，比對使用者目前的動作是否符合某個預定招式或手勢。如果使用者執行的是訓練模式，系統會評估其動作與標準範式的差異，作為之後回饋的依據。
3. VR內容整合與呈現：資料處理完畢後，結果傳送至VR渲染模組。在高性能圖形處理器支持下，對應的宋江陣角色動畫被驅動起來：使用者在虛擬環境中的化身（Avatar）會精準模仿其現實動作。若偵測到使用者做出了特定手勢（如某種兵器招式），系統會觸發相應的視覺特效與音效反饋，例如刀光揮動的殘影或打鬥時的金屬碰撞聲。VR場景同時整合定位系統，確保使用者移動時虛擬視角同步改變，使人仿若置身於熱鬧的陣頭隊伍中。
4. 觸覺回饋與力反饋：當VR情境中發生需要觸感的互動，如抓握武器或碰撞，系統會生成對應的觸覺指令經由無線即時傳輸到觸覺手套。手套上的微型致動器隨即執行：如啟動剎車機構產生阻力或震動馬達產生振動頻率，將力覺與觸感資訊反饋給使用者。整個過程於數十毫秒內完成，確保觸覺回饋與視覺動作同步，避免延遲破壞沉浸感[12]。如此形成一個閉環：使用者的動作影響虛擬世界，虛擬世界再透過手套影響使用者的觸覺，達成逼真的互動循環。
上述架構透過軟硬體整合，讓宋江陣的高難度武術動作能在VR中流暢呈現。同時，由於採用了可擴充的模組化設計，日後可方便地替換感測器（例如升級更精準的手部追蹤器）或擴充內容（加入其他陣頭的動作模組），具備良好的延展性。
五、實際應用案例
案例一：文化展演互動體驗 – 2024年11月，研發團隊攜本系統參加「台南資訊月國防科技應用展」，打造了宋江陣VR觸覺手套互動體驗供現場民眾試用。在展會現場，一座虛擬的廟埕被搬進體驗區，參觀者戴上VR頭盔和觸覺手套，依照螢幕指示擺出宋江陣傳統手勢。當他們做出如「雙刀對砍」等動作時，虛擬場景中會出現相應的兵器揮舞效果；觸覺手套也同步施加力道，讓體驗者感到雙手彷彿握有沉甸甸的武器。這種視覺與觸覺結合的互動模式新穎有趣，吸引眾多民眾排隊嘗試。有參與者反饋說：「平常很難有機會舞動傳統兵器，透過VR竟能感受到刀槍在手的真實重量，彷彿置身陣頭，十分震撼」(展場民眾語)。中科院（國家中山科學研究院）表示，宋江陣VR遊戲是首次將觸覺手套導入民俗技藝互動，讓玩家在娛樂同時深度體驗在地文化。不少體驗者在遊玩後表示對宋江陣「又多了一份了解和敬佩」，認為科技讓傳統文化變得更酷炫、易於親近。
案例二：教育推廣體驗 – 除了展會活動，此項技術也開始應用在文化教育領域。和學校合作策劃了宋江陣VR體驗課程，讓學生和參觀者能寓教於樂地學習這門傳統武藝。以校園教學為例，台北市某國小在社團課程中引入宋江陣VR系統，學生們輪流戴上觸覺手套，在虛擬指導下學習基本招式。老師反映透過這種沉浸式教學，小朋友們興趣濃厚，不僅記住了招式名稱，還了解其背後象徵意義（如「太極圖陣」蘊含陰陽調和之理）。許多學生表示最喜歡體驗握刀出招時手套給予的真實阻力，感覺自己彷彿成了電影裡的武林高手。可在文化推廣活動設置宋江陣VR體驗站，觀眾可穿戴裝備重現古代戰陣的一幕。透過VR，他們可以近距離觀賞宋江陣角色的精細裝扮與動作分解，甚至透過手勢和虛擬角色互動。以前只在廟會遠遠看過陣頭，現在透過VR不只看，還能親自動手比劃，感受到團隊配合的默契，達到身臨其境！這些應用案例顯示了VR觸覺手套在文化展演、教育推廣上的巨大潛力。
六、效益評估與未來展望
從效益上看，VR觸覺手套技術為傳統文化保存與推廣帶來了全新契機。首先，在文化保存方面，透過動作捕捉建立的宋江陣數位資料庫，可以長期保存武師們精湛的身手，成為珍貴的數位文化資產。即便未來真人演出因人力或環境因素減少，這些數位記錄亦可在虛擬環境中重現，確保文化薪火相傳。不僅如此，此技術讓使用者從被動觀看轉變為主動參與，藉由親身體驗來深入了解傳統武藝的精髓。這種深度參與有助於年輕一代建立對傳統文化的認同感，達到寓教於樂的效果。
在沉浸式科技應用領域：此專案證明了VR與觸覺介面的結合不僅能用於遊戲，還能成功跨界到文化傳承。參與者在享受娛樂的同時增進了知識，實現了科技與人文的雙贏。從技術角度評估，用戶反饋也驗證了觸覺手套的價值：真實的力回饋大幅增強了臨場感，使虛擬體驗的記憶點更鮮明難忘。當前此類高階觸覺裝置價格仍偏高、設備較為笨重，但隨著技術進步，我們預期未來觸覺手套將朝向輕量化、低成本發展，讓更多學校與單位負擔得起。屆時，大規模的普及應用將成為可能，虛擬實境中的文化課程、元宇宙虛擬廟會等創新形式或將出現。
未來展望方面：研發團隊計畫持續優化系統。例如，提升動作捕捉的精準度以辨識更複雜的陣法招式，或結合全身觸覺回饋裝置，讓使用者在VR中感受到更多元的感官刺激（地面踩踏的回饋或結合MR的運用）。此外，系統也可擴充至其他傳統表演藝術，如舞龍舞獅或其他武術類陣頭，只需替換動作資料庫與視覺模型，即可呈現不同的文化體驗。總而言之，VR觸覺手套技術為傳統陣頭文化注入了新的生命力。透過高度擬真的沉浸式體驗，它不僅讓古老的宋江陣走進了數位時代的視野，也為文化傳承者和科技開發者之間搭起了一座創新的橋樑。我們有理由相信，隨著技術日臻成熟，未來將有更多元、有深度的文化體驗模式問世，讓更多人以現代方式觸摸傳統、傳承文化。