凝視與手勢指點中的米達斯觸碰:模態失效模式與 XR 介面啟示

arXiv - Human-Computer InteractionMohammad Dastgheib, Fatemeh Pourmahdian

開發 XR 適應模態平台,證實手勢指點優於凝視,並揭示不同錯誤類型與 Midas Touch 問題

AI 幫你先抓重點

AI 重點 1

手勢指點在 XR 中顯著優於凝視,提供更低錯誤率與工作負荷。

滑鼠懸停看 AI 判斷理由
此發現直接影響 XR 介面設計,說明選擇手勢可提升使用者體驗與效率,對教育科技應用尤為重要。
AI 重點 2

凝視錯誤以滑動失誤為主,證實 Midas Touch 問題在 XR 中仍具挑戰性。

滑鼠懸停看 AI 判斷理由
了解錯誤類型有助於針對性介入設計,避免不必要的點擊,提升精準度。
AI 重點 3

自適應介面僅在凝視模式下有效,提示介面自適應需針對模態設計。

滑鼠懸停看 AI 判斷理由
此結果顯示自適應策略需考慮不同輸入模態的特性,對於開發多模態 XR 系統具有實務指導。

核心研究發現

  1. 1

    手勢指點在吞吐量、錯誤率與工作負荷上均優於凝視,吞吐量 5.17 vs 4.73 bits/s,錯誤率 1.8% vs 19.1%。

  2. 2

    凝視錯誤主要為滑動失誤(slip)佔 99.2%,符合 Midas Touch 失效模式;手勢錯誤則以漏點(miss)為主,佔 95.7%。

  3. 3

    在模態自適應介面中,僅凝視的「去雜訊」介入有效,能略減逾時事件但未降低滑動錯誤。

  4. 4

    手勢寬度擴大介入因 UI 整合錯誤無法評估,提示介面設計需考慮實作可行性。

  5. 5

    實驗採 2×2×2 內部受試者設計,調整模態、介面模式與壓力三因素,樣本 69 名參與者,提供 XR 指點效能的實證基礎。

對教育工作者的啟發

對於 XR 教學環境,研究顯示手勢指點在吞吐量、錯誤率與工作負荷上均優於凝視,建議在設計互動式課程時優先採用手勢輸入,並配合適當的視覺提示以降低滑動錯誤。若必須使用凝視,應實施去雜訊自適應介面,減少逾時事件;同時避免過度依賴單一點擊,設計多點觸發或手勢輔助,以緩解 Midas Touch 失效。開發者亦需留意介面整合的可行性,避免因技術缺陷導致介入失效。

原始文獻資訊

英文標題:
The Midas Touch in Gaze vs. Hand Pointing: Modality-Specific Failure Modes and Implications for XR Interfaces
作者:
Mohammad Dastgheib, Fatemeh Pourmahdian
來源:
arXiv - Human-Computer Interaction
AI 摘要模型:
openai/gpt-oss-20b
閱讀原文

每週精選研究電子報

每週五信箱收到精選 5 篇教育科技重點研究摘要,零時間壓力掌握學術前沿。