GlintMarkers:利用角膜反射實現 XR 眼鏡空間感知

arXiv - Human-Computer InteractionSeungjoo Lee, Vimal Mollyn, Chris Harrison, Justin Chan, Mayank Goel

開發 GlintMarkers 系統,利用 XR 眼鏡內向相機捕捉角膜反射,藉由自訂反射標記實現眼球注視導向的空間定位與物體辨識

AI 幫你先抓重點

AI 重點 1

利用角膜反射進行注視導向空間定位是首創,突破傳統外部相機限制

滑鼠懸停看 AI 判斷理由
此創新使 XR 眼鏡能在不額外裝置的情況下即時捕捉使用者注視方向與環境位置,為沉浸式學習與互動提供更自然、低功耗的感知方式。
AI 重點 2

自訂的反射標記與 PnP 框架可在極低像素環境下精確估計距離,顯示光學設計與計算方法的結合潛力

滑鼠懸停看 AI 判斷理由
結合光學標記與專門調整的計算模型,克服硬體像素限制,證明在資源受限的 XR 裝置上仍能實現高精度空間定位,為未來低成本教育裝置開啟新思路。

核心研究發現

  1. 1

    角膜可作鏡面,將注視方向與環境資訊以低對比度反射編碼於眼球表面。

  2. 2

    設計被動式反射標記,將近紅外光集中於角膜,產生明亮的眩光圖案,提升低像素相機的可檢測性。

  3. 3

    開發專屬的 PnP 估計框架,適配角膜影像,實現標記物體的姿態、距離估算與唯一辨識。

對教育工作者的啟發

對教育工作者而言,GlintMarkers 可被嵌入沉浸式課程中,透過眼球注視追蹤即時辨識學生關注的學習物件,進而提供個別化的互動提示或評量。教師可利用此技術設計需要精確定位的實驗室模擬,或在遠距教學中以眼動資料評估學生參與度。對課程設計者而言,將自訂反射標記貼於教材或實體模型上,可在不改變環境佈局的情況下,讓 XR 裝置自動辨識並追蹤物件,減少外部感測器佈署成本,提升學習場景的可擴充性與互動性。

原始文獻資訊

英文標題:
GlintMarkers: Spatial Perception on XR Eyewear using Corneal Reflections
作者:
Seungjoo Lee, Vimal Mollyn, Chris Harrison, Justin Chan, Mayank Goel
來源:
arXiv - Human-Computer Interaction
AI 摘要模型:
openai/gpt-oss-20b
閱讀原文

每週精選研究電子報

每週五信箱收到精選 5 篇教育科技重點研究摘要,零時間壓力掌握學術前沿。