懶惰還是高效?利用大型語言模型實現易用的眼動追蹤事件檢測

arXiv - Human-Computer InteractionDongyang Guo, Yasmeen Abdrabou, Enkelejda Kasneci

本文提出一種由 LLM 驅動的無程式碼流程,能將自然語言指令轉化為眼動追蹤數據分析與事件檢測。

AI 幫你先抓重點

AI 重點 1

從「程式碼導向」轉向「意圖導向」的數據分析範式

滑鼠懸停看 AI 判斷理由
這項技術改變了研究者處理複雜生物訊號的方式。過去研究者必須精通程式語言與參數設定,現在只需描述分析意圖,這讓非技術背景的研究者也能進行高精度的眼動分析。
AI 重點 2

LLM 在處理異質性原始數據中的強大適應力

滑鼠懸停看 AI 判斷理由
眼動追蹤數據格式多變且複雜,傳統方法對預處理極度敏感。利用 LLM 自動推斷檔案結構與元數據,解決了數據清洗中最耗時且易出錯的環節,提升了研究的自動化程度。

核心研究發現

  1. 1

    開發出一套基於 LLM 的端到端分析流程,可自動檢測原始眼動檔案結構、生成數據清洗程式碼並執行檢測。

  2. 2

    該系統能將使用者的自然語言指令直接轉化為可執行的程式碼,實現對注視(fixations)與掃視(saccades)的標記。

  3. 3

    在公開基準測試中的評估顯示,該方法的準確度與傳統的 I-VT 或 I-DT 等經典檢測方法相當,但大幅降低了技術門檻。

對教育工作者的啟發

對於教育科技研究者而言,這項技術能顯著加速「學習過程分析」的效率。在研究學生使用數位學習工具時,研究者不再需要耗費大量時間撰寫複雜的數據處理腳本,而是能透過自然語言快速提取學生的視覺注意力模式。這有助於在更短的時間內進行大規模的學習行為分析,例如觀察學生在 PBL 任務中如何分配注意力,進而優化數位學習介面的設計與教學干預策略。

原始文獻資訊

英文標題:
Lazy or Efficient? Towards Accessible Eye-Tracking Event Detection Using LLMs
作者:
Dongyang Guo, Yasmeen Abdrabou, Enkelejda Kasneci
來源:
arXiv - Human-Computer Interaction
AI 摘要模型:
/models/gemma-4-26B-A4B-it
閱讀原文

每週精選研究電子報

每週五信箱收到精選 5 篇教育科技重點研究摘要,零時間壓力掌握學術前沿。