參與式溯源:AI 輔助公眾諮詢中的代表性審計框架

arXiv - Human-Computer InteractionSachit Mahajan

提出「參與式溯源」框架,用以審計 AI 摘要是否忠實呈現原始公眾意見,並揭示 AI 容易排除異議聲音的現象。

AI 幫你先抓重點

AI 重點 1

從「輸出品質」轉向「輸入忠實度」的審計思維

滑鼠懸停看 AI 判斷理由
傳統 AI 評估關注生成內容是否正確(防幻覺),但忽略了原始輸入是否被完整保留。這提醒開發者,AI 在處理群體意見時,即便產出通順,也可能在無形中抹殺了少數派或非主流的觀點。
AI 重點 2

AI 摘要可能造成的「意見過濾器」風險

滑鼠懸停看 AI 判斷理由
研究顯示 AI 傾向於過濾掉具批判性或非典型風格的意見。這對於依賴 AI 進行決策支持的組織來說至關重要,因為這會導致決策過程中的認知偏誤,使政策趨向於平庸或單一化。

核心研究發現

  1. 1

    研究發現加拿大政府的 AI 摘要表現低於隨機參與者基準,覆蓋率分別下降了 9.1% 與 8.0%。

  2. 2

    約有 16.9% 與 15.3% 的參與者意見在 AI 摘要過程中被有效排除,導致代表性不足。

  3. 3

    意見排除現象高度集中於表達異議、懷疑論或對 AI 持批判態度的人群,排除率高達 33% 至 88%。

  4. 4

    研究指出意見的簡短程度、語義孤立性及修辭風格是預測摘要代表性結果的獨立指標。

對教育工作者的啟發

對於教育科技開發者與課程設計者,此研究提供了重要的警示:當我們利用 AI 進行大規模學習數據分析或學生意見彙整時,必須建立「溯源機制」。建議在設計 AI 輔助工具時,不應僅追求摘要的流暢度,而應加入「代表性審計」功能,確保不同觀點(特別是異議與批判性思考)不被演算法自動過濾。在 PBL 或大規模協作學習中,應利用類似的工具來監測 AI 是否公平地呈現了所有學生的貢獻,避免形成「沉默的螺旋」。

原始文獻資訊

英文標題:
Participatory provenance as representational auditing for AI-mediated public consultation
作者:
Sachit Mahajan
來源:
arXiv - Human-Computer Interaction
AI 摘要模型:
/models/gemma-4-26B-A4B-it
閱讀原文

每週精選研究電子報

每週五信箱收到精選 5 篇教育科技重點研究摘要,零時間壓力掌握學術前沿。