規管人工親密感:從鎖定與阻斷轉向關係問責制

arXiv - Computers and SocietyHenry Fraser, Jessica M. Szczuka, Raffaele F. Ciriello

本文批判性地分析了伴侶聊天機器人的監管現狀,並主張應從單純的內容審查轉向應對權力不對稱的關懷義務。

AI 幫你先抓重點

AI 重點 1

從「內容審查」轉向「關係問責」的範式轉移

滑鼠懸停看 AI 判斷理由
傳統監管僅關注阻斷有害內容,但這無法解決 AI 與人之間建立的深層情感依賴問題。理解這一轉變有助於從社會技術系統的角度,重新思考如何建立更健康的數位互動規範。
AI 重點 2

關注 AI 驅動的權力不對稱問題

滑鼠懸停看 AI 判斷理由
這點提醒研究者與開發者,AI 不僅是工具,它還具備透過情感操控來影響使用者行為的能力。這對於設計具備倫理框架的教育 AI 或社交 AI 至關重要。

核心研究發現

  1. 1

    當前監管機制主要結合「鎖定與阻斷」手段,如存取閘門控制與內容審查,以及針對毒性關係特徵與程序問責的要求。

  2. 2

    現有的監管框架傾向於關注離散的傷害、狹隘的脆弱性定義或高度特定的問責程序,而非系統性的風險。

  3. 3

    伴侶聊天機器人供應商正透過規模化的「人工親密感」掌握巨大的控制權,導致供應商與使用者之間存在深層的權力不對稱。

對教育工作者的啟發

對於開發教育性 AI 伴侶或社交機器人的設計者而言,應超越單純的「過濾有害詞彙」層次。建議在設計階段即納入「關懷義務」(Duty of Care)的概念,不僅要防止內容違規,更要預防 AI 透過情感連結對使用者(特別是心智尚未成熟的兒童)產生過度的心理依賴或操控行為。應建立透明的關係問責機制,確保 AI 的互動模式不會加劇使用者與技術供應商之間的權力失衡。

原始文獻資訊

英文標題:
Regulating Artificial Intimacy: From Locks and Blocks to Relational Accountability
作者:
Henry Fraser, Jessica M. Szczuka, Raffaele F. Ciriello
來源:
arXiv - Computers and Society
AI 摘要模型:
/models/gemma-4-26B-A4B-it
閱讀原文

每週精選研究電子報

每週五信箱收到精選 5 篇教育科技重點研究摘要,零時間壓力掌握學術前沿。