SocialLM:用LLM與上下文聚合分析醫患對話社會信號

arXiv - Computers and SocietyManas Satish Bedmutha, Feng Chen, Andrea Hartzler, Trevor Cohen, Nadir Weibel

LLM能在不微調的情況下,準確追蹤醫患對話20項社會行為,並以協同加權集成提升準確度與穩定性。

AI 幫你先抓重點

AI 重點 1

LLM可即時追蹤醫患對話中的社會行為,無需微調,降低實務部署門檻。

滑鼠懸停看 AI 判斷理由
這表明教育科技或醫療實務可快速利用現成LLM進行對話分析,節省時間與成本,並可即時提供反饋,促進溝通質量提升。
AI 重點 2

協同加權集成能克服單一模型的族群偏差,提升結果穩定性,適合多元族群環境。

滑鼠懸停看 AI 判斷理由
此方法提供了在API限制下仍能取得高準確度的策略,對於需要公平性與可解釋性的臨床決策支援系統尤為重要。

核心研究發現

  1. 1

    三大LLM族群在不微調情況下,平均宏F1超過0.70,能準確偵測20項醫患對話社會信號。

  2. 2

    模型表現因患者種族與訪談階段而異,白人患者與早期訪談段落準確度較高,顯示存在族群與情境偏差。

  3. 3

    協同加權集成利用群體一致性模式,較最佳單一模型提升5% F1並降低變異,提升準確度與穩定性。

對教育工作者的啟發

教育科技工作者可借鑑此方法於醫療教育模擬、遠距諮詢等場景;利用LLM即時分析學生與導師對話中的同理心、開放性等社會信號,並以協同加權集成提升評估準確度;同時注意族群偏差,設計多元化樣本與校正機制;在API限制下可採用群體一致性加權策略,確保穩定性與公平性。

原始文獻資訊

英文標題:
SocialLM: Social Signal Processing of Patient-Provider Communication using LLMs and Contextual Aggregation
作者:
Manas Satish Bedmutha, Feng Chen, Andrea Hartzler, Trevor Cohen, Nadir Weibel
來源:
arXiv - Computers and Society
AI 摘要模型:
openai/gpt-oss-20b
閱讀原文

每週精選研究電子報

每週五信箱收到精選 5 篇教育科技重點研究摘要,零時間壓力掌握學術前沿。