不止是「達成手段」:支持推理的透明化AI資料科學流程

arXiv - Human-Computer InteractionVenkatesh Sivaraman, Patrick Vossler, Adam Perer, Julian Hong, Jean Feng

本研究探討了在醫療領域設計的AI資料科學系統如何透過可讀的查詢語言、概念定義等中間產物,支持使用者進行推理、精煉問題,並貢獻其專業知識。

AI 幫你先抓重點

AI 重點 1

中間產物的重要性

滑鼠懸停看 AI 判斷理由
AI認為理解中間產物如何支持使用者推理和問題精煉至關重要,因為這揭示了如何設計更具互動性和透明度的AI工具,而非僅僅將AI視為黑盒子。這對於提升使用者對AI的信任和參與度至關重要。
AI 重點 2

AI工作流程的建構

滑鼠懸停看 AI 判斷理由
AI強調以精心設計的中間產物為基礎的AI工作流程,這代表著從單純的自動化工具轉向更具思維導向的工具。這對於教育領域而言,意味著AI可以成為促進學習和知識建構的工具,而非僅僅是解決問題的手段。

核心研究發現

  1. 1

    生成式AI工具雖能協助使用者完成複雜的資料科學任務,但其端到端的模式缺乏支持使用者評估替代方案和重新定義問題的功能。

  2. 2

    成功的AI資料科學系統,其核心在於建立以精心設計的中間產物為基礎的AI工作流程,例如可讀的查詢語言。

  3. 3

    即使AI流程的其他部分不透明,這些中間產物也能幫助使用者思考重要的分析選擇,並完善其初始問題。

  4. 4

    使用者能夠透過中間產物貢獻其獨特的知識,提升資料科學流程的有效性。

  5. 5

    研究呼籲人機互動(HCI)社群思考何時以及如何設計中間產物,以促進有效率的資料科學思維。

對教育工作者的啟發

教育工作者可以思考如何在資料科學課程中,設計類似「中間產物」的學習活動,例如要求學生撰寫查詢語言、定義關鍵概念、或提供輸入輸出範例,以促進學生對資料分析過程的理解和反思。這有助於培養學生批判性思維和解決問題的能力,並提升他們在面對複雜資料時的自信心。此外,教師可以引導學生思考AI工具的透明度,以及如何有效地利用AI工具來支持學習。

原始文獻資訊

英文標題:
More Than "Means to an End": Supporting Reasoning with Transparently Designed AI Data Science Processes
作者:
Venkatesh Sivaraman, Patrick Vossler, Adam Perer, Julian Hong, Jean Feng
來源:
arXiv - Human-Computer Interaction
AI 摘要模型:
ISTA-DASLab/gemma-3-27b-it-GPTQ-4b-128g
閱讀原文

每週精選研究電子報

每週五信箱收到精選 5 篇教育科技重點研究摘要,零時間壓力掌握學術前沿。