aiedtechlearning designsrlassessment

提示卡：提升大型語言模型提示的透明度

arXiv - Computers and SocietyAmandine M. Caut, Beimnet Zenebe, Amy Rouillard, David J. T. Sumpter

本文提出「提示卡」的概念，旨在系統記錄和評估大型語言模型（LLM）的提示工程過程，以提升其可重複性、透明度及方法論。

AI 幫你先抓重點

AI 重點 1

提示卡的概念與應用

滑鼠懸停看 AI 判斷理由
此概念為教育科技領域提供了一種標準化的方法，以記錄和評估使用大型語言模型進行教學設計的過程，有助於提升教學資源的品質和可重複性。
AI 重點 2

提升提示工程的透明度

滑鼠懸停看 AI 判斷理由
在教育情境中，提示工程的透明度至關重要，因為它影響了學習者的互動和學習成果。提示卡能幫助教育者理解和控制 LLM 的行為，確保其符合教育目標。

核心研究發現

  1. 1

    大型語言模型（LLM）的提示工程日益重要，但缺乏標準化的文件和評估方法。

  2. 2

    提示卡的概念借鑒了模型卡的設計，用於系統記錄提示工程的目標、考量和步驟。

  3. 3

    提示卡能夠有效地捕捉模型細節、提示意圖、情境化策略、評估實踐和倫理考量。

  4. 4

    透過系統記錄提示設計的決策，提示卡有助於提升生成文本的品質評估，並提供可重複性。

  5. 5

    隨著提示工程變得複雜，提示卡能揭示影響系統行為的隱性設計選擇，提升透明度。

對教育工作者的啟發

教育工作者可以運用提示卡的概念，系統記錄和分享 LLM 在教學活動中的應用，例如：生成練習題、提供學習回饋等。透過提示卡的記錄，可以更有效地協作、優化提示策略，並確保 LLM 的應用符合教育倫理和學習目標。此外，提示卡也能幫助教師反思自身在提示工程中的設計決策，提升教學的品質和效果。

原始文獻資訊

英文標題：
What You Prompt is What You Get: Increasing Transparency of Prompting Using Prompt Cards
作者：
Amandine M. Caut, Beimnet Zenebe, Amy Rouillard, David J. T. Sumpter
來源：
arXiv - Computers and Society
AI 摘要模型：
ISTA-DASLab/gemma-3-27b-it-GPTQ-4b-128g
閱讀原文

每週精選研究電子報

每週五信箱收到精選 5 篇教育科技重點研究摘要，零時間壓力掌握學術前沿。