本案例涉及人工智慧(Artificial Intelligence, AI)與生成式人工智慧(Generative Artificial Intelligence, GenAI)。依應用情境選擇真正重要的評估指標。
本案例依原書第 6 章的框架、範例或情境重組,並非原書正式案例研究。
原書提出六個互相依存的槓桿:生成任務類型、期望品質屬性、時間預算與人工評估者等資源、預定用途與適用性、倫理社會影響,以及法規要求。摘要任務可使用摘要評估召回導向指標(Recall-Oriented Understudy for Gisting Evaluation, ROUGE),影像任務可使用 Fréchet Inception 距離(Fréchet Inception Distance, FID)。使用者介面(User Interface, UI)回饋與正式監控數值也會持續改變評估策略。
| 槓桿 | 原書判斷例 |
|---|---|
| 任務類型 | 摘要偏重 ROUGE 與事實一致;影像偏重 FID 與感知相似 |
| 品質屬性 | 創意任務重原創與投入;事實任務重正確 |
| 資源 | 時間、預算與人工評估者限制深度 |
| 用途與風險 | 醫療、自主系統比娛樂需更嚴格驗證 |
| 倫理社會影響 | 偏誤稽核、公平與風險評估 |
| 法規 | 金融、醫療、國防需透明、可說明與可追溯 |
在 Excel 為每個槓桿記錄需求、風險、資源、候選指標與選擇理由;AI 可找出指標與任務不相符的地方。
原書沒有提供可直接計算的數據,因此不補造結果。
指標選擇是情境決策,不是套用通用排行榜。高風險、即時與受規範環境會改變優先順序。
請依六個槓桿評估候選指標,說明保留與排除理由;資訊不足時標示待利害關係人決定。