一、案例定位

本案例涉及人工智慧(Artificial Intelligence, AI)與生成式人工智慧(Generative Artificial Intelligence, GenAI)。依應用情境選擇真正重要的評估指標。

本案例依原書第 6 章的框架、範例或情境重組,並非原書正式案例研究。

二、學習目標

三、案例情境

原書提出六個互相依存的槓桿:生成任務類型、期望品質屬性、時間預算與人工評估者等資源、預定用途與適用性、倫理社會影響,以及法規要求。摘要任務可使用摘要評估召回導向指標(Recall-Oriented Understudy for Gisting Evaluation, ROUGE),影像任務可使用 Fréchet Inception 距離(Fréchet Inception Distance, FID)。使用者介面(User Interface, UI)回饋與正式監控數值也會持續改變評估策略。

四、開始資料

槓桿 原書判斷例
任務類型 摘要偏重 ROUGE 與事實一致;影像偏重 FID 與感知相似
品質屬性 創意任務重原創與投入;事實任務重正確
資源 時間、預算與人工評估者限制深度
用途與風險 醫療、自主系統比娛樂需更嚴格驗證
倫理社會影響 偏誤稽核、公平與風險評估
法規 金融、醫療、國防需透明、可說明與可追溯

五、Excel/AI 分析方法

在 Excel 為每個槓桿記錄需求、風險、資源、候選指標與選擇理由;AI 可找出指標與任務不相符的地方。

六、計算結果

原書沒有提供可直接計算的數據,因此不補造結果。

七、結果分析與管理解讀

指標選擇是情境決策,不是套用通用排行榜。高風險、即時與受規範環境會改變優先順序。

八、AI 提問詞

請依六個槓桿評估候選指標,說明保留與排除理由;資訊不足時標示待利害關係人決定。

九、思考/情境變動