本案例涉及人工智慧(Artificial Intelligence, AI)與生成式人工智慧(Generative Artificial Intelligence, GenAI)。建立跨職能的評估指標決策機制。
本案例依原書第 6 章的框架、範例或情境重組,並非原書正式案例研究。
原書列出技術專家、領域專家、終端使用者、產品經理、倫理與法律專家,以及評估專家。技術角色理解模型與自動指標;領域角色定義真實世界品質;使用者回報易用、相關與滿意;產品經理連結客群、商業目標與關鍵績效指標(Key Performance Indicator, KPI);倫理法律角色處理公平、隱私與法規;評估專家負責基準、實驗設計與可重現性。
| 角色 | 主要貢獻 |
|---|---|
| 技術專家 | 模型架構、訓練目標、自動指標實作與解讀 |
| 領域專家 | 真實世界品質與可行性 |
| 終端使用者 | 易用、相關、滿意與主觀體驗 |
| 產品經理 | 客群、商業目標與關鍵績效指標(Key Performance Indicator, KPI) |
| 倫理/法律專家 | 偏誤、公平、可說明、隱私與法規 |
| 評估專家 | 基準、實驗設計、無偏與可重現測試 |
在 Excel 以指標為列、角色為欄標示提出、審查、核准與使用;AI 可找出只有單一角色決定的高風險指標。
原書沒有提供可直接計算的數據,因此不補造結果。
不同角色掌握不同證據。技術可計算不等於業務可接受,使用者喜歡也不等於法律或倫理合格。
請依角色矩陣檢查每個指標是否有技術、領域、使用者、產品與風險觀點;不得替缺席角色做最終判定。