一、案例定位

原書以 Stanford foundation-model governance 研究為靈感,提出 GenAIOps 的 Data checklist。

二、學習目標

三、案例情境

某企業準備 fine-tune/adapt 模型,需先回答原書列出的資料問題:來源、生成方式、使用授權、copyright、confidential data、PII、poisoning,以及資料中是否混入 AI-generated content。

四、開始資料

檢查問題 目的
Training data sources? 建立 provenance
How was data generated? 理解資料形成機制
Permission to use? 確認授權/同意
Copyrighted material? IP 風險
Sensitive/confidential data? 企業機密風險
PII? 個資風險
Poisoned or poisonable? 資料完整性風險
Genuine or AI-generated? 避免 AI-generated content 污染訓練資料

五、Excel/AI 分析方法

建立 8 項 checklist,每項記錄 Yes/No/Unknown、owner、evidence、remediation date。Unknown 不應視為 pass。

六、計算結果

若教材 pilot 的 8 項中 6 項已有證據,evidence coverage=6÷8=75%。

七、結果分析與管理解讀

資料「存在」不等於「可用」。來源不清、權利不明或 PII/poisoning 未處理,都可能讓 model risk 在部署後放大。

八、AI 提問詞

根據以下 data inventory 對照 8 項 GenAIOps data checklist;只把有文件證據的項目標成 Pass,其他標成 Unknown 或 Fail。

九、思考/情境變動

**題目:**若補齊 1 項 evidence,coverage 由 6/8 變多少?

**參考解答:**由 75% 升至 7÷8=87.5%。