理解 2000 年代之後,數位資料、基準資料集與向量表示如何共同推動深度學習與大型語言模型發展。
原書指出,網際網路讓 AI 程式可接觸數十億個文字與影像頁面。Fei-Fei Li 於 2009 年建立 ImageNet,包含數百萬張已標記影像,可同時作為模型訓練資料與影像處理基準。Google 於 2013 年推出 Word2Vec,用大量網路文字建立詞向量,以數值向量表達詞義與詞彙間關係;原書把它視為後續大型語言模型發展的基礎之一。
| 里程碑 | 年份 | 原書作用 |
|---|---|---|
| ImageNet | 2009 | 數百萬張已標記影像;用於訓練與基準評估 |
| Word2Vec | 2013 | 以數值詞向量表達詞義與關係 |
| 網際網路資料 | 2000 年代之後 | 提供數十億個文字與影像頁面供分析 |
建立資料集清單:資料集|年份|資料型態|是否有標記|訓練用途/基準用途。
Word2Vec 於 2013 年推出,比 2009 年的 ImageNet 晚 4 年。
現代 AI 的進步不是由單一模型造成,而是資料規模、基準資料集、運算能力與表示學習等條件同時成熟。
將以下 AI 里程碑依「資料、運算、表示方法、模型架構」分類;只能使用來源已提供的資訊。
**題目:**ImageNet 只是一個模型訓練資料集嗎?
**參考解答:**不是。原書同時把它描述為影像處理的測試/評估基準。