案例01|從 1,000 份測試文件到 200 萬份真實檔案
案例02|Progressive Scaling:全球零售商不要一次擴到整個網路
案例03|數百份/日到數百萬份:單一 Trading Desk 的架構為何不夠
案例04|全球製造商:Public API 在 Pilot 可用,全球部署卻卡在敏感資料與延遲
案例05|Healthcare Monolith:多部門同時使用後,單體架構成為瓶頸
案例06|全球零售推薦系統:Serving Millions 需要哪些企業級基礎
案例07|效能最佳化:Caching、Load Balancing、Resource Allocation 與 Query Optimization
案例08|金融 Trading Analysis:High Availability、Failover 與 Zero-Downtime
案例09|HR Policy Chatbot:從簡單 REST Endpoint 到五層 Enterprise Architecture
案例10|Legal Contract 與 Marketing Content 不該走同一條 Data Pipeline
案例11|自動品質控制、Sampling 與 Data Lineage:手動驗證無法跟上 Millions of Documents
案例12|Security by Design:從 End-to-End Encryption 到 Input/Output Filtering
案例14|Enterprise AI Governance 三大支柱:Regional Compliance、Data Governance、Security
本章處理生成式人工智慧(Generative Artificial Intelligence, GenAI)從可用的概念驗證走向企業正式環境時,如何重新設計規模、架構、資料流、效能、可靠性、安全與治理。核心觀點是:Enterprise Scale 不是把原本 POC 放大,而是讓系統在真實資料、跨區流量、不同敏感度、故障與法規條件下仍能可靠運作。
| 核心主題 | 主要觀點/方法 | 實務用途 | 重要條件/限制/延伸 |
|---|---|---|---|
| 真實規模驗證 | 用真實企業資料與正式環境暴露 POC 未遇到的容量、Rate Limit、安全與前處理問題 | 在上線前重估資料與架構容量 | TechNova 從 1,000 份測試文件走到最近 3 年 200 萬份真實檔案,相差 2,000 倍;不能自行線性外推 20 年總量 |
| Progressive Scaling | 分階段擴張地點與能力,從真實使用中累積新的模式與需求 | 提早發現 Scaling Challenges,逐步最佳化 | 原書沒有固定 Rollout 階段數或門檻 |
| Foundation Shift | 規模化同時增加 Volume、Regulation、Global Performance、Data Boundary 與 Latency 要求 | 重新評估 Pilot Architecture 是否可直接沿用 | 金融案例由數百份/日擴到數百萬份;原書未提供精確值,不能計算準確倍率 |
| Microservices/Independent Scaling | 讓 Document Processing、Model Inference 等元件按各自 Demand 獨立 Scale | 避免 Monolith 因局部尖峰而整體成為瓶頸 | 不同服務可能在 Business Hours 與 Overnight Batch 各自出現尖峰 |
| Enterprise Foundations | Consistent Performance、Geographic Distribution、Backup/Recovery、Fine-grained Access/Audit | 建立跨區服務數百萬使用者所需營運基礎 | 原書沒有 Availability、Latency 或 Recovery 的固定 SLA 數值 |
| Performance Optimization | Intelligent Caching、Load Balancing、Adaptive Resource Allocation、Query Optimization | 處理跨時區與高流量下 Response Time Variation | 加更多 Computing Power 不一定處理真正瓶頸 |
| Reliability | Multi-region High Availability、Seamless Failover、Zero-downtime Updates、Real-time Monitoring | 把 AI Downtime 從技術問題轉成可治理的 Business Risk | 原書未提供 99.9% 等固定 Availability 標準 |
| Layered Enterprise Architecture | Load Management、API、Processing、Storage、Monitoring 五層專門能力 | 分離 Traffic、Identity、Prompt、Search、Model、Cache、Data、Audit 與 Monitoring | 存在五層架構不等於自動 Production-ready,仍需實際容量、安全與整合驗證 |
| Differentiated Data Pipelines | 依 Document Type 與 Sensitivity 使用不同 Security/Validation/Speed 路徑 | Legal Contract 與一般 Marketing Content 採不同 Scrutiny | 文件敏感度需依實際政策判斷,不能由 AI 自行決定法律分類 |
| Data Quality and Lineage | Automated Checks、Sampling、Threshold-based Human Review、完整 Transformation/Access Lineage | 讓 Millions of Documents 可被大規模品質控制與稽核 | 原書沒有給 Accuracy Threshold 百分比 |
| Security by Design | End-to-End Encryption、Network/Application/Data Controls、Input/Output Filtering、Audit/Alerting | 降低資料在傳輸、儲存與模型互動中的洩漏風險 | 使用 Enterprise Model Service 不代表可省略額外 Guardrails |
| Enterprise Governance | Regional Compliance、Data Governance、Security 三個互相依存的支柱 | 支援跨區、跨法規與完整資料生命週期治理 | 金融案例因 Data Sovereignty 疏漏由 6 個月變成 18 個月 Redesign;增加 12 個月、總時程 3 倍 |
第 3 章讓 POC 從一次性 Demo 變成可進入 Production 的基礎;第 4 章接著處理真正上線後的下一個問題:當成功的 AI 開始被更多部門、更多地區與更多使用者採用時,原本可用的架構如何變成真正的 Enterprise Architecture?
原書強調,規模化不是單純增加伺服器、GPU 或資料庫容量。企業規模會同時改變資料量、地理分布、Latency、法規、安全、可靠性、監控與 Data Governance。架構因此需要從「讓功能可以工作」轉成「讓功能在真實世界中可靠、安全、可管理地長期工作」。