BOOK MAP
全書地圖
本書共十章,圍繞兩個相互銜接的問題組織:先談如何建構 Agent,再談如何提升 Agent 能力。點任一章直接開始讀。
- 從引言出發
- 第二章:全書最關鍵的一章
- 第七章:評估是模型訓練的前提
- 每章附實驗與思考題,參考答案集中在最後
EXPLAINERS
講解動畫:按播放,看懂關鍵觀念
10 支講解動畫放在各章講完觀念的地方;按播放,旁白配字幕一步步演給你看,可暫停、可拖時間軸。點一個直接跳到書裡那一段。
CHAPTERS
各章內容
十章分成兩部分。點章名從頭讀,點小節直接跳到那一段。

PART 1 · 6 章
如何建構 Agent
從基本概念出發,依次討論上下文、記憶與知識、工具、Coding Agent,以及觀察與動作空間的擴展。

PART 2 · 4 章
如何提升 Agent 能力
先用評估建立可度量的回饋,再透過模型後訓練、基於執行經驗的持續進化和多 Agent 協作,分別從模型參數、單體系統和群體系統三個層面擴展能力。
08
模型後訓練深入 SFT(監督微調,即用標註資料教模型「照樣學樣」)與 RL(強化學習,即讓模型透過試錯和獎勵回饋自主提升)這兩種後訓練技術。
- 8.1從預訓練到 RL:四階段全景
- 8.2從經典 RL Agent 到現代 Agent [可選閱讀]
- 8.3模型預訓練基礎 [可選閱讀]
- 8.4Mid-training:補知識與基礎能力
- 8.5SFT(監督微調)
- 8.6SFT 資料合成:從示範到可訓練軌跡
- 8.7何時選擇 Mid-training、SFT 與 RL
- 8.8單輪強化學習:記憶與泛化的對照
- 8.9RL 演算法:從 16 次 rollout 到一次參數更新
- 8.10RL 環境:從評估到模擬
- 8.11從單輪到多輪:任務場景與信用分配
- 8.12獎勵設計:如何把任務目標變成學習訊號
- 8.13蒸餾:提升樣本效率
- 8.14從問題案例到後訓練
- 8.15後訓練實踐要點
- 8.16本章小結
- 8.17思考題
FAQ
常見問題
這是什麼版本?
《深入理解 AI Agent:設計原理與工程實踐》的台灣繁體中文版:以原書目前版本的簡體中文原文轉為台灣繁體,在這裡直接線上閱讀。
跟原書差在哪?
改為台灣用語與舉例場景,刪改提及中國 AI 的內容,並在關鍵觀念旁加入講解動畫;原書的實驗數據、研究引用與案例未改動。逐項說明見修改說明。
需要什麼背景?
原書列的必需背景是:Python 程式設計、LLM 的基本使用經驗、一款 AI 輔助程式設計工具、軟體工程常識。除第八章後訓練以外,全書對數學和機器學習的要求很低,完全可以作為起點。
實驗程式碼在哪?
配套程式碼在原書的 GitHub 程式庫,實驗按章節放在 chapter1/ 至 chapter10/;要找「實驗 X-Y」,先開對應的 chapterX/README.md。書裡的實驗框預設收合,展開後有連到原書實驗程式的連結。
思考題有答案嗎?
每章都有實驗和思考題,標題用 ★ 標出難度;參考答案集中在思考題參考答案。
START READING
從引言開始,一章一章讀。
時間有限的話,建議先讀第一章和第二章。
