MKMK 的 AI 筆記

系列專題

動手學大模型 12 問

上海交通大學把大模型課程講義整理成免費的《動手學大模型》,GitHub 上已有將近 6 萬顆星。這個系列一集只問一個問題,影片給你 60 秒的答案,這裡放完整解說。

  1. 00上海交大把大模型課免費開源了,裡面教什麼?總覽上海交大《動手學大模型》11 章實作教程總覽:每章學什麼、要什麼硬體、該從哪裡開始。
  2. 01為什麼對 AI 說「加油」,答案會變好?提示學習與思維鏈(第 2 章)一句「我們一步一步想」為什麼能讓 AI 算對數學?用交大第 2 章看懂零樣本、少樣本、思維鏈與自我一致性。
  3. 02怎麼讓現成模型學會你的任務,還做成網頁 Demo?微調與部署(第 1 章)拿現成的 BERT,用推文資料微調成分類器,再用 Gradio 放上 Hugging Face Spaces。交大第 1 章的完整流程白話版。
  4. 03AI 記錯一件事,能只改那一條嗎?大模型知識編輯(第 3 章)不重新訓練,也能直接改模型記住的某一條知識。用 EasyEdit 和 ROME 把梅西改成打籃球,再檢查有沒有改壞別的事。
  5. 04小模型怎麼學會解數學題?大模型數學推理(第 4 章)讓 1.5B 的小模型模仿 DeepSeek-R1 的解題過程,用監督式微調學會反思和驗算。看資料怎麼篩、怎麼訓練、怎麼評分。
  6. 05怎麼知道一段文字是不是 AI 寫的?模型水印(第 5 章)模型產生文字時可以偷偷留下統計上的記號,再用演算法檢查。但翻譯、改寫會讓記號變淡,水印不是萬能的 AI 偵測器。
  7. 06AI 為什麼會被話術騙?大模型越獄攻擊(第 6 章)越獄是用特殊包裝讓 AI 說出本來會拒絕的內容。本篇講它為何會發生、研究者怎麼系統化測試,以及開發者該怎麼防。
  8. 07AI 的回答裡能藏暗號嗎?大模型文本隱寫(第 7 章)可以。AI 每次選字都有好幾個候選,選哪一個就能代表 0 或 1。本篇用白話講 GPT-2 隱寫的原理、和水印的差別與風險。
  9. 08AI 怎麼同時看圖、聽聲音?多模態大語言模型(第 8 章)多模態 AI 以語言模型當大腦,前面接「眼睛耳朵」編碼器、後面接畫圖配音的解碼器。用 NExT-GPT 看它怎麼組起來、怎麼分三階段訓練。
  10. 09AI 怎麼幫你操作手機?GUI 智能體構建(第 9 章)AI 看手機截圖、決定下一步點哪裡,還會替自己打信心分數,沒把握時就停下來問你。
  11. 10AI 代理會不會闖禍?大模型智能體安全(第 10 章)AI 代理會動手做事,也就可能闖禍。R-Judge 測試模型能不能看出風險,結果是:看得出來,不代表判斷得對。
  12. 11AI 為什麼變得這麼有禮貌?RLHF 人類回饋強化學習(第 11 章)先有一個會打分數的評審,再用 PPO 讓模型往高分方向修正。教程用 GPT-2 示範,讓它學會寫正面影評。