模型觀點 · 本月 趨勢 (2026-07 發表)
本篇出自 2026年7月26日 晨報
目前後訓練(模型練完基礎能力後、再教它怎麼答題的階段)的主力方法 RLVR(可驗證獎勵的強化學習:只在數學、程式這類有標準答案的任務上給模型獎勵)有個結構性盲點:它只優化「可以客觀打分」的東西,對風格、結構這些說不清但重要的品質無感,於是出現輸出變單調、不自然、鑽分數漏洞等大家都見過的毛病。MIT 團隊 7 月的論文提出解法:加一個對抗式的判別器,學著分辨「人寫的」與「模型生的」,把難以量化的品質訊號回灌給訓練;自報結果是修 bug 時改動幅度顯著更小而成績持平、寫故事更像人也更多樣(arXiv,2026-07)。單一團隊自報、未經獨立複現,先當方向看。它與今日主線第 6 點是同一件事的兩面:可驗證獎勵吃不到的那些面向,目前仍要靠人類示範橋接——這正是專家資料這門生意存在的機制原因。其餘方向本週掃描範圍內無重大新論文。
只留 email,隨時退訂。這是我們唯一想請你做的事。
Stanford 的「平攤評測法」——用「從題目內容預測難度」壓低可靠評測的成本——今天完成定向查證,找到獨立第二證:ICML 2026 一篇論文用同路線做模型能力外推(scali…
Lambert 一年前的「美版 DeepSeek」宣言——2 年、1 到 5 億美元做出權重(模型訓練完的參數檔案)/數據/代碼全開放的前沿模型——本報完成定向查證:專案存在有媒體…
SemiAnalysis 在同篇 AMD 實勘裡給出一組第一手工程觀察:2.5 名工程師配上 AI 編程代理,就能完成過去一整組人才做得完的新模型「發布日支援」:代理自動抓設定、跑…
Jacobian 猜想是 1939 年提出的代數幾何名題,說的是:如果一個多項式映射的「Jacobian 行列式」是非零常數,這個映射就應該可逆。Anthropic 研究員公布:在…