AI Pulse
📡 X 信号

唐杰清华授课讲透GLM思维链,GLM-5.5或更稳

唐杰清华授课讲透GLM思维链,GLM-5.5或更稳

🚨GLM-5.5 还得再等等!智谱创始人唐杰教授最新清华授课把GLM系列模型思维链的底层逻辑讲透了!暗示GLM 5.5将拥有更稳健的思维链!

唐杰在最新《高级机器学习》第九讲中,直接拆开了“从基座模型到真正能办事的助手”到底在学什么。

🔹基座模型只会“续写下一个词”,还不会按你要求办事。不改权重,只在提示里塞几个示范,就是 In-Context Learning(ICL)。

🔹ICL 主要在学格式,不是从零灌新知识。就像孩子把书都看完了却没考过试,示范教的是“怎么答卷”。一旦把答题格式拆掉,示范几乎没用;标签随便打乱,模型表现掉得很少,还是远好于没示范。

🔹大模型更容易被错误示范带跑。把标签整个翻转,小模型不太理;大模型会跟着错示范走,直接掉到随机线以下。模型越大,越容易被带偏。

🔹思维链也是一种示范,只是多了推理步骤。很多时候不用给例子,只说“Let’s think step by step”就行。但大约千亿参数以下,思维链帮助很小,有时还会更差。第一个词不同,后面整条解码路径就完全不同。

这些原则正是 GLM 系列从“会续写”变成“能写代码、能跑长程任务”的关键。后训练、SFT 和示范质量,比单纯堆参数更决定最终能不能用。

GLM-5.5 如果继续沿着这条路走,重点很可能还是在更稳的格式理解和更可靠的推理链上。

#GLM55 #智谱AI #唐杰 #清华大学 #大模型 #ICL #思维链 #SFT #AgenticAI #Zai #Zcode

查看 X 原帖

订阅 AI Pulse

每天 08:00 · 12:30 · 18:30 · 23:50 更新