从零手搓M0~M6现代架构I0~I7

2026 7 篇

11 月 3

现代架构 · I4

手搓 LLM 笔记 26:I4 后训练收官

I4 收官:完成多轮 SFT、CoT-SFT、DPO 批量训练、LoRA / 全参对照、RLVR / GRPO 单组更新、同题规则胜率与真实 Web UI 回归。保留所有未超越原始模型、局部回退和最小实验边界。

现代架构 · I4

手搓 LLM 笔记 24:I4 思维链 CoT-SFT

从 CoT 数据契约、Qwen 历史思考剥离和严格格式验收出发,完成 128 + 32 条 CoT 数据审计与三组 peak_lr 对照。记录 CoT 丢失、低学习率恢复、输出长度与推理算式变化,以及最终答案未超过原始模型的边界。

现代架构 · I4

手搓 LLM 笔记 23:I4 多轮对话 SFT

从 Assistant-only loss mask、Qwen 多轮模板和 128 条合成样本开始,完成全参数 SFT、独立行为评测与训练量干预。记录 v1 能力回退、v2 恢复,以及 loss 与行为表现不一致的真实证据。

10 月 4

从零手搓 · 番外

手搓 LLM 笔记 07-2:换底座,从 33.5 分的 GPT-2 到 86.5 分的 Qwen

上一篇的 355M 模型交出 33.5 分和 58 个 0 分。这篇是它的对照组:同一份数据、同一个判官、同一个测试集,换成 Qwen2.5-1.5B base 再做一遍。结果底座把分数从 33.5 拉到 86.5,SFT 却几乎不提分——但它把「写小作文」改成了「直接回答」,也在超参贪心时弄丢了刚学会的知识。