论文精读|GLM-4.5 后训练阶段详解:专家模型迭代与混合推理 原论文:GLM-4.5: Agentic, Reasoning, and Coding (ARC) Foundation Models 作者:GLM-4.5 Team(智谱AI团队,共170位作者) 发布时间:2025 年 8 月 2026-08-17 基础模型与后训练 #强化学习 #后训练 #RL #SFT #GLM-4.5 #专家模型迭代 #混合推理
Neural Thickets:预训练权重周围密集的任务专家 论文: Neural Thickets: Diverse Task Experts Are Dense Around Pretrained Weights 作者: Yulu Gan, Phillip Isola (MIT) arXiv: 2603.12228 代码: https://github.com/sunrainyg/RandOpt 传统的后训练(Post-Training)方法——无论 2026-08-17 基础模型与后训练 #LLM #GRPO #PPO #RL #Post-Training #Scaling Law
On-Policy Distillation:让学生在自己的轨迹上向老师学习 On-Policy Distillation(OPD)正在成为 LLM 后训练的核心范式之一。Qwen3、MiMo、GLM-5 等主流模型都已将其纳入后训练流水线,而 2026 年 4 月密集发布的综述和分析论文,则标志着这个领域从”散点式探索”走向系统化成熟。 本文基于以下几篇代表性工作,系统梳理 OPD 的核心思路、方法分类、机制分析和实践建议: - A Survey of On-Policy 2026-04-21 OPD #LLM #强化学习 #RLHF #知识蒸馏 #模型压缩
12-Factor Agents:构建可靠 LLM Agent 的十二条原则 12-Factor Agents 是 HumanLayer 的 Dex Horthy 发起的一个开源项目,灵感来自经典的 12-Factor App 方法论,专注于为构建生产级 LLM Agent 提供可落地的工程原则。 这套框架的核心观点很朴素:大多数成功的 AI 产品并不是”纯 Agentic”的。它们是确定性代码与策略性 LLM 决策点的结合体,而不是把一切都交给 Agent 框架自动运转。 2026-04-14 Agent 工程与工具 #AI Agent #LLM #工程实践 #软件架构 #Prompt Engineering
基模全流程:预处理、训练与推理使用 本文记录基模(Base Model)从原始数据到可用模型的完整流程,涵盖数据预处理、预训练及推理使用三个核心阶段。 2026-04-14 基础模型与后训练 #LLM #基础模型 #数据预处理 #模型训练 #推理
论文速读|MetaClaw:让 AI 智能体在生产环境中持续进化 原论文:MetaClaw: Just Talk – An Agent That Meta-Learns and Evolves in the Wild 作者:Peng Xia, Jianwen Chen, Xinyu Yang 等 2026-04-14 持续学习与自进化 #AI Agent #LLM #强化学习 #Meta-Learning #Continual Learning
论文速读|Youtu-Agent:自动化构建 + 混合策略优化的 LLM 智能体框架 原论文:Youtu-Agent: Scaling Agent Productivity with Automated Generation and Hybrid Policy Optimization 作者:Yuchen Shi, Yuzheng Cai, Siqi Cai, Zihan Xu 等(腾讯优图实验室、复旦大学、厦门大学) 发表时间:2025 年 12 月 2026-04-14 Agentic RL #AI Agent #LLM #GRPO #强化学习 #自动化
论文速读|OpenClaw-RL:用对话训练任意 AI 智能体 原论文:OpenClaw-RL: Train Any Agent Simply by Talking 作者:Yinjie Wang, Xuyang Chen, Xiaolong Jin, Mengdi Wang, Ling Yang 代码:Gen-Verse/OpenClaw-RL 2026-04-01 Agentic RL #AI Agent #LLM #强化学习 #Agentic RL
Claude Code 国内使用指南 本文整理自腾讯云开发者社区,介绍如何在国内顺畅使用 Claude Code 进行 AI 编程。 2026-02-08 Agent 工程与工具 #AI工具 #Claude Code #开发工具
GRPO 去掉 Critic Model 会带来哪些问题? GRPO(Group Relative Policy Optimization)相比 PPO 最显眼的改动,就是去掉了 Critic Model(价值网络)。这一简化让训练流程干净了很多,但也带来了一系列不容忽视的问题。本文系统梳理这些问题,以及后续是如何应对的。 2026-01-22 强化学习 #LLM #GRPO #强化学习 #PPO #RLHF