""相关的文章
AI,个人随笔
从零学习大模型(10)——从 SFT 到 RLHF:大模型如何学会 “符合人类期待”?

从零学习大模型(10)——从 SFT 到 RLHF:大模型如何学会 “符合人类期待”?

监督微调(SFT)让大模型能 “听懂指令”,但要让模型 “说的话符合人类偏好”—— 比如回答更礼貌、推理更严谨、拒绝有害请求,还需要人类反馈强化学习(RLHF)。这种从 “能做” 到 “做好” 的跨越,正是对齐技术(Aligning)的核心目标。RLHF 并非简单的 “二次训练”,而是通过人类反馈构建 “奖励信号”,让模型在试错中学会贴近人类价值观。
产品设计
AI时代的产品文档:机器可读的规范标准

AI时代的产品文档:机器可读的规范标准

当产品复杂度爆炸、团队跨时区协作成常态,文档已从“记录纸”升级为AI可直接调用的“机器可读接口”。作者用15年血泪史+字节跳动、平安等实战数据,首次系统拆解让需求零失真、版本零混乱、协作零摩擦的六大规范维度——从BRD到上线评审,一套可直接落地的“文档操作系统”,把文档成本中心变成价值倍增器。