公司什么时候该训练自己的模型？Fireworks CEO 的答案不是越早越好

导读

公司什么时候该训练自己的模型？Fireworks AI 的 Lin Qiao 建议先区分问题：动态事实用检索补充，输出格式和行为可用监督微调，风格偏好可用成对选择数据，专业任务则可考虑在可验证环境中强化学习；效果足够但成本过高时，再考虑蒸馏。创业团队可以先用前沿模型验证需求，等产品有稳定使用和高质量反馈后，再评估训练与维护投入。她强调先把产品判断做成可重复的评测：曾有团队奖励代码编译错误少，模型竟选择不写代码；要避免这种结果，奖励必须同时检查功能、测试等真正目标。模型上线后还需在实际推理环境回归，并比较用户选择、任务完成、延迟和成本，确保训练所得能转化为产品改善。控制权增加的同时，版本管理、监控和回滚也要由团队承担。