AI 工具链

微调模型上线后风格漂移,持续评估该盯哪些指标、回滚阈值怎么定

上线后风格漂移需提前拦截,重点监控三组指标:风格合规(格式合规率、禁用词命中率、风格一致性评分)、业务质量(任务成功率、用户负反馈率、输出长度分布)和分布偏移(输入特征漂移、输出置信度变化)。建议采用分级决策框架:单指标越线告警,双指标越线或核心指标跌破红线触发回滚。基线取上线后首周均值,阈值需按业务场景校准,风格指标通常比业务指标早1-3天暴露问题。