·tian
用户侧概念漂移:当你的提示词依然奏效,但用户已经变了
固化的黄金数据集依然显示为绿色,但生产环境的满意度却在悄然崩塌 —— 因为改变的是用户,而非模型。本文探讨检测模式以及评估集的“保质期”管理规范。
llm-evals
drift-detection
observability
prompt-engineering
+1·tian
Eval-Prod 漂移:测试中的智能体并不等同于生产环境中的智能体
为什么你的评估框架所测量的智能体会与用户实际交互的智能体发生隐形偏离 —— 以及如何通过指纹识别、金丝雀测试套件和所有权规范来弥合这一差距。
llm-evaluation
agent-ops
deployment
drift-detection