·tian
AI 工程师的前 90 天:一份在六周文档失效期内依然有效的入职指南
一份为 AI 工程师准备的 90 天入职计划,用观摩 Eval 评审、受监督的 Prompt 差异比对和端到端裁判模型校准,取代陈旧的架构文档。
insider
ai-engineering
onboarding
evals
+2·tian
Prompt 作者身份问题:三个角色同时编辑同一个文件
每个生产环境的系统 prompt 都有三个作者 —— 工程、产品和 ML —— 而且他们对什么是“变更”各执一词。这里有一套结构化的解决方案。
prompt-engineering
ai-engineering
team-process
code-review
·tian
评估总线因子:当定义“正确标准”的人离职时
在知道测试内容的人离职后很久,评估套件可能依然显示为绿色。这种损害是无声的,恢复成本极高,而且解决方案是组织层面的,而非技术层面的。
evals
ai-engineering
team-process
llm-as-judge