Page 39
12 articles没人愿意写的 AI 事故复盘：四层诊断框架
当 AI 功能引发生产事故时，标准的复盘流程往往失效。本文提出一套四层诊断框架——模型层、数据层、集成层、基础设施层——帮助团队在不陷入责任推诿的情况下明确责任归属。
AI 输出波动性是你可能定价不足的业务风险
在概率系统之上构建定价层级、 SLA 和客户承诺蕴含着未公开的风险。这里介绍了如何量化这些风险并进行对冲。
你的系统提示词还在用英文：AI 本地化不完全的隐形成本
只翻译 UI 字符串却保留英文系统提示词，会悄然损害非英语用户的体验。本文探讨这种失败如何通过语体、结构化输出、分词以及隐形的评估差距产生复合影响，并提供应对方案。
AI 功能的沉默退出者：如何检测用户的无声不信任
大多数 AI 功能的失败在聚合指标中是不可见的。用户不会提交工单，不会禁用功能——他们只是悄悄地绕开它。本文介绍如何通过行为信号在留存曲线预警前检测用户的无声信任流失。
在不触发法律红线的前提下，用生产数据训练你的 AI
用于 AI 模型改进的行为遥测数据如何与 GDPR 和 CCPA 产生冲突——以及联邦学习、差分隐私和同意架构等模式如何在不触发法律风险的前提下维持反馈闭环。
API 文档即可靠性基础设施：文档如何决定智能体的成功率
当 AI 智能体通过工具调用（tool calling）消费你的 API 时，文档质量就成了直接的可靠性变量。模糊的参数和缺失的错误语义会导致可衡量的失败率，这是任何提示词优化都无法修复的。
代码专用 RAG：为什么通用检索在代码库中会失败
基于 Token 的分块在检索器看到代码之前就破坏了其结构特性。AST 感知分块、调用图遍历以及测试文件协同定位才是真正适用于代码库检索的模式。
大多数团队在无意中做出的上下文格式选择：JSON vs Markdown vs 纯文本
在 LLM 上下文中选择 JSON、Markdown 还是纯文本并非风格偏好，它决定了推理模式、准确性和成本。本文将介绍如何深思熟虑地做出这一决策。
AI 代码反馈循环：今日生成的代码如何训练明日的模型
随着AI生成的代码涌入生产代码库，它正在成为下一代模型的训练数据。这一反馈循环已经可以量化——而其失效模式足够隐蔽，以至于可能在不被察觉的情况下悄然到来。
为什么 AI 功能会让 A/B 测试失效（以及不会撒谎的因果推断方法）
标准 A/B 测试在应用于 AI 功能时会违反其核心假设。本文介绍如何使用能够处理污染、溢出效应和长期行为变化的因果推断方法来衡量真实影响。
跨用户一致性问题：当你的 AI 对同一问题给出不同答案时
当同事问了同一个问题却得到不同的答案，企业 AI 工具会悄悄侵蚀信任。本文解释了为何 temperature=0 无法解决问题，以及真正有效的工程模式。
从开发到生产的成本冲击：为什么你的 AI 功能在测试环境仅需几分钱，而在生产环境却要花费数美元
测试环境系统性地隐藏了生产环境中的关键成本驱动因素。本文探讨了开发支付与规模化生产账单之间的差距，以及如何诚实地建立成本模型。
关于 Tian Pan
我是 Tian Pan，一名工程师型创始人，专注于智能体工程——构建自主 AI 系统并扩展工程团队。我撰写关于系统设计、技术领导力和 AI 智能体实战的实用指南。曾在 Uber、Brex 和 IoTeX 担任早期工程师。
