跳到主要内容

2 篇博文 含有标签「ai-documentation」

查看所有标签

你的帮助中心在 AI 功能方面缺失了什么(以及为什么用户不断提交工单)

· 阅读需 12 分钟
Tian Pan
Software Engineer

大多数产品团队将 AI 功能的文档视为事后的补救措施——一篇解释按钮在哪里以及点击后会发生什么的帮助文章。接着,支持工单就开始源源不断地涌来。“为什么 AI 这次给我的答案不一样?”“我怎么知道这个结果是否准确?”“昨天还有效,今天就不行了。”这并不是用户在无理取闹。而是他们的心理模型(基于你的文档构建的)与 AI 的实际表现不匹配。

传统的“操作指南”是为确定性软件设计的。而 AI 功能是非确定性的。弥合这一差距不是文案问题,而是结构性问题。适用于设置页面的文档格式,在应用于语言模型时,反而会误导用户。

AI 内容漂移:当你的文档语料库开始自相矛盾时

· 阅读需 11 分钟
Tian Pan
Software Engineer

你的文档六个月前看起来没问题,今天单独看依然没问题。但这周一位用户提交了一个 bug:开发者文档的两个页面对同一个配置项给出了相反的建议。一个页面说生产环境应将 max_retries 设为 3;另一个页面说保持默认值 0 即可。两者都是 AI 生成的,两者听起来都很权威。一个反映的是你们系统在一月份的实际行为,另一个反映的是 AI 工具在六月用略有不同的提示词所做的解读。没有人发现,因为没有人在整体上审视这个语料库。

这就是 AI 内容漂移。它不是幻觉问题——AI 在生成时是准确的。漂移发生在两次生成之间的间隙里。