跳转到主要内容

834 含有标签「ai-engineering」

Posts tagged "ai-engineering" on TianPan.co.

查看所有标签

·tian

组合性税收:为什么增加工具会让你的规划器性能下降

你添加的每一个工具都会使规划器的准确率曲线向下弯曲。解决方案是引入一个退役指标 —— 频率 × 成功率 × 下游提升 —— 并设立单一的目录所有者。

insider
agents
tool-use
evals
+1
·tian

无故障停机情况下的面向客户 AI 质量退化复盘指南

状态页显示正常,错误率为零,但客户依然不满意。这是一份关于在没有发生系统崩溃时编写 AI 质量退化复盘报告的实战指南——涵盖了根因术语、严重程度分级以及闭环后续跟进的节奏。

insider
ai-engineering
incident-response
llm-ops
+1
·tian

你的销售团队正在悄悄运行的演示账户评估集

销售演示账户是一个对业务至关重要但无人管理的评估集 —— 它们往往是模型迁移悄无声息地毁掉价值六位数潜在客户演示的原因。本文将介绍如何将它们转变为一等公民级别的发布门禁模式。

ai-engineering
evals
llmops
sales-engineering
·tian

当市场部阅读你的评估案例时:跨职能可见性问题

你的评估集会被销售、市场、法务和客户成功部门查阅 —— 并且他们每个人从中提取的产物都与你的初衷不同。在客户从采购幻灯片中认出自己的投诉之前,请构建好“工程版”与“可共享版”的评估集隔离。

ai-engineering
evals
governance
cross-functional
+1
·tian

AI 工程师的前 90 天:一份在六周文档失效期内依然有效的入职指南

一份为 AI 工程师准备的 90 天入职计划,用观摩 Eval 评审、受监督的 Prompt 差异比对和端到端裁判模型校准,取代陈旧的架构文档。

insider
ai-engineering
onboarding
evals
+2
·tian

GPU 算力是产品路线图的约束:决定第三季度的 18 个月合同

多年期 GPU 承诺悄然将产品路线图与那些从未见过功能列表的人所做的容量决策绑定在一起。这里是弥合这一差距的规划准则。

ai-engineering
finops
capacity-planning
gpu
+1
·tian

内部评估集:一个无人审查的隐私边界

AI 团队通常根据生产环境的对话来评估模型,并将其称为内部数据集。根据目的限制原则,这其实是一个未经审查的独立数据处理环节。

insider
ai-engineering
privacy
governance
+2
·tian

区域分层评估 (Locale-Stratified Evals):如何捕捉英语测试集无法发现的非英语回归问题

英语优先的评估汇总往往会掩盖法语、日语和葡萄牙语查询中的性能倒退,直到用户流失时才被发现。通过区域分层评估、区域感知的评测员以及流量加权报告的规范,可以在用户感知之前捕捉到区域性的评估漂移。

ai-engineering
evals
localization
multilingual
+1
·tian

MCP 工具弃用:为什么模型仍然调用旧名称

重命名 MCP 工具不仅仅是 API 弃用 —— 这是一种模型分布的转变。本文将探讨为什么旧名称会持续出现,以及如何在不触发运维告警的情况下逐步淘汰它。

insider
mcp
tool-calling
deprecation
+1
·tian

移动应用商店审核与 AI 功能:发布频率的碰撞

Web 端 AI 功能可以在几分钟内完成迭代;而移动端 AI 功能则受限于平台的审核周期。本文将探讨如何在同一套评估标准和两条发布流水线下,通过架构衔接确保两个端的一致性。

mobile
ai-engineering
app-store
release-management
+1
·tian

凌晨 3 点处理一个没有报 500 错误的 AI 功能报警

传呼机响了,是因为流量评估得分下降了四个百分点,而不是因为服务崩溃。本文探讨针对现有告警无法触发的故障模式,如何制定运维手册(Runbook)模式、告警设计以及轮值纪律。

ai-engineering
on-call
sre
observability
+1
·tian

Prompt 即文档:当系统 Prompt 成为唯一可信的交付物时

当 PM、支持团队和销售开始通过阅读系统 Prompt 来了解产品功能时,这既是一种褒奖,也是一种结构性失效。本文将介绍如何保留有效的部分并修复其余问题。

insider
ai-engineering
prompt-engineering
product-management
+1
显示第 169–180 篇,共 834 篇