跳转到主要内容

164 含有标签「prompt-engineering」

Posts tagged "prompt-engineering" on TianPan.co.

查看所有标签

·tian

你的 PRD 只是一个未经测试的 Prompt —— 直到你对其进行评测

AI 功能的 PRD 本质上是一个未经编译的系统提示词。在验收前进行评测,能让定义不明确的问题在上线前就暴露出来。

insider
ai-engineering
product-management
prompt-engineering
+1
·tian

AI 功能依赖图:当提示词修改成为静默破坏性变更时

提示词修改对每一个消耗其输出的下游功能来说都是一项破坏性变更。清单、实时语料库契约测试和漂移警报,是团队在下一次故障替他们画出 AI 依赖图之前,主动绘制该图谱的方法。

insider
ai-engineering
llmops
observability
+2
·tian

当你的禁止列表变成秘籍:提示词中负面示例的隐性成本

成熟的生产环境提示词往往会积累一长串“不要做”的列表,但这在无形中适得其反——既暴露了攻击面,又增加了原本想要禁止的内容的产出率。

prompt-engineering
llm-security
evals
ai-architecture
·tian

每个租户的提示词编译:当你的系统提示词变成构建产物时

多租户 AI 团队在面对每个租户的提示词差异时,会意外地变成编译器工程师 —— 而运营账单会在第 6 个月如约而至。本文探讨了为什么大规模的提示词应该是构建目标,而不是配置文件。

insider
prompt-engineering
multi-tenancy
llmops
+2
·tian

提示词组合:管理一组提示词,而非单一的最佳提示词

生产环境中的提示词管理通常只选取单一的最优解。应当将其视为一个投资组合:通过加权变体、感知分段的分配以及每周再平衡来进行管理。

insider
prompt-engineering
llmops
ai-platform
+1
·tian

Prompt 回滚不像代码:为什么 git revert 是错误的原子操作

git revert 恢复的是确定的过去状态。而 Prompt 回滚必须处理缓存、对话历史、评估基准以及错误的 Prompt 已经形成的 A/B 测试分群——大多数团队都是在遭受挫折后才意识到这一点。

insider
llmops
prompt-engineering
deployment
+1
·tian

少样本示例造成的租户泄露:当你的提示词库变成跨客户数据存储库

从生产追踪中挖掘少样本示例,会悄无声息地将你的系统提示词变成一个未经审计的多租户数据存储库。本文将介绍这种泄露是如何发生的,为什么它属于违反合同,以及在客户发现之前捕捉此类问题的规范流程。

insider
ai-engineering
security
multi-tenancy
+2
·tian

LLM 提示词中 “现在” 的五种定义

每个 LLM 提示词中隐藏的五层隐性时间 —— 以及为什么当请求被重放、批处理或针对固定快照进行评估时,这些层级会产生无声的冲突。

llm
prompt-engineering
rag
observability
·tian

Prompt 卧推:对“快乐路径”之外的提示词进行压力测试

大多数 prompt 评估只针对“快乐路径”打分而忽略了长尾情况。构建一个涵盖长度、语域、语言和正式程度变化的压力矩阵,并根据性能下降曲线而非单一的准确率数值进行评分。

ai-engineering
evaluation
prompt-engineering
robustness
+1
·tian

采样漂移:当 Temperature 和 Top-P 变成团队内部的“口头传说”

生产环境中的采样配置往往堆积了大量未经记录的 Temperature、Top-P 和惩罚项数值。当初设置这些参数的理由早已模糊,但其影响却在不断叠加。本文介绍一种捕捉此类问题的工程规范。

llm
sampling
prompt-engineering
ai-engineering
+1
·tian

规范翻译税:当规范、提示词和评估发生漂移时

规范、提示词和评估是同一意图在不同媒介下的三种翻译。如果没有强制的一致性,它们就会产生漂移。一年后,没有人能分清某个回归到底是提示词的 Bug、规范的缺失,还是从第一天起就错误的评估。

insider
ai-engineering
llm-ops
spec-driven-development
+2
·tian

入职缺口:为什么新工程师需要三个月才能上手 AI 技术栈

AI 代码库承载着一种隐藏的领域知识税,使得原本三周的入职期延长到了三个月。解决方法是决策历史,而非架构图。

insider
ai-engineering
team-design
onboarding
+2
显示第 37–48 篇,共 164 篇