a4.2概念⏱ 约 6 分钟
它到底好不好用?给小雅做评估
从「感觉还行」到「有分数、能改进」
🔎 最后验证 2026-06📚 来源:✅ 18 人学过
为什么学这个
你给小雅改了句提示词,试了一下:"嗯,好像变好了?" ——真的吗?
也许这次问对了它就答得好,换个问法就翻车;也许你修好了 A,却悄悄弄坏了 B。全凭感觉,你永远不知道自己是在进步还是原地打转。
这一节,我们给小雅做一次"科学体检"——评估。学完,你改任何东西,都能用分数说话:到底变好了,还是变差了。
量四件事:准、对、省、快
评估一个智能体,主要看这几个维度:
| 维度 | 衡量什么 | 怎么看 |
|---|---|---|
| ✅ 成功率 / 正确性 | 答得对不对、任务完没完成 | 对照"期望答案"打分 |
| 💰 成本 | 一次花多少 token / 钱 | 平台用量 / 账单 |
| ⏱️ 延迟 | 回得快不快 | 响应时间 |
| 🧱 稳定性 | 换个问法还行不行 | 多测几种说法 |
💡 打个比方
这就像上线前的体检表,或者学生的模拟考:没有分数,你根本不知道这次复习到底有没有用。有了一套固定的题 + 评分,进步与退步一目了然。
核心做法:攒一套"测试题",每次都跑一遍

都看到这了,打个赏呗!
接下来 · a4.3
把小雅变成产品:上线给别人用
继续读下一节 →