上周我用 AI 帮客户写报价,价格算错了 30%
那封邮件如果发出去,我在上海做品牌咨询的朋友阿琳就丢单了。后来我重看一遍,发现 AI 把"加急费"算漏了。这种事——AI 帮你干活,输出时好时坏——咱们做副业的人应该都遇过。
Shreya 和 Hamel 的方法:先定规则,再从错误里挖规律
我之前犯过一个错:以为 AI 输出"看起来没问题"就是没问题。直到看了 Shreya 和 Hamel 那期播客(他俩在纽约开了 AI 评估课,4500+ 学生,连 OpenAI 和 Google 的团队都在学),才明白这事儿得"系统检查"。
他们把评估分两种:
- Top-down(自上而下):你先定规则,比如"每条要点 240-330 字"、"报价必须含税费"。
- Bottom-up(自下而上):从 AI 实际犯过的错里挖规律,比如"它老漏掉加急费"。
他俩做了个免费的 Error Discovery skill,装在 Claude Code 里用(Claude Code 是一个电脑上的 AI 对话工具,你可以理解为"会写代码的 Claude")。我第一次装时,找了半天不知道在哪搜 skill——后来才搞明白要在里面输斜杠命令。把平时收到的客户反馈丢进去,它就能自动归纳 AI 常犯的错。对咱们非码农来说,相当于雇了个免费质检员。
你今天复刻这套,要花多少?
- 钱:0 元。Claude Code 免费版 + Error Discovery skill 都是免费的。
- 时间:第一次搭大概 2-3 小时,主要把你常用的 prompt 一个个过一遍。
- 技术门槛:会用 Claude Code 聊天就行,不用懂代码。如果你之前用过 ChatGPT 或 Claude 网页版,完全能上手。
- 第一步:下载 Claude Code 应用(macOS / Windows 都有),打开后输
/看命令列表,搜索 "Error Discovery" 安装。然后挑你最近一次 AI 翻车的对话丢进去。
你属于哪一类?
- 刚起步、还没客户:先不急这工具。你现在 AI 用得少,手动看一眼输出就够了。等每周用 AI 处理超过 10 个任务再考虑。
- 有 1-2 个稳定客户:我会建议你试试。把客户最近的反馈(比如"这条语气不对")丢给 Error Discovery,看它能不能帮你总结出规律。
- 在扩规模、一个人顶 5 个人:值得花这一下午搭起来。你现在每条输出都是"公司脸面",手动检查已经烧不起了。