上周三下午,一个做五金批发的老板把验收单拍给我。
第一行写着:答对率 ≥ 90%。
我说这一栏划掉,换成「办成率」。他愣了一下,问:答对了不就算办成了?
不是。差得远。
差在哪里,一句话就能说清。
一个真实对话,两种算法
客户问:我的货到哪了?
模型答:您的订单正在运输途中。
按「答对率」算,这题满分。
答案没错。
看着挺专业。
可按客户要的,这句什么也没办成。他要的是单号、到哪了、几点能到、能不能改地址。
答对是「说对了」,办成是「事情结束了」。
这两件事中间,隔着一次人工介入。
就这么现实。
行业的口径,已经在换了
IDC 的数据:2025 年中国企业级智能客服市场 71.9 亿元,同比增长 55.3%。
更值得看的是后半句——竞争重点正从「能否回答问题」转向「能否把事情办完」。
(这组数字我是从行业文章转引的,没有拿到 IDC 原始报告,你引用时留个心。)
买单的人变了问法:不是「你的 AI 聪不聪明」,是「它这个月替我关掉了多少单」。
国标也把「转人工」写成了要求
GB/T 47746—2026《顾客联络服务 人工与智能客户服务协同要求》,2026 年 5 月 25 日发布,9 月 1 日实施,推荐性国标。
它的口径很清楚:简单问题交给 AI,复杂纠纷及时流转到人工。
这句话反过来读更有意思——转人工不是失败,是设计。
很多老板把「转人工率」当 KPI 往下压,压到最后,用户在对话框里连发十几遍「转人工」,还是那个机器人。
真正该压的,是那种本来 AI 能办、只因为知识库没写清动作、被一脚踢回人工的无谓转人工。
办成率怎么算
一句话:不需要人再介入,就把诉求关掉的比例。
分母:进入会话的有效诉求(不是消息条数)。
分子:一次关单、没有二次来问、没有转人工的。
时限:按业务定,查物流 5 分钟,退换货 24 小时。
同一批会话,两种算法能差出 20 个点。
够夸张吧。
抽 100 条,两个小时能量完
不用等系统改造。今天就做:
1. 从最近一周的会话里随机抽 100 条,按诉求类型分层(查单、退换、咨询、投诉各 25 条)。
2. 每条标三件事:办成了没、转人工没、多久关的。
3. 算两个数:办成率、无谓转人工率。
4. 把没办成的,按原因归到下面五个码里。
五个字段,直接抄进 Excel
| 字段 | 填什么 |
|---|---|
| 诉求类型 | 查单 / 退换 / 咨询 / 投诉 / 其他 |
| 是否一次办结 | 是 / 否 |
| 是否转人工 | 未转 / 该转 / 无谓转 |
| 关单耗时 | 分钟 |
| 失败原因码 | F1–F5(见下) |
失败原因码,只有五个:
- F1 知识库没有这个动作——只写了「解释」,没写「怎么办」。
- F2 口语问法没收录——客户说「还没发货」,库里只有「物流查询」。
- F3 要调系统——查单号要连订单系统,AI 只能背话术。
- F4 该转没转——复杂纠纷硬扛,用户越问越火。
- F5 转错人——转过去了,对方也不知道怎么处理。
这五个码的分部,直接告诉你能不能靠改知识库解决。
F1、F2 占七成,说明是内容问题,两周能补。
这算好消息。
F3 占多数,说明要接系统,别指望改提示词。
F4、F5 占多数,说明流程没设计,跟模型没关系。
一个反常识的判断
我见过的办成率低的团队,几乎都不是模型不行。
是知识库里只写了「是什么」,没写「怎么做」。
「退货政策:7 天无理由」——这是解释。
「客户说退货 → 确认订单号 → 判断是否超期 → 生成退货单 → 告知寄回地址」——这是动作。
模型只会照着库里的东西回答。
你给它解释,它给你解释。
就这么直白。
说回那张单子
验收单上那一栏,写的其实是你在乎什么。
写答对率,你在乎它像不像人;写办成率,你在乎客户的事有没有结束。
前一个指标能让汇报好看,后一个指标能让客户留下。
你家的验收单,第一栏写的是什么?
我们是谁
我们专注小微企业知识库与 AI 客服落地。
做过的事:把客户的口语问法一条条补进知识库,把「答对」改成「办成」;国标 61 项,一项项对着自查。
不做的:不卖通用模型接口,不承诺「上线就见效」,只交付能验收的东西。
你怎么验收 AI 客服的?评论区说说你那张表的第一栏,我按你的业务帮你改成能验收的版本。
\#AI客服 #知识库 #小微企业 #客服管理 #AI落地