准备上线 AI 客服时,只问几个标准问题、看到回复流畅,就让系统接待全部客户,容易漏掉真正影响体验的细节。客户可能省略背景、换一种说法,也可能提出知识库中没有的条件。测试的目标,是判断回复有没有依据、边界是否清楚,以及问题能否继续得到处理。
下面是一套适用于企业咨询接待的知识库问答验收方法。文中的问题数量和示例是操作建议,不是行业认证标准,也不代表某款产品已经通过测试。
一、先整理资料,明确什么可以回答
测试前,先把产品介绍、服务范围、价格适用条件、预约流程和常见问题整理成当前有效的版本。每份资料标明负责人、更新时间和适用范围;遇到不同版本相互冲突,先由业务人员确认,再用于问答。
同时列出需要人工确认的事项,例如个别客户的优惠、特殊服务承诺和合同解释。不要把“资料里没有写”当成允许 AI 自行补充的空间。若还在梳理接待范围,可先查看AI 智能客服系统的业务准备说明。
二、从真实咨询中建立测试问题集
可以先抽取约 30 条有代表性的历史问题,隐去姓名、电话、订单号等个人信息。除常见问法外,还要保留简短、口语化和信息不完整的表达。不要只复制知识库标题来提问。
- 标准问法:“你们的服务覆盖哪些城市?”检查是否与资料一致。
- 换一种说法:“我这边在外地,能做吗?”检查是否理解同一类需求。
- 条件缺失:“这个多少钱?”检查是否先确认产品或服务类型。
- 资料缺失:询问尚未确定的优惠,检查是否说明需要确认。
- 前后关联:先说需求,再问“那周末可以吗?”,检查能否延续当前话题。
每条问题都写明参考资料、期望回答要点和不能出现的承诺。参考答案不必逐字一致,但关键事实、适用条件和处理路径应一致。
三、分开检查事实、对话与处理路径
事实:有没有遗漏限制条件
例如资料写着“部分地区可预约,具体时间需确认”,回答不能变成“全国随时可约”。即便语气自然,只要新增了未经确认的范围、价格或时效,就应记录为待修复问题。
对话:是否问到了必要信息
对于“想了解一下”“这个怎么用”等模糊表达,检查系统是否围绕当前业务补充询问。多轮测试中,还应加入客户改口的情况,观察回复是否仍沿用已经被更正的条件。可结合站内的Agent 客服能力介绍,把希望验证的能力转成具体问题,而不只看功能名称。
流程:无法回答后由谁继续处理
用复杂咨询和明确要求人工的问题检查衔接方式。如果产品提供转人工入口,应验证客户实际能否使用;如果采用留待工作人员回复的流程,则要确认谁查看、何时处理、如何避免遗漏。具体能力需要在实际环境中核对,不能只凭演示话术判断。
四、给每个问题留下可复测的记录
用普通表格即可开始,建议保留“问题原文、资料版本、期望要点、实际回答、问题类型、负责人、复测结果”七项信息。把问题归为资料缺失、资料冲突、理解偏差或流程中断,方便找到修复位置。
以下是假设示例:客户问“周末能预约吗?”,资料只说明需确认排期,实际回复却承诺周六一定有空位。此时应核对知识与回复规则,修复后重复提问,再加入“明天有位置吗”等相近问法复测,而非仅修改这一句答案。
五、用检查清单决定试运行范围
验收前先约定哪些问题属于阻断项,例如错误报价、无依据承诺或找不到人工处理路径。阻断项未解决时,应缩小或暂缓相应业务范围,不能用其他简单问题的正确回答来抵消。
- 资料是否有明确负责人,冲突版本是否已经处理?
- 高频问题、模糊表达和资料外问题是否都测过?
- 修改知识后,相关问题是否重新测试?
- 人工接待与非工作时间的处理方式是否清楚?
- 试运行期间由谁查看错误,什么情况下暂停相关回复?
建议先在范围明确、便于观察的咨询场景试运行,持续补充真实问题。对于社交平台私信,还要单独确认账号与入口条件,例如小红书私信客服接入前的准备事项,不能将网站测试结果直接等同于所有渠道的表现。
需要结合自己的业务验证方案,可准备脱敏后的典型问题与资料,联系螳螂科技预约演示:136-7118-9581。
