实战案例客服知识库与回答辅助
是否使用 AIGate 01 of 06 · 决策推演
判断 AI 边界
PM 核心决策题
这个场景需要生成式回答,还是搜索与固定话术已经足够?
项目材料逐步形成各关决策沉淀为 PRD 章节
- 01AI 适用性与不可自动化边界卡
- 02客服知识机会评估表
- 03RAG 诊断与方案选择表
- 04坐席权限、升级与恢复图
- 05RAG 评测、成本与上线护栏表
- 06完整客服知识产品评审档案
Decision BriefGate 01 决策工作台
这个场景需要生成式回答,还是搜索与固定话术已经足够?
业务场景背景与约束:
这是一个教学案例。某数字产品客服团队维护帮助中心、产品政策、故障处置手册和内部操作说明,希望为坐席提供可回到当前有效原文的回答草稿。
团队推荐基准先治理有效知识和权限内搜索,只在跨片段归纳、语境适配和回答草稿步骤引入受限生成。默认基线路径,可根据实际约束探索并采纳其他方案
- 事实E3
RAG 把参数化生成与显式外部知识结合,研究动机包括知识更新和来源追踪问题。
外部来源支持 - 建议E1
文档有效期、访问权限、固定话术、风险主题和外发权限应由确定性系统控制。
案例内建议
- 未知项E0
真实问题中有多少可由搜索或固定话术解决,以及多少确实需要跨片段生成,尚未通过工单样本验证。
尚无外部证据
Artifact delta
本关如何改变项目材料
新增材料
AI 适用性与不可自动化边界卡
区分知识治理、权限搜索、生成草稿与坐席最终发送,记录不使用生成和禁止自动化的范围。
- 过期文档仍可检索
- 信号
- 回答引用旧版本、已下架政策或错误生效日期
- 影响
- 坐席可能依据无效规则对客户作出错误说明或承诺
- 恢复
- 停止相关来源、重建索引、回放受影响查询并退回人工搜索
- 责任
- 知识负责人和工程
- 权限过滤失败
- 信号
- 返回其他租户、客户或未授权内部资料
- 影响
- 造成敏感信息暴露、合规风险和客户信任损害
- 恢复
- 阻断输出、停用相关索引、保全日志并启动安全事件响应
- 责任
- 安全和工程
- business · decrease有效证据查找时间
从坐席开始查找,到定位当前有效且适用于该问题的原文证据所需时间。
阈值:待真实基线 - business · increase有证据回答任务完成率
有充分有效证据且经授权坐席确认完成的回答任务,占进入目标范围问题的比例。
阈值:待真实基线 - cost · decrease单位已确认回答成本
知识治理、索引、检索、生成、失败运行和人工复核总成本除以有充分证据且经坐席确认的回答数。
阈值:待真实基线
Project directory
六个 Gate,共同形成一份项目档案
这是固定顺序的项目阶段目录,不代表个人进度,也不会保存选择。
- 01是否使用 AI判断 AI 边界已核验
这个场景需要生成式回答,还是搜索与固定话术已经足够?
- 02业务价值与数据条件建立价值与数据条件已核验
怎样证明解决的是找到并使用正确知识,而不是只让回答更像人?
- 03任务拆解与方案选择拆解检索与回答工作流已核验
如何区分知识未入索引、召回失败、重排丢证据和生成未遵循证据?
- 04人机协作与失败恢复设计坐席控制与失败恢复已核验
坐席怎样看见证据、识别不确定性、纠正回答并完成升级?
- 05评测、成本与上线治理定义评测、成本与上线护栏已核验
怎样同时评测检索、回答、引用、拒答、延迟和人工负担?
- 06完整项目与持续迭代治理发布与持续更新已核验
什么时候能扩大自动化,知识更新或质量回退时如何停止?