美洽可为机器人设置回答置信度或匹配阈值(名称与入口以当前版本为准),低于阈值时选择不答、追问或转人工,减少胡答。先保证知识库条目质量,再用真实未命中问题回测微调;阈值过高会加重人工,过低则继续答非所问,需按转人工量与差评一起权衡。
机器人「敢答」和「答对」不是一回事。阈值调得再漂亮,也救不了一堆过时、重复、互相矛盾的知识库条目。美洽机器人置信度这件事,表面是滑动条或策略选项,实质是「什么时候允许机器开口」与「什么时候必须交给人」。下文按置信度与知识库质量的关系、调整入口与高低阈值动作、真实问题回测、和未命中补库的衔接,以及调太高、调太低两类问题来写,方便运营与质检用同一套指标对话。
置信度和知识库内容质量的关系
置信度衡量的是当前问法与库内条目的匹配把握,不是魔法正确率。条目标题含糊、答案过时、一问多答互相打架时,模型或检索即使用较高分数命中,访客仍会觉得答非所问。因此调阈值之前,先清理明显错误条目、合并重复问法、给高风险业务(退款、账号安全)写清边界话术。美洽知识库的编辑、生效与灰度方式以当前版本为准;不先治库,只拧置信度,结果往往是转人工暴涨或胡答依旧。
- 调参周固定半小时先做「烂条目扫除」:过期活动、错误时效、互相矛盾的答复优先下线或修订,再动阈值。
- 把高投诉意图单独建一组标准问法与标准答,避免散落在多条低质量相似问里抢匹配,减少临场口径不一致。
- 变更知识库后保留简短备注(谁改、为何改),便于置信度回测异常时快速回滚内容而不是只回滚阈值。

调整入口(以当前版本和套餐为准)
置信度、匹配分或相似阈值的配置入口,通常在机器人、智能回复或策略相关页面,具体名称、是否按机器人实例分开、是否需特定套餐,都以当前版本为准。建议在测试机器人或低流量渠道先改,观察一天的转人工率、直接解决率与差评关键词,再同步到主机器人。改完记下变更时间,方便和话单、会话质检对齐。不要在大促当天无备份地大幅升降阈值。
- 变更前截取当前阈值与低置信动作配置存档,出问题可以按时间点回退,方便事后回溯与培训复用。
- 主备机器人策略分离时,先只改备机或夜间低峰,确认无事故再覆盖主机,避免只改一半导致体验回退。
- 每次调整幅度宜小步,例如先微调一档观察四十八小时,而不是一次性拉到极端值碰运气。
低于阈值时:不答、反问或转人工
低置信动作常见三类:直接不答并引导换种问法、追问澄清关键槽位、立即转人工或进入排队。高风险与强合规场景更适合「低置信就转人」;信息查询类可先追问再决定。不要把「随机瞎猜一条最像的」当成低置信策略。美洽具体提供哪些动作、是否可按意图分组配置,以当前版本为准。动作话术要短、诚实,例如说明把握不足已转人工,而不是假装很确定。
- 为退款、账号、隐私相关意图默认低置信转人工,并在内部备注标明「低置信接入」,便于质检抽查。
- 追问话术只问真正影响答案的一到两个槽位,避免连环盘问把访客问去点转人工按钮发泄。
- 不答策略必须配清晰下一步(转人工入口或换种问法示例),防止会话停在空白让访客以为系统卡死。
高于阈值时:直接答并附相似问
高置信时可以直答,并可附带相似问或相关条目引导访客自助点选(若版本支持)。附相似问能降低「答对了主题但细节不符」的摩擦,但也要控制数量,避免一屏选项淹没答案。直答内容必须来自已审核知识库,而不是现场生成无法追溯的表述。美洽是否展示匹配分给坐席、是否在转人工后仍显示机器人草稿,以实际界面为准;坐席应学会一眼判断草稿是否可沿用。
- 高置信直答的文案定期抽检,发现过时立刻改库,而不是让坐席口头补锅形成第二次标准答案。
- 相似问列表只保留三到五条高相关,删掉易误导的弱相关,降低点错后再次低置信的概率。
- 对已直答仍被追问「不是这个意思」的会话打标,进入回测集,作为下次调阈或补库的原料。

怎么试:用真实未命中问题集回测
不要只靠管理员脑子里的标准问法验收。从近两周真实会话导出机器人未命中、低置信转人工、差评会话中的原话,去重后组成回测集,在调阈前后各跑一遍。关注三件事:胡答是否下降、不必要转人工是否上升、高风险意图是否仍被机器硬答。美洽若提供回测或仿真工具则优先用;没有则用测试渠道人工点问并记录。回测结论要写进变更记录,避免下周又凭感觉拧回来。
- 回测集按意图分层抽样,退款、物流、账号、活动规则各保留足够原话,防止只优化了闲聊类问题。
- 每次只改一个变量(阈值或低置信动作),否则无法判断是哪一刀生效,形成可检查、可复盘的闭环。
- 大促或新品上线前务必加跑一版专题回测,旧阈值在新话术冲击下很容易集体失效,并记入当日交接方便下一班核对。
和未命中问题补库流程衔接
置信度调好之后,低置信与未命中不应只变成转人工压力,而要进入补库待办。定期把高频未命中问法写成标准问与标准答,审核后再入库,阈值才能在「该答的地方」重新升高。补库流程若已有专文,这里只强调衔接:调阈是流量阀门,补库才是长期降负。美洽未命中列表、待审核箱的具体入口以当前版本为准。没有补库闭环的团队,往往会陷入「越调越转人工」的短期循环。
- 约定每周固定负责人处理未命中榜单,处理量与上线量写进周报,避免列表堆成无人区,并记入当日交接方便下一班核对。
- 补库时同步检查是否应下调某类意图的直答权限,防止新条目尚未稳定就被高置信直接放行。
- 对已补库仍低置信的问法,优先检查问法覆盖与同义问,而不是继续无脑抬高全局阈值,并记入当日交接方便下一班核对。

常见问题
调太高导致几乎全转人工
问:阈值一上调,机器人几乎不说话,排队全是转人工,怎么办?答:先小步下调回可观察区间,同时看知识库覆盖是否过窄。全转人工说明阀门过紧或库覆盖不足,只靠坐席硬顶不可持续。优先恢复一个「可答常见问、高风险仍转人」的折中点,再按意图分组细化,而不是全局一根阈值走天下。美洽是否支持分意图阈值以当前版本为准;不支持时就用低置信动作区分高风险意图。
- 观察指标用「机器人参与率、转人工率、差评率」三件套,单看转人工会误判为越高越安全。
- 高峰到来前避免大幅上调阈值,必要时先加坐席或适当延长机器人可答范围中的低风险意图。
- 把「几乎全转人工」写成事故级变更回滚条件,触发即回上一档并通知值班,减少临场扯皮。
调太低继续胡答
问:阈值已经不低,仍经常答非所问或过时活动话术,怎么办?答:先升阈值减少硬答,同时立刻下线或修订被命中的错误条目。胡答往往是内容问题被低阈值放大。质检应抽样低置信本该转人却仍直答的会话,确认策略是否未生效或被其他规则覆盖。美洽多策略并存时的优先级以实际配置为准。对已经造成误解的答复,坐席接入后要明确纠正,不要默认访客没看见机器人那句。
- 建立「胡答样例」共享文档,运营与知识库同学同屏改条目,避免只在群里口头说一句「机器人又疯了」。
- 发现过时活动答仍在出,先停用条目再补新答,而不是一边改一边让低阈值继续放出旧内容。
- 连续两天胡答率不降,升级为配置排查:阈值、低置信动作、灰度开关是否一致,并与排班对齐口径。
在美洽里调机器人回答置信度,本质是给「有把握才开口」定规矩:先治知识库,再设低置信动作与高置信直答,用真实问题回测,并把未命中送进补库。阈值过高会把人压垮,过低会把差评堆高,只能靠指标小步走。
建议把置信度纳入双周复盘:看胡答样例、转人工结构、补库吞吐是否跟上。一线坐席则把低置信接入会话当成正常交接,而不是机器人故障。运营、知识库与质检一起,美洽机器人置信度才能从「凭感觉拧」变成「可解释的策略」。
美洽机器人置信度可以概括为:库质量优先、找对入口小步调、低置信不答追问或转人、高置信直答可附相似问、真实集回测、衔接补库、纠正过严与过松。按这张清单执行,答不准就会更少,该转人工也会更准时。

