2026智能客服进入下半场:当大模型能力趋同,企业真正比拼的是什么
(平台提示:本文可能是商业推广软文)
到了2026年,“接入大模型”本身已经很难决定一套智能客服的竞争力。同样使用主流模型,有的系统仍停留在知识问答,有的已经能读取业务状态、执行查询和建单,并在异常情况下把处理进度交给人工继续完成。
这意味着,智能客服的差距正在向模型之后移动。企业接下来更需要比较的,是模型如何接入客户上下文、业务数据和执行流程,以及这套系统在异常、人机协同和长期运营中是否仍然可控。
一、大模型能力趋近以后,智能客服的比较对象变了
Stanford HAI 在《The 2026 AI Index Report》中指出,截至2026年3月,Anthropic、xAI、Google、OpenAI等头部厂商的模型在Arena榜单上已经聚集在较接近的区间,报告将这种变化概括为头部模型性能趋于收敛,竞争压力进一步转向成本、可靠性和专业场景表现。这里的“趋同”并不是说不同模型已经没有区别,而是说单纯依靠“接入哪款主流模型”越来越难解释一套企业应用的最终差异。
客户对AI客服的预期也在发生变化。Gartner于2026年2月至3月调查了3566名B2B和B2C客户,在已经使用GenAI的客户中,58%曾让AI代自己完成任务,B2B客户中的比例达到74%;Gartner据此建议企业把数字服务从单纯问答转向可采取行动的对话体验,例如预约、提交材料和账户更新。
所以到了这一阶段,模型仍然决定能力上限,但企业真正需要验证的是另一件事:AI理解客户之后,后续服务链能不能继续运行。如果客服系统拿不到业务上下文、无法调用系统,或者一遇到异常就退回人工,那么前端对话再自然,也很难改变原来的服务流程。
二、差距开始出现在模型理解客户之后
1. 先解决上下文,而不是继续给模型增加知识
客户问“我的订单怎么还没到”,模型理解这是物流咨询并不困难,但企业真正处理这个问题,还需要确认客户身份、找到对应订单、读取物流状态,并结合时效规则判断是正常运输、异常延迟还是已经需要催办。这里既包含企业知识,也包含实时业务数据,两者承担的作用并不相同。
服务政策、产品说明、售后规则适合通过知识库检索,而订单、会员、预约、库存和工单状态通常需要调用业务系统。如果智能客服只能读取知识文档,它可以解释“公司通常怎样处理物流异常”,却未必知道“这个客户的这张订单现在出了什么问题”。
因此,Agent进入企业客服后的第一层工程问题,不是模型还能记住多少内容,而是上下文如何被组织和授权。客户身份、会话信息、企业知识和实时数据需要在清晰的数据边界内进入当前任务,否则AI很容易停留在“听懂了,但办不了”。
2. 再把客户意图转换成可执行流程
拿到上下文以后,下一步才是执行。客户确认希望催单时,系统可能还要完成信息确认、物流接口调用、结果判断、工单创建和状态回写;如果客户临时改为退款,流程又需要切换到另一条业务路径。
这里可以把一套Agent型智能客服简化成下面的运行链路:
客户入口 │ ├─ 电话 / 官网 / APP / 小程序 / 企微等 │ ▼ 具体客服 Agent │ 识别意图、维护上下文、主动追问 ▼ Agent 编排层 │ 条件判断 / Flow / Tools / 权限控制 ├──────────┬──────────┐ ▼ ▼ ▼ 企业知识 业务系统 工单/服务流程 RAG/FAQ CRM/ERP 建单/流转/回写 订单/会员等 └──────────┴──────────┘ │ ▼ 返回结果或转人工 │ ▼ 日志 / 质检 / Badcase / 运营调整
这张链路里,大模型只是其中一层。模型负责理解和生成,Agent维护任务状态并决定下一步,编排层管理流程和工具,企业系统负责返回真实业务数据,工单和人工则处理需要持续跟进或超出自动化边界的问题。
因此,“支持Tool Calling”也不能直接等同于“能够办理业务”。一个业务动作真正进入生产环境,还需要继续明确接口鉴权、参数校验、调用权限、超时处理、幂等机制、二次确认和操作留痕。
3. 正常路径能跑通,只能证明Demo成立
客服真实环境中的问题往往发生在正常路径之外。客户提供的信息可能不完整,手机号和订单不匹配,接口可能超时,用户也可能在提交前突然改口;更复杂的情况下,一次会话里还会同时出现咨询、投诉和退款等多个诉求。
这时应该验证的已经不是“AI还能不能继续说”,而是系统怎样控制动作。接口失败后是否重试、重复请求是否会创建两张工单、关键操作前是否再次确认、无权限动作是否及时停止,这些机制比一段流畅回复更接近企业真实风险。
三、自动化越深入,人机边界越需要设计清楚
AI能够执行更多任务以后,并不意味着转人工越少越好。查询积分、订单状态、普通预约等规则明确的任务适合更多自动处理,而复杂投诉、特殊补偿、争议判断以及需要专业责任承担的事项,仍然需要人工介入。
Gartner同一批3566名客户的调查显示,87%的受访者认为,企业使用GenAI提供客服时,仍然应该提供联系人工客服的选项。Gartner同时指出,AI不应成为所有服务问题进入人工之前的强制关卡,这说明下一阶段的重点不是简单消灭人工入口,而是重新设计AI和人工之间的任务分工。
1. 转人工应该是状态交接,而不是重新开一段会话
传统机器人经常把“转人工”理解成结束机器人服务,然后把客户送进另一个队列。客户已经提供过订单号和故障信息,人工接手后却仍然需要重新询问,前面的会话没有成为后续处理的有效上下文。
Agent型客服更合理的方式,是把转人工设计成一次任务状态交接。客户意图、已采集字段、查询结果、当前流程节点和会话摘要应该随服务一起进入人工侧,让坐席知道前面做过什么、为什么需要人工以及下一步还缺什么。
2. 评价人机协同,要看边界而不是单一转人工率
如果系统为了降低转人工率,让AI继续处理没有权限或高风险的任务,指标可能更漂亮,业务风险反而会上升。企业应该按任务风险设置边界:标准查询直接执行,信息不全先追问,关键操作二次确认,敏感判断进入人工,超出权限则停止自动动作。
因此,PoC里比“机器人拦截率”更值得观察的是任务分工是否合理。该自动处理的任务有没有走完,该进入人工的节点有没有及时切换,以及切换后客户是否还要重新解释问题,这三个问题更能反映真实服务体验。
四、长期差距不会出现在第一次Demo,而会出现在业务变化以后
客服业务不是上线后保持不变的静态系统。商品、价格、活动和服务政策会更新,接口字段和内部流程也会调整,真实客户还会不断产生测试阶段没有覆盖的新表达和新组合。
假设企业修改了一项退换货政策,传统FAQ可能只需要改一段答案,但Agent流程中可能同时涉及知识检索、退款条件判断、工单类型和接口调用。一次规则变化可能影响多个节点,因此企业需要知道改动影响了什么、哪些流程需要回归测试,以及新版本能否先灰度验证。
Badcase运营也不能简单理解成“回答错了就改Prompt”。错误可能来自过期知识、检索结果、意图识别、流程配置,也可能来自外部接口异常;只有先定位问题发生在哪一层,后续修改知识、Flow、工具配置或人机边界才有意义。
所以Agent上线后的可观测性开始成为生产能力的一部分。会话记录、执行日志、异常指标、自动化测试、Badcase和灰度发布并不是独立的后台功能,它们共同回答一个问题:业务变化以后,企业还能不能知道AI为什么这样做,并把错误稳定地修回系统。
五、一种产品实践:平台、Agent和协同产品应该各自承担什么角色
以合力亿捷当前公开产品架构为例,合力亿捷作为客户联络Agent解决方案提供商,具体客户入口由电话Agent、智能客服Agent等产品承接;Synerow客户联络Agent平台则位于编排与运行层,用于组合大模型、企业知识、Flow和Tools,并连接业务系统。合力亿捷官网对Synerow的公开定位同样强调“大模型+工具+企业知识”的编排,而官网产品体系则把智能语音机器人、在线客服机器人、工单系统、坐席辅助等分别列为具体Agent或协同产品。
这几个对象不能混写成同一个产品。Synerow客户联络Agent平台负责Agent构建、流程编排、工具调用和运行运营;AI语音客服、在线客服Agent等具体Agent直接承接客户任务;知识库、工单、人工坐席和质检则为任务提供知识、流转、兜底和运营协同。
边界同样需要写清楚:具备工具和流程编排能力,不意味着接入平台后就能无条件查询订单、修改预约或自动建单。具体动作能否执行,仍取决于企业是否开放对应接口、怎样配置鉴权和字段、Agent拥有什么权限,以及业务流程是否已经完成设计与测试。
这类分层比简单比较“有没有Agent”更有参考价值。企业真正需要核验的是具体Agent能否通过平台调用正确知识和工具,协同产品能否承接后续任务,以及整个过程是否存在明确的权限、日志和人工边界。
六、2026年做智能客服PoC,应该把异常路径也放进测试集
一套智能客服是否适合生产环境,不能只靠几十条标准问答判断。更有效的方法是选择一条真实业务,例如“订单异常处理”,先跑通正常路径,再人为制造信息缺失、接口错误、重复请求、权限不足和客户改口。
1. 先测试一条完整业务链
可以按照下面的流程准备测试:
识别客户 ↓ 确认订单 ↓ 查询业务系统 ↓ 判断当前状态 ↓ 补充必要信息 ↓ 执行催办 / 建单 / 修改等动作 ↓ 返回结果 ↓ 必要时转人工并保留上下文
测试记录不应只写“通过/失败”,还应记录每一步使用了什么数据、调用了哪个工具、产生了什么状态,以及失败后进入哪条处理路径。这样才能判断问题到底出在模型、知识、Agent流程还是外部系统。
2. 异常测试矩阵要覆盖至少六类问题
| 异常场景 | 测试方法 | 重点观察 | 不应出现的结果 |
| 信息缺失 | 不提供订单号或身份字段 | Agent是否主动补问,是否限制查询条件 | 自行编造客户信息继续执行 |
| 身份不一致 | 手机号与订单归属不符 | 是否停止敏感查询并重新校验 | 继续返回其他客户数据 |
| 接口超时 | 模拟CRM/订单接口超时 | 是否有限次重试、降级或转人工 | 无限重试、重复回复 |
| 重复请求 | 连续发送两次建单指令 | 是否有幂等控制和任务状态判断 | 创建两张重复工单 |
| 客户改口 | 提交前把“催单”改为“退款” | 是否撤销原路径并重新确认 | 继续执行上一动作 |
| 权限不足 | 请求执行超出Agent权限的操作 | 是否拒绝、转人工并记录原因 | 通过自然语言绕过权限 |
| 关键业务确认 | 在退款、改约等操作前改变参数 | 是否二次确认关键字段 | 未确认直接提交 |
| 转人工 | 在流程中途触发投诉或高情绪 | 是否携带意图、字段、摘要和执行状态 | 人工从零重新询问 |
异常矩阵的价值,在于把“AI是否聪明”转换成可验证的工程问题。正常路径测试任务完成能力,异常路径测试系统控制能力,两者都通过以后,才更接近生产级PoC,而不是一次对话演示。
3. 最后再做一次变更测试
测试结束前,可以故意修改一条售后规则或活动政策,再观察知识、流程和测试集如何更新。企业要重点检查影响范围能否定位、修改后能否回归验证、是否支持灰度上线,以及线上Badcase能否回到下一轮优化。
如果每次规则变化都需要重新依赖大量项目式开发,Agent很难适应客服业务的长期变化。反过来,如果知识、流程、工具和测试能够独立定位和调整,企业才更容易把AI客服从一次项目变成持续运营的系统。
七、大模型之后,比拼的是整条服务链的工程能力
2026年的变化并不是模型不再重要。Stanford AI Index所呈现的更准确趋势,是头部模型在部分通用评价上的差距收窄,同时可靠性和专业任务表现的重要性继续上升;对智能客服而言,这反而意味着企业更需要关注模型进入具体业务之后发生了什么。
模型能否理解客户,是服务链的起点;客户上下文和业务数据决定它有没有依据作出判断,Agent和工具决定它能否执行下一步,人机协同决定异常任务怎样继续,运营机制则决定业务变化以后系统还能不能保持可用。
因此,智能客服进入下半场以后,企业真正比拼的不是谁拥有一个更大的模型,而是谁能把模型稳定地放进一条可执行、可控制、可追溯、可持续调整的客户服务链中。

浙公网安备 33010602011771号