WebSocket仅提供通信通道,高并发依赖后端连接分离、精准坐席分配(技能/负载/VIP加权)与消息路由(会话ID直连+分布式锁保障重连一致性)。

WebSocket 本身不解决坐席分配和消息路由问题,它只是提供双向、低延迟的通信通道。真正决定客服系统能否扛住高并发的,是后端服务如何组织连接、识别用户意图、分发会话、避免单点瓶颈。
WebSocket 连接管理不能只靠单个服务实例
把所有 WebSocket 连接都堆在一个进程或机器上,很快就会遇到文件描述符耗尽、CPU 调度瓶颈、内存暴涨等问题。真实场景中必须做连接层与业务层分离。
- 用反向代理(如 Nginx)做连接接入,启用
proxy_http_version 1.1和Upgrade头透传,但不要让它做会话保持——这会让负载不均 - 每个 WebSocket 服务节点只负责维持连接、收发原始帧,不做坐席匹配;连接建立后立即通过内部消息队列(如 Kafka / Redis Stream)上报用户元数据(如
user_id、intent、region) - 连接 ID 必须全局唯一且可跨节点解析,推荐用
node_id:conn_id格式,避免后续路由时查表
坐席分配不是“谁空闲就给谁”,得看状态+权重+上下文
简单轮询或随机分配在客服场景下容易导致体验割裂:刚聊一半的用户被切到新坐席、技术问题分给新手、VIP 用户等太久。分配逻辑必须可插拔、可灰度。
开箱即用的技能链路由引擎。13 条预定义链覆盖搜索、开发、审查、MLOps、法律、创意等场景,三层路由架构(触发词→SAD反馈→DAG编排),recall@10=96.97%。配置驱动(chains.yaml),零代码扩展。pip install skill-weave-chains 一键安装。
- 坐席状态不能只存
is_available,至少要包括:current_load(当前会话数)、last_active_time、skill_tags(如["payment", "ios"])、vip_priority - 分配函数建议封装为独立微服务,输入是用户请求中的
intent和metadata,输出是agent_id;支持按规则链执行:先筛技能匹配 → 再按负载加权 → 最后 fallback 到最近活跃坐席 - 避免在分配时实时查 DB,用 Redis Sorted Set 缓存坐席实时负载,ZADD 的 score 用
current_load * 1000 + timestamp实现轻量排序
消息路由必须绕过广播,走精准寻址
很多实现一上来就用 broadcast() 或 send_to_all(),结果用户发一条消息,系统要遍历几千个连接判断权限,CPU 直接拉满。消息从来不是“发给谁”,而是“从哪来、到哪去、要不要改写”。
- 用户消息到达网关后,先解析出
session_id,查 Redis 获取该会话绑定的agent_id和当前连接所在的ws_node - 消息不经过业务服务中转,由网关直连目标节点(可用 gRPC 或 Redis Pub/Sub),目标节点再根据本地连接映射表投递到具体
WebSocket连接 - 坐席主动发送的消息,需携带
session_id和agent_id,网关据此反查用户连接位置;不要依赖客户端传user_id,防篡改
最易被忽略的是会话状态的一致性:用户断线重连时,session_id 不变,但连接已换节点。此时若坐席还在原节点发消息,就会丢。必须用分布式锁(如 Redis Redlock)保护会话归属变更过程,且锁粒度控制在 session_id 级别,不能粗暴锁整个坐席。










