要让linux环境真正支撑百万级设备接入，必须构建可扩展、高可用、内核友好的集群架构，核心是接入与业务分离、连接与消息解耦、节点间状态协同；需选用emqx等支持集群的broker，分层部署边缘接入层、核心路由层和数据管道层，并完成linux内核调优、集群会话持久化、主题路由一致性及前端负载均衡配置，同时强化安全认证与可观测性闭环。
要让 Linux 环境真正支撑百万级设备接入，单靠一个 Mosquitto 实例远远不够——它在默认配置下连 10 万连接都难稳定。关键不是“装上 MQTT”，而是构建可扩展、高可用、内核友好的集群架构。核心思路是：接入与业务分离、连接与消息解耦、节点间状态协同。
一、选型与分层：别从 Mosquitto 单机起步
Mosquitto 轻量易用，但原生不支持集群，无法共享会话或跨节点路由消息。百万级场景必须选用支持集群能力的 Broker：
- EMQX（推荐）：企业版/开源版均支持多节点互联，内置 gRPC 和 mria 元数据同步，单集群实测支持 120 万+ 连接；
- VerneMQ：基于 Erlang/OTP，天然适合高并发长连接，支持 DHT 路由和插件化 ACL；
- HiveMQ：商业方案，强一致性保障好，适合金融、能源等严苛场景。
同时采用分层架构，避免 Broker 承担业务逻辑：
- 边缘接入层（EMQX Edge）：部署在区域网关，做协议转换、本地过滤、断网缓存；
- 核心路由层（EMQX Cluster）：负责全局订阅同步、跨节点消息投递、QoS 2 流程保障；
- 数据管道层（Kafka/Pulsar）：Broker 只转发，不落盘；消息经 Bridge 插件写入流平台，交由 Flink 做实时清洗与路由。
二、Linux 内核调优：百万连接的前提不是代码，是系统
即使用了 EMQX，若内核参数未调优，连接数会在 30 万左右突然卡死或报错 “too many open files”。必须修改以下关键项：
- 文件描述符限制：修改 /etc/security/limits.conf，为 emqx 用户设 soft/hard nofile 为 1048576；
-
网络参数：在 /etc/sysctl.conf 中追加：
fs.file-max = 1000000
net.core.somaxconn = 65535
net.ipv4.tcp_max_tw_buckets = 2000000
net.ipv4.ip_local_port_range = 1024 65535
net.ipv4.tcp_fin_timeout = 30 - 内存与缓冲区：关闭透明大页（echo never > /sys/kernel/mm/transparent_hugepage/enabled），避免 EMQX GC 频繁抖动。
三、集群部署要点：会话、路由、负载一个都不能少
EMQX 集群不是简单起多个节点再互相 ping 通就行，需确保三件事落地：
- 会话持久化：启用 mria 或对接 Redis，保证设备重连到任意节点时能恢复订阅和未确认 QoS 1/2 消息；
- 主题路由一致性：所有节点需同步 topic tree 和 subscription table，EMQX 默认通过内置 gossip 协议完成，但需检查 cluster.discovery 配置是否使用 static 或 dns 方式正确发现节点；
- 前端负载均衡：用 Nginx（支持 MQTT over TCP 的 stream 模块）或 HAProxy 做四层分发，开启 least_conn 策略，并配置健康检查（如 TCP 连通性 + EMQX 的 /status HTTP 接口）。
四、安全与可观测性：生产环境不能只看连得上
百万设备意味着百万攻击面，也意味着故障定位必须秒级响应：
- 设备身份认证：禁用 allow_anonymous，强制使用 username/password 或 JWT（EMQX 支持通过 HTTP Auth 服务校验）；证书方式更优，但需配套 CA 管理流程；
-
ACL 细粒度控制：按设备 ID 或 group ID 动态生成权限规则，例如：
publish: sensor/${clientid}/data
subscribe: cmd/${clientid}/#； -
监控指标闭环：通过 EMQX 自带 Prometheus Exporter 暴露指标，重点关注：
mqtt_connections_total（总连接）、
mqtt_messages_received_total{qos="1"}（QoS1 消息量）、
emqx_cluster_node_status（节点心跳）； - 日志分级采集：ERROR 级别日志推送到 ELK，DEBUG 级别本地保留 7 天，避免磁盘打满影响连接。
