企业级Kubernetes高可用集群安装的最佳实践

陌静同学_6289

陌静同学_6289

2026-09-04

796人浏览

原创

用kubeadm搭建3节点堆叠etcd控制平面+云厂商四层clb是最稳妥生产方案;3节点满足raft奇数容错要求,避免脑裂;需--upload-certs、内网地址注册etcd、clb禁ssl卸载、vip直连、时间同步、ssd挂载etcd目录。

企业级kubernetes高可用集群安装的最佳实践

直接说结论:用 kubeadm 搭建 3 节点堆叠 etcd 的控制平面 + 云厂商四层 CLB(如腾讯云 CLB、阿里云 SLB),是当前生产环境最稳妥、可快速验证、运维成本可控的方案。别碰二进制部署,除非你团队有专职 infra 工程师且已踩透所有 TLS 和证书轮换细节。

为什么必须用 3 个控制平面节点,而不是 2 或 4

etcd 集群依赖 Raft 选举,奇数节点才能避免脑裂。2 节点时任意一节点宕机,剩余节点无法达成多数派(quorum = 2),整个集群不可写;4 节点容错仍是 1(需 ≥3 节点在线),但多出 1 个节点纯属冗余,还增加网络开销和证书管理复杂度。

  • kubeadm init 初始化第一个 master 时,必须带 --upload-certs 参数,否则后续 kubeadm join --control-plane 会因缺少证书而失败
  • 所有控制平面节点的 /etc/hosts 必须互相解析主机名(如 k8s-master-1 → 10.0.1.10),kubeadm 内部组件通信(如 apiserver 连 etcd)依赖主机名,不走 VIP
  • etcd 成员加入必须通过内网地址注册(如 https://10.0.1.10:2380),不能用 CLB VIP,否则 etcd peer 通信会超时

CLB 配置的关键参数不是“转发”,而是健康检查

云厂商 CLB 默认 TCP 端口探测(仅连通性)不足以识别 apiserver 实际状态。Kubernetes 的 /healthz 是 HTTP 接口,但 CLB 四层模式不支持 HTTP 探针——所以必须用 TCP+端口探测,并确保 apiserver 进程存活即代表可用。实测中,部分 CLB(如早期腾讯云 CLB)对 6443 端口的 FIN 包响应不稳定,建议在后端服务器上加一层轻量级 TCP 健康代理(如 nc -zv localhost 6443 脚本 + systemd timer),或直接启用 CLB 的“TCP SYN 监听”增强模式。

Kubernetes Network Policy Generator
Kubernetes Network Policy Generator

使用加权评分卡在12项标准上评估和比较隐私解决方案供应商。适用于选择隐私管理软件、比较数据保护方案等场景。

下载
  • CLB 后端权重必须设为相同值(如全为 100),kubeadm 不做客户端连接亲和,轮询即可
  • CLB 监听端口必须为 6443,协议为 TCP,**禁止开启 SSL 卸载**——apiserver 与 kubelet、kubectl 的通信全程需要 mTLS
  • CLB 安全组必须放行源 IP 到后端节点的 6443 端口,且后端节点本地防火墙(如 iptables)也要显式允许该端口入向流量

kubeadm init 的 endpoint 必须指向 CLB VIP,但不能是域名

命令里写的 --control-plane-endpoint "10.0.1.100:6443"(VIP)会被写死进所有生成的 kubeconfig 和静态 Pod 清单。如果填域名(如 api.cluster.local),后续节点扩容或 DNS 故障时,apiserver 启动会卡在证书 SAN 校验失败——因为证书是用 VIP 签发的,不是域名。

  • 初始化前务必确认所有节点时间同步(chrony 或 systemd-timesyncd),误差 >1 秒会导致 TLS 握手失败,错误信息为 x509: certificate has expired or is not yet valid
  • kubeadm init 输出的 join 命令含 --certificate-key,该 key 2 小时过期,必须在时效内执行完其余 master 节点加入,否则要重新 kubeadm init --upload-certs
  • 工作节点 join 时**不能加 --control-plane 参数**,否则会尝试启动 etcd 和 controller-manager,导致端口冲突和资源争抢

最容易被忽略的是 etcd 数据目录权限和磁盘 IO:所有控制平面节点的 /var/lib/etcd 必须挂载在 SSD 上,且属主为 etcd:etcd(非 root)。曾有案例因误用机械盘 + 默认 IOPS,etcd 写入延迟飙升至 2s 以上,触发 apiserver 的 context deadline exceeded 错误,整个集群 API 响应停滞。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
Golang云原生微服务Kubernetes_Golang怎么集成Kubernetes开发云原生服务
Golang云原生微服务Kubernetes_Golang怎么集成Kubernetes开发云原生服务

Golang云原生微服务Kubernetes (K8s) 是指 使用 Go 语言(Golang)编写的云原生微服务,并利用 Kubernetes 平台进行容器化部署、自动化管理、弹性伸缩和高效编排的一整套现代应用架构方案。

2025.12.22

116

5

Go云原生应用与Kubernetes服务部署实战
Go云原生应用与Kubernetes服务部署实战

本专题围绕 Go 语言在云原生环境中的应用展开,讲解容器化部署、Kubernetes 编排、服务发现、健康检查与弹性扩缩容机制。通过真实云端案例,帮助开发者构建可扩展的云原生微服务架构。

2026.06.29

168

19

LLVM自定义Pass怎么写
LLVM自定义Pass怎么写

本专题聚焦LLVM自定义Pass开发,整理Pass类结构、run()方法、PreservedAnalyses、CMake构建、插件注册、-load-pass-plugin加载和测试用例编写流程。

2026.09.30

120

10

LLVM RISC-V参数配置教程
LLVM RISC-V参数配置教程

本专题介绍LLVM对RISC-V基础ISA和扩展的支持方式,涵盖RV32、RV64、标准扩展、实验性扩展、厂商扩展、-menable-experimental-extensions和版本差异。

2026.09.30

100

14

LLVM IR中间表示入门指南
LLVM IR中间表示入门指南

本专题整理LLVM IR的核心概念,包括中间表示作用、模块结构、函数、基本块、SSA形式、类型系统和常见语法,帮助新手理解LLVM编译流程中的关键层。

2026.09.30

80

12

PDF转图片方法
PDF转图片方法

需要把 PDF 页面用于上传、预览、分享或图片归档时,PDF 转图片方法专题整理 JPG/PNG 格式选择、逐页导出、清晰度设置、批量下载和结果检查等流程,帮助用户稳定完成 PDF 图片化处理。

2026.09.30

60

26

PixTV AI视频生成与无限画布创作
PixTV AI视频生成与无限画布创作

PixTV专题整理AI视频与视觉内容创作相关功能使用教程,涵盖AI生图、视频生成、无限画布、多模型创作、素材管理、声音音乐及视频剪辑等功能,帮助用户快速掌握PixTV从创意到成片的完整制作方法。

2026.09.29

80

15

Buffalo框架数据库开发全教程
Buffalo框架数据库开发全教程

本专题围绕Buffalo框架数据库开发,讲解database.yml多环境配置、soda与fizz迁移生成回滚、模型结构体标签、增删改查与条件查询、一对多与多对多关联、数据校验、回调钩子、事务处理及原生SQL执行能力。

2026.09.23

280

15

Buffalo框架路由与请求处理实操指南
Buffalo框架路由与请求处理实操指南

本专题讲解Buffalo框架路由与请求处理机制,涵盖路由注册与分组、资源路由、Handler编写规范、Context上下文方法、参数绑定、中间件编写挂载、Session与Cookie读写、Flash消息及错误页面定制方法。

2026.09.23

180

15

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Kubernetes官方教程手册
Kubernetes官方教程手册

共0课时 | 0人学习

Kubernetes官方中文文档
Kubernetes官方中文文档

共0课时 | 0人学习