跨网段安装Kubernetes集群的注意事项与网络配置

落雪酱_6894

落雪酱_6894

2026-08-19

1036人浏览

原创

跨网段部署kubernetes集群的核心障碍是kubelet与api server双向通信、etcd成员间心跳及网络插件跨子网能力;需显式配置node-ip、etcd advertise地址、启用vxlan/ip-in-ip等跨网模式,并统一ntp与dns。

立即进入“夸克ai手把手教你,操作像呼吸一样简单!☜☜☜☜☜点击进入”;

跨网段安装Kubernetes集群的注意事项与网络配置 - php中文网

跨网段部署 Kubernetes 集群不是“多配几个 IP 就行”的事,核心障碍是 kubelet 与 API Server 的双向通信、etcd 成员间心跳、以及 Pod 网络插件(如 Calico/Flannel)的跨子网隧道能力。若未针对性处理,节点会卡在 NotReady,kubeadm join 直接超时失败。

跨网段下 kubelet 无法注册到 API Server 的真实原因

常见现象:kubectl get nodes 显示节点状态为 NotReady 或根本不出现在列表中;kubelet 日志反复报 connection refused 或 timeout。

  • kubelet 默认用本机默认路由接口的 IP 向 API Server 发起连接,而跨网段时该 IP 往往不可达(比如节点在 192.168.10.0/24,API Server 在 192.168.20.0/24,但节点默认网关不转发)
  • kubeadm init 生成的证书只绑定 --apiserver-advertise-address 指定的 IP 和 localhost,若节点尝试用其他地址访问,会因 TLS SNI 不匹配被拒绝
  • 节点上的 kubelet 若未显式配置 --node-ip,它上报给 API Server 的地址可能为内网不可路由地址(如 Docker 网桥 172.17.0.1),导致控制面无法反向拨号

解决方法:所有节点启动 kubelet 前,必须指定可被集群其他节点路由的真实 IP:

sudo systemctl edit kubelet
# 加入:
[Service]
Environment="KUBELET_EXTRA_ARGS=--node-ip=192.168.20.11"

然后重载并重启:systemctl daemon-reload && systemctl restart kubelet

Kubernetes Network Policy Generator
Kubernetes Network Policy Generator

使用加权评分卡在12项标准上评估和比较隐私解决方案供应商。适用于选择隐私管理软件、比较数据保护方案等场景。

下载

etcd 跨网段通信必须显式配置 advertise-client-urls 和 initial-advertise-peer-urls

当使用 kubeadm 外部 etcd 模式,或手动部署 etcd 集群时,跨网段最常踩的坑是 peer URL 写成 http://localhost:2380 或内网地址,导致成员无法握手。

  • initial-advertise-peer-urls 必须设为节点对外可访问的 IP+端口,且该地址需被其他 etcd 节点能直接 telnet 通
  • advertise-client-urls 是 kube-apiserver 连接 etcd 所用地址,也必须跨网段可达(不能写 127.0.0.1)
  • 所有 etcd 成员的 --initial-cluster 参数中列出的 peer 地址,必须与各自 initial-advertise-peer-urls 完全一致(协议、IP、端口)

示例(etcd-2 节点在 192.168.20.12):

etcd --name=etcd-2 \
  --initial-advertise-peer-urls=http://192.168.20.12:2380 \
  --listen-peer-urls=http://0.0.0.0:2380 \
  --advertise-client-urls=http://192.168.20.12:2379 \
  --listen-client-urls=http://0.0.0.0:2379 \
  --initial-cluster="etcd-1=http://192.168.10.11:2380,etcd-2=http://192.168.20.12:2380"

网络插件必须启用跨子网模式,且禁用默认的 VXLAN 端口冲突

Flannel 默认用 VXLAN 封装,但跨网段时若中间网络设备(如防火墙、路由器)未放行 UDP 8472 端口,数据包会被静默丢弃;Calico 默认用 BGP,跨网段需改用 bird + ip-in-ip 或直接启用 vxlan 后端。

  • Flannel:必须在 ConfigMap 中显式设置 "Backend": {"Type": "vxlan", "Port": 8472},并确认所有节点防火墙开放该端口:iptables -I INPUT -p udp --dport 8472 -j ACCEPT
  • Calico:修改 calico-config ConfigMap,将 typha_service_name 设为空,并在 calico-node DaemonSet 的环境变量中添加:CALICO_NETWORKING_BACKEND: vxlan 和 IP_AUTODETECTION_METHOD: "interface=eth1"(指定实际跨网段网卡)
  • 无论哪种插件,都必须确保 podCIDR 与各节点所在物理子网不重叠,否则路由混乱(例如节点在 192.168.10.0/24,就别用 192.168.10.0/16 作 podCIDR)

时间同步和 DNS 解析在跨网段场景下更容易失效

看似基础,但在跨网段时更致命:不同网段可能使用不同 NTP 服务器,chrony 服务若未配置为强制对齐(makestep),几秒偏差就会导致 etcd leader 选举失败、证书校验失败;DNS 若依赖本地解析器(如 127.0.0.53),跨网段节点无法复用同一 DNS 缓存,kubelet 拉镜像或调用 webhook 时频繁超时。

  • 所有节点统一配置公网可信 NTP 源(如 ntp.aliyun.com),并在 /etc/chrony.conf 中加入:makestep 1.0 -1(允许 chronyd 在系统启动时立即纠正 >1 秒的偏移)
  • DNS 必须指向一个所有网段均可访问的权威服务器(如 114.114.114.114),禁用 systemd-resolved 的本地 stub listener(注释掉 ResolveConf 行或设为 off)
  • 验证方式:chronyc tracking 查看 offset 是否nslookup kubernetes.default.svc.cluster.local 10.96.0.10(clusterDNS)确认解析正常

跨网段的本质不是“连通性”,而是“可寻址性”——每个组件暴露的地址、监听的地址、上报的地址,三者必须在全局网络视角下全部可达。漏掉任意一环,集群就停在初始化阶段,且错误日志往往藏在 kubelet 或 etcd 的 debug 级别里,不会直接告诉你缺了哪个 IP。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
Golang云原生微服务Kubernetes_Golang怎么集成Kubernetes开发云原生服务
Golang云原生微服务Kubernetes_Golang怎么集成Kubernetes开发云原生服务

Golang云原生微服务Kubernetes (K8s) 是指 使用 Go 语言(Golang)编写的云原生微服务,并利用 Kubernetes 平台进行容器化部署、自动化管理、弹性伸缩和高效编排的一整套现代应用架构方案。

2025.12.22

116

5

Go云原生应用与Kubernetes服务部署实战
Go云原生应用与Kubernetes服务部署实战

本专题围绕 Go 语言在云原生环境中的应用展开,讲解容器化部署、Kubernetes 编排、服务发现、健康检查与弹性扩缩容机制。通过真实云端案例,帮助开发者构建可扩展的云原生微服务架构。

2026.06.29

188

19

Revel框架模板渲染与表单验证
Revel框架模板渲染与表单验证

本专题围绕Revel框架视图层开发,介绍模板语法、变量输出、布局复用、表单提交、参数绑定与验证规则,帮助开发者完成安全规范的页面交互。

2026.10.16

0

15

Revel框架MVC路由与控制器
Revel框架MVC路由与控制器

本专题聚焦Revel框架MVC核心机制,讲解路由定义、控制器Action、参数绑定、请求响应和反向路由,并结合常见场景梳理接口请求处理流程。

2026.10.16

0

15

Revel框架入门与安装配置
Revel框架入门与安装配置

本专题从Revel框架环境搭建讲起,系统介绍命令行工具安装、项目创建、目录结构、配置文件及热代码重载,帮助开发者快速完成首个Go Web应用。

2026.10.16

0

15

Linux 新手先学哪些命令
Linux 新手先学哪些命令

Linux新手命令专题汇集终端基础、文件目录操作、文本查看、软件安装和权限管理等入门文章,帮助按实际任务练习常用命令并建立命令行操作习惯。

2026.10.15

0

20

MySQL 忘记密码怎么办
MySQL 忘记密码怎么办

MySQL忘记密码专题汇集不同版本与系统下的root密码重置方法,覆盖MySQL 5.7、8.0、Mac、Linux及本地集成环境,并提示恢复权限与重新登录的检查步骤。

2026.10.15

0

18

Vue.js 中 ref 和 reactive 的区别
Vue.js 中 ref 和 reactive 的区别

Vue.js中ref和reactive的区别专题汇集两种响应式API的定义、访问方式、对象解构、侦听与性能取舍等文章,帮助结合实际状态类型选择合适写法。

2026.10.15

0

20

VS Code 怎么配置开发环境
VS Code 怎么配置开发环境

VS Code开发环境专题汇集编辑器安装、语言扩展、编译器、解释器、终端和调试配置文章,覆盖Java、Python、C++和PHP等常见语言的入门设置。

2026.10.15

0

18

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Kubernetes官方教程手册
Kubernetes官方教程手册

共0课时 | 0人学习

Kubernetes官方中文文档
Kubernetes官方中文文档

共0课时 | 0人学习