Kubernetes网络核心技术与实战 BGP路由+FlannelCalicoCilium网络模式+IPAM及Multus多网卡

这门课解决的是哪一层问题

Kubernetes 的网络是很多人从「会用」到「能排障」之间最大的一道坎。Pod 之间怎么通、Service 的 ClusterIP 怎么被翻译成后端、跨节点流量走 overlay 还是走宿主路由，这些问题在默认安装下都被 CNI 插件藏起来了，一旦集群规模上去、或者要接外部网络，就全部暴露出来。这份资料的主题落在 K8s 网络的数据面和控制面上：Flannel、Calico、Cilium 三种主流 CNI 的实现差异，Calico 的 VxLAN 与 BGP Full Mesh 两种模式，IPAM 地址分配，以及 Multus 多网卡场景。它不是一份「装完能用」的入门材料，而是一份让你能看懂抓包结果、能改配置、能解释为什么这么配的对照资料。

技术栈与知识前置

内容涉及的技术栈比较集中：CNI 规范、etcd 或 Kubernetes API 作为数据存储、Linux 网络栈（veth pair、网桥、路由表、iptables/IPVS、eBPF）、BGP 协议基础。Calico 部分需要理解 BGP 的 AS 号、对等体、路由宣告；Cilium 部分绕不开 eBPF 的挂载点和身份模型；Multus 则要求对 CNI 配置文件的链式调用有概念。如果此前只用过 kubeadm 默认的 Flannel 或 Calico，没有手动看过节点上的路由和网卡，建议先在实验环境把 `ip route`、`ip link`、`iptables-save` 的输出读一遍，再来对照，吸收效率会高很多。

内容结构与可复用模块

资料按 CNI 实现分块推进，节奏上是先讲清一种模式的转发路径，再动手改配置观察变化。Flannel 的 VxLAN 与 host-gw 对比，是理解 overlay 与 underlay 取舍的最小样本；Calico 单独拆出 VxLAN 模式和 BGP Full Mesh 模式，前者便于和 Flannel 横向对照，后者把节点当成 BGP 路由器，跨节点流量直接走宿主网络、没有封装开销，这部分的路由宣告和反射器配置是可以直接搬到生产网络设计里的；Cilium 则代表 eBPF 路线，绕开 iptables 链式匹配的性能损耗，身份化策略是它区别于前两者的关键。IPAM 模块讲的是地址块怎么切、怎么避免跨节点冲突，这在多集群或与既有 IDC 网段共存时是高频踩坑点。Multus 部分处理的是 Pod 挂多张网卡的需求，比如一张走管理网、一张接 SR-IOV 或 DPDK 数据面，典型出现在 NFV、边缘计算和需要独立数据通道的场景。

怎么用这份资料

比较有效的用法是把它当成实验手册而不是视频课。每进入一种 CNI 模式，先在自建的多节点集群上部署对应配置，然后用 tcpdump 抓跨节点包，看是封装在 UDP 里还是裸 IP，再回来看讲解，对照差异点。Calico BGP 部分可以配合 `calicoctl node status` 看对等体建立情况，改 AS 号和反射器配置，观察路由表变化。Cilium 可以开 Hubble 观察流，验证策略是否生效。IPAM 和 Multus 部分建议单独起一个测试命名空间，用自定义的 NetworkAttachmentDefinition 验证多网卡 Pod 的连通性，不要直接在业务集群里试。所有配置改完记得记录变更前后的路由、iptables 和网卡状态，这些记录本身就是以后排障的基线。

适合谁

已经能独立部署 K8s 集群、理解 Pod/Service/Deployment 基本模型，但遇到网络问题只能重启 CNI 或查文档的工程师，从中收益最直接。做网络规划、需要决定集群用哪种 CNI、以及要在同一集群里叠加多网络的场景，也能找到对应的决策依据。如果还没搭过一次多节点集群，建议先补上这一课再回来。