Networking Mesh

Mon, 01 Jan 0001 00:00:00 +0000

Kilo создает WireGuard mesh между locations кластера. При работе с Cilium он использует IPIP encapsulation, маршрутизируемую через VxLAN overlay Cilium, чтобы traffic между locations работал даже тогда, когда cloud network блокирует raw IPIP packets (protocol 4).

Выберите networking variant cilium-kilo

Во время настройки platform выберите networking variant cilium-kilo. Он разворачивает Cilium и Kilo как интегрированный stack с нужной конфигурацией.

Как это работает

Kilo работает в режиме --local=false и не управляет routes внутри location (это делает Cilium)
Kilo создает WireGuard tunnel (kilo0) между location leaders
Non-leader nodes в каждой location достигают remote locations через IPIP encapsulation до своего location leader, маршрутизируемую через VxLAN overlay Cilium
Leader decapsulates IPIP и пересылает traffic через WireGuard tunnel
Опция Cilium enable-ipip-termination создает интерфейс cilium_tunl (переименованный kernel tunl0), который Kilo использует для IPIP TX/RX; без него kernel обнаруживает TX recursion на tunnel device

Talos machine config для cloud nodes

Cloud worker nodes должны содержать Kilo annotations в Talos machine config:

Local Cloud Controller Manager

Mon, 01 Jan 0001 00:00:00 +0000

Package local-ccm предоставляет легкий cloud controller manager для self-managed clusters. Он отвечает за node IP detection и node lifecycle без необходимости во внешнем cloud provider.

Что он делает

External IP detection: определяет external IP каждого узла через ip route get (target по умолчанию: 8.8.8.8)
Node initialization: удаляет taint node.cloudprovider.kubernetes.io/uninitialized, чтобы pods могли планироваться
Node lifecycle controller (опционально): мониторит NotReady nodes через ICMP ping и удаляет их после настраиваемого timeout

Установка

cozypkg add cozystack.local-ccm

Talos machine config

На всех узлах кластера, включая control plane, должен быть задан cloud-provider: external, чтобы kubelet передавал node initialization в cloud controller manager:

Multi-Location кластеры on Cozystack