archlinux k8s

单节点 archlinux k8s 4G 内存 20G 硬盘

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
# disable swap
swapon --show
systemctl list-units --type=swap
sudo swapoff -a
sudo systemctl mask dev-zram0.swap


sudo pacman -Syu
sudo pacman -S kubeadm kubelet kubectl containerd
# 如果提示 : iptables-nft-1:1.8.11-2 and iptables-1:1.8.11-2 are in conflict. Remove iptables? [y/N]
# 删除 iptables, 
# Kubernetes，推荐使用 iptables-nft，因为 Kubernetes 自 v1.13 起支持 iptables 的 nftables 后端（iptables-nft），而且 nftables 是 Linux 内核中更现代的防火墙实现，逐渐取代传统 iptables。此外，Arch Linux 的默认配置倾向于 nftables。

# 在安装 kubelet 的时候 br_netfilter 已经设置 好了, 这里可以删掉了
cat <<EOF | sudo tee /etc/modules-load.d/k8s.conf
overlay
EOF

sudo modprobe overlay
sudo modprobe br_netfilter

# 安装 kubeadm 的时候以下这三个变量会自动设置, 这里可以删掉了
cat <<EOF | sudo tee /etc/sysctl.d/k8s.conf
net.bridge.bridge-nf-call-iptables  = 1
net.bridge.bridge-nf-call-ip6tables = 1
net.ipv4.ip_forward                 = 1
EOF

sudo sysctl --system

# containerd config
sudo mkdir /etc/containerd
containerd config default | sudo tee /etc/containerd/config.toml
vim /etc/containerd/config.toml
# 打开文件,找到 `[plugins.'io.containerd.cri.v1.runtime'.containerd.runtimes.runc.options]`
# 在下面加 一行 SystemdCgroup = true

# 检查  containerd的 状态 
sudo systemctl status containerd
# 重启 containerd
sudo systemctl restart containerd
sudo systemctl enable --now containerd

# 一个集群里执行一次就可以了,其它的 control plance, worker node 只需要执行 kubeadm join
sudo kubeadm init --pod-network-cidr=10.244.0.0/16

kubectl get nodes

kubectl apply -f https://raw.githubusercontent.com/projectcalico/calico/v3.26.0/manifests/calico.yaml
kubectl get pods -n kube-system

kubeadm reset

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
# kubeadm reset 会清理containerd里面运行的容器
sudo kubeadm reset
sudo systemctl status containerd
sudo systemctl status kubelet.service

# ---------
sudo systemctl stop containerd
sudo systemctl stop kubelet.service
# kubeadm init 理论 上会自动 启动 kubelet
sudo systemctl enable --now kubelet.service
sudo systemctl start kubelet.service
sudo systemctl status kubelet.service

sudo systemctl restart containerd
sudo systemctl start kubelet.service
systemctl enable kubelet.service

sudo systemctl status containerd
sudo systemctl status kubelet.service

# 如果 之前执行过 init, 先用 kubeadm reset 清理
sudo kubeadm reset
sudo crictl ps -a
sudo systemctl stop kubelet
sudo systemctl stop containerd

在 k8s-67 上生成加入命令

1
2
3
sudo kubeadm init phase upload-certs --upload-certs
sudo kubeadm token create --print-join-command --certificate-key <certificate-key>
#在 k8s-38 上执行上面生成的 join 命令

Kubernetes 和 cgroup 的关系

cgroup（Control Groups）是 Linux 内核提供的功能，用于限制和管理进程的资源（如 CPU、内存、IO 等）。Kubernetes 使用 cgroup 来为 Pod 和容器分配资源，确保隔离和资源限制。

containerd 的默认行为

containerd 默认使用 cgroupfs 作为其 cgroup 驱动，而不是 systemd。 cgroupfs 是直接操作 Linux 内核的 cgroup 文件系统，而 systemd 通过 systemd 单元来管理 cgroup 层级。Kubernetes 更倾向于使用 systemd，因为它与现代 Linux 发行版的初始化系统集成更好，且提供更细粒度的控制。如果 containerd 使用 cgroupfs 而 Kubernetes 使用 systemd（默认情况），就会出现 cgroup driver mismatch 错误，导致 kubelet（Kubernetes 节点代理）无法与 containerd 正确通信。

其它命令

1
2
3
4
kubeadm config images pull
kubeadm version
kubectl version --client
telnet 192.168.50.67 6443

Contents

archlinux k8s

kubeadm reset

在 k8s-67 上生成加入命令