网站速度测速,网站开发流程是什么,展板设计用什么软件,短视频制作app总结#xff1a;整理不易#xff0c;如果对你有帮助#xff0c;可否点赞关注一下#xff1f;
更多详细内容请参考#xff1a;企业级K8s集群运维实战 1、在当前实验环境中安装K8S1.25.14版本#xff0c;出现了一个问题#xff0c;就是在pod中访问百度网站#xff0c;大…总结整理不易如果对你有帮助可否点赞关注一下
更多详细内容请参考企业级K8s集群运维实战 1、在当前实验环境中安装K8S1.25.14版本出现了一个问题就是在pod中访问百度网站大概时间有10s多这个时间太长了尝试了各种办法都解决不了后面尝试安装了了1.26.15版本就没这个问题很神奇希望这个问题能帮到一些朋友如果你也有遇到这个问题并有解决方案可以告诉我本人不胜感激 2、此外在安装K8S1.26.15版本后安装完calico v3.26.4后测试dns无法ping通百度将control-plane节点和worker节点主机进行重启就可以ping通这个问题困扰了我很久虽然重启解决了但是不明白为什么如果你能知道并告知我本人将非常感谢 一、架构图 如下图所示 二、环境信息 1、资源下载 2、部署规划 主机名 K8S版本 系统版本 CPU架构 内核版本I IP地址 备注 k8s-master-42 1.26.15 Kylin Linux Advanced Server V10 aarch64 4.19.90-17.5.ky10.aarch64 172.18.1.42 control-plane节点 k8s-worker-67 1.26.15 Kylin Linux Advanced Server V10 aarch64 4.19.90-17.5.ky10.aarch64 172.18.1.67 worker节点 k8s-worker-97 1.26.15 Kylin Linux Advanced Server V10 aarch64 4.19.90-17.5.ky10.aarch64 172.18.1.97 worker节点 3、集群网段 宿主机 集群Pod网段 集群Service网段 172.18.1.0/24 10.48.0.0/16 10.96.0.0/16 4、基础软件版本 软件 版本 安装方式 kubeadm 1.26.15 二进制 kubectl 1.26.15 二进制 kubelet 1.26.15 二进制 cri-containerd-cni 1.7.2 二进制 ipvsadm 1.29 yum ipset 7.3 yum conntrack 1.4.4 yum socat 1.7.3.2 yum ebtables 2.0.10 yum sysstat 12.1.6 yum 说明 1、cri-containerd-cni包包含containerd、runc、cni打工插件。安装containerd,需要同时安装runc及cni网络插件。 containerd不能直接操作容器需要通过runc来运行容器。默认Containerd管理的容器仅有lo网络(无法访问容器之外的网络) 如果需要访问容器之外的网络则需要安装CNI网络插件。CNI(Container Network Interface) 是一套容器网络接口规范用于为容器分配ip地址通过CNI插件Containerd管理的容器可以访问容器之外的网络。 2、ipvsadm这是一个用于管理Linux内核中的IP虚拟服务器IPVS的工具。它允许您配置和管理负载均衡、网络地址转换NAT和透明代理等功能。 3、ipset这是一个用于管理Linux内核中的IP集合的工具。它允许您创建和管理IP地址、IP地址范围和端口号的集合以便在防火墙规则中使用。 4、conntrack这是一个用于连接跟踪的内核模块和工具。它允许您跟踪网络连接的状态和信息如源IP地址、目标IP地址、端口号等。 5、socat网络工具这是一个用于在Linux系统中建立各种类型网络连接的工具。在Kubernetes网络中socat可以 用于创建端口转发、代理和转发等网络连接。 6、ebtables以太网桥规则管理工具这是一个用于在Linux系统中管理以太网桥规则的工具。在Kubernetes中ebtables 用于在网络分区中实现容器之间的隔离和通信。 7、sysstat这是一个用于系统性能监控和报告的工具集。它包括一些实用程序如sar、iostat和mpstat用于收集和显示系统资源使用情况的统计信息。 5、K8S镜像 K8S镜像 calico镜像 registry.k8s.io/kube-apiserver:v1.26.15 docker.io/calico/cni:v3.26.4 registry.k8s.io/kube-controller-manager:v1.26.15 docker.io/calico/kube-controllers:v3.26.4 registry.k8s.io/kube-scheduler:v1.26.15 docker.io/calico/node:v3.26.4 registry.k8s.io/kube-proxy:v1.26.15 - registry.k8s.io/pause:3.9 - registry.k8s.io/coredns/coredns:v1.9.3 - registry.k8s.io/etcd:3.5.10-0 - 6、k8s版本与calico版本对应关系 calico版本 calico yml文件下载 支持K8S版本 v3.24.x calico.yml v1.22、v1.23、v1.24、v1.25 v3.25.x calico.yml v1.23、v1.24、v1.25、v1.26、v1.27、v1.28 v3.26.x calico.yml v1.24、v1.25、v1.26、v1.27、v1.28 v3.27.x calico.yml v1.27、v1.28、v1.29 三、安装和配置先决条件
3.1、设置主机名 说明分别在对应的节点IP上设置主机名。
[rootecs-90c2-0001 ~]# hostnamectl set-hostname k8s-master-42 bash
[rootecs-90c2-0002 ~]# hostnamectl set-hostname k8s-worker-67 bash
[rootecs-90c2-0003 ~]# hostnamectl set-hostname k8s-worker-97 bash3.2、配置主机hosts 说明以下操作无论是control-plane节点和worker节点均需要执行。
[rootk8s-master-42 ~]# cat /etc/hosts EOF
172.18.1.42 k8s-master-42
172.18.1.67 k8s-worker-67
172.18.1.97 k8s-worker-97
EOF3.3、关闭防火墙 说明以下操作无论是control-plane节点和worker节点均需要执行。
[rootk8s-master-42 ~]# systemctl stop firewalld systemctl disable firewalld3.4、设置ulimit 说明以下操作无论是control-plane节点和worker节点均需要执行。 1、检查ulimit
[rootk8s-master-42 ~]# ulimit -SHn 65535
[rootk8s-master-42 ~]# ulimit -a2、设置ulimit, 如果已经设置则忽略如果未设置请按照如下要求设置。
[rootk8s-master-42 ~]# vim /etc/security/limits.conf
root soft nofile 65535
root hard nofile 65535
* soft nofile 65535
* hard nofile 65535
root soft nproc 65535
root hard nproc 65535
* soft nproc 65535
* hard nproc 655353.5、关闭selinux 说明以下操作无论是control-plane节点和worker节点均需要执行。
# 1、临时关闭
[rootk8s-master-42 ~]# setenforce 0
# 2、永久关闭需重启服务器
[rootk8s-master-42 ~]# sed -i s#SELINUXenforcing#SELINUXdisabled#g /etc/selinux/config
[rootk8s-master-42 ~]# sed -i s#SELINUXenforcing#SELINUXdisabled#g /etc/sysconfig/selinux3.6、关闭swap分区 说明以下操作无论是control-plane节点和worker节点均需要执行。
[rootk8s-master-42 ~]# swapoff -a sed -i s/.*swap.*/#/ /etc/fstab3.7、时间时区同步 说明以下操作无论是control-plane节点和worker节点均需要执行。 1、设置时区为Asia/Shanghai如果已经是则请忽略
# 以 root 用户运行以下命令可以修改当前时区如修改为上海
[rootk8s-master-42 ~]# timedatectl set-timezone Asia/Shanghai
# 显示当前时区
[rootk8s-master-42 ~]# timedatectl show
TimezoneAsia/Shanghai2、设置时间与北京时间同步如果已经是则请忽略 3.8、修改内核参数 说明以下操作无论是control-plane节点和worker节点均需要执行。 1、创建名为/etc/modules-load.d/containerd.conf 的文件并且将 overlay和br_netfilter写入。这两个模块overlay 和br_netfilter是containerd运行所需的内核模块
[rootk8s-master-42 ~]# modprobe overlay
[rootk8s-master-42 ~]# modprobe br_netfilter
[rootk8s-master-42 ~]# cat EOF | tee /etc/modules-load.d/containerd.conf
overlay
br_netfilter
EOF
# 通过运行以下指令确认br_netfilter和overlay模块被加载
[rootk8s-master-42 ~]# lsmod | grep br_netfilter
[rootk8s-master-42 ~]# lsmod | grep overlay2、设置 必须的内核参数包括网络转发、桥接网络 、IPv6 数据包的iptables过滤功能
[rootk8s-master-42 ~]# cat EOF /etc/sysctl.d/k8s.conf
net.bridge.bridge-nf-call-ip6tables 1
net.bridge.bridge-nf-call-iptables 1
EOF
# 开启ip_forward
[rootk8s-master-42 ~]# sed -i s/net.ipv4.ip_forward0/net.ipv4.ip_forward1/g /etc/sysctl.conf
# 应用sysctl参数而不重新启动
[rootk8s-master-42 ~]# sysctl --system3.9、启用IPVS模式 说明以下操作无论是control-plane节点和worker节点均需要执行。 1、安装IPVS工具及依赖
[rootk8s-master-42 ~]# yum install ipvsadm ipset sysstat socat conntrack ebtables -y2、确保安装了IPVS所需的内核模块注对于 Linux 内核 4.19 及更高版本请使用 nf_conntrack 代替 nf_conntrack_ipv4。
[rootk8s-master-42 ~]# uname -r
4.19.90-17.5.ky10.aarch64[rootk8s-master-42 ~]# cat /etc/profile.d/ipvs.modules EOF
#!/bin/bash
modprobe -- ip_vs
modprobe -- ip_vs_rr
modprobe -- ip_vs_wrr
modprobe -- ip_vs_sh
modprobe -- nf_conntrack
EOF
[rootk8s-master-42 ~]# chmod 755 /etc/profile.d/ipvs.modules bash /etc/profile.d/ipvs.modules
[rootk8s-master-42 ~]# lsmod | grep -e ip_vs -e nf_conntrack四、安装containerd容器引擎 说明以下操作无论是control-plane节点和worker节点均需要执行。 1、升级libseccomp 说明经过多次试验安装k8s1.26.15版本时如果libseccomp版本为2.4.1则会报错unable to retrieve OCI runtime error。
[rootk8s-master-42 ~]# rpm -qa | grep libseccomp
libseccomp-2.4.1-3.ky10.aarch64
[rootk8s-master-42 ~]# rpm -e rpm -qa | grep libseccomp --nodeps
[rootk8s-master-42 ~]# yum install gperf -y
[rootk8s-master-42 ~]# wget https://github.com/seccomp/libseccomp/releases/download/v2.5.4/libseccomp-2.5.4.tar.gz
[rootk8s-master-42 ~]# tar axf libseccomp-2.5.4.tar.gz cd libseccomp-2.5.4
[rootk8s-master-42 ~]# ./configure make make install
[rootk8s-master-42 libseccomp-2.5.4]# find / -name libseccomp.so.2
/usr/local/lib/libseccomp.so.2
/root/libseccomp-2.5.4/src/.libs/libseccomp.so.2
[rootk8s-master-42 ~]# ln -s /usr/local/lib/libseccomp.so.2 /usr/lib64/libseccomp.so.22、安装软件包
[rootk8s-master-42 ~]# wget https://github.com/containerd/containerd/releases/download/v1.7.2/cri-containerd-cni-1.7.2-linux-arm64.tar.gz
[rootk8s-master-42 ~]# tar axf cri-containerd-cni-1.7.2-linux-arm64.tar.gz -C /3、修改配置文件
[rootk8s-master-42 ~]# mkdir -p /etc/containerd containerd config default /etc/containerd/config.toml
[rootk8s-master-42 ~]# sed -i s#SystemdCgroup false#SystemdCgroup true#g /etc/containerd/config.toml
[rootk8s-master-42 ~]# sed -i s#sandbox_image registry.k8s.io/pause:3.8#sandbox_image registry.cn-hangzhou.aliyuncs.com/google_containers/pause:3.9#g /etc/containerd/config.toml4、网络插件CNI配置文件
[rootk8s-master-42 ~]# rm -f /etc/cni/net.d/10-containerd-net.conflist
[rootk8s-master-42 ~]# cat EOF | sudo tee /etc/cni/net.d/cni-default.conf
{name: mynet,cniVersion: 0.3.1,type: bridge,bridge: mynet0,isDefaultGateway: true,ipMasq: true,hairpinMode: true,ipam: {type: host-local,subnet: 10.48.0.0/16}
}
EOF5、重启containerd服务并设置开机自启
[rootk8s-master-42 ~]# systemctl daemon-reload systemctl restart containerd systemctl enable containerd如下图所示 五、安装kubelet、kubeadm和kubectl 说明以下操作无论是control-plane节点和worker节点均需要执行。 5.1、方法一yum源 1、编辑镜像源文件加入阿里云k8s镜像源配置
[rootk8s-master-42 ~]# cat EOF | sudo tee /etc/yum.repos.d/kubernetes.repo
[kubernetes]
nameKubernetes
baseurlhttps://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-aarch64/
enabled1
gpgcheck0
repo_gpgcheck0
gpgkeyhttps://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
EOF2、安装指定版本
[rootk8s-master-42 ~]# yum --showduplicates list kubeadm kubectl kubelet
[rootk8s-master-42 ~]# yum install -y kubelet-1.26.9 kubeadm-1.26.9 kubectl-1.26.93、设置kubectl开机自启
[rootk8s-master-42 ~]# systemctl enable kubelet注意由于在Kylin Linux Advanced Server V10系统的kubernetes源中使用yum最高只能安装1.26大版本中的1.26.9小版本但是我安装的是1.26.15版本所以当前环境中未采用此方法。 5.2、方法二二进制 说明以下操作无论是control-plane节点和worker节点均需要执行。 1、准备kubeadm、kubelet、kubectl二进制文件
# 方法一
[rootk8s-master-42 ~]# wget -P /usr/bin/ https://dl.k8s.io/v1.26.15/bin/linux/arm64/kubeadm
[rootk8s-master-42 ~]# wget -P /usr/bin/ https://dl.k8s.io/v1.26.15/bin/linux/arm64/kubelet
[rootk8s-master-42 ~]# wget -P /usr/bin/ https://dl.k8s.io/v1.26.15/bin/linux/arm64/kubectl
# 方法二
[rootk8s-master-42 ~]# wget https://dl.k8s.io/v1.26.15/kubernetes-client-linux-arm64.tar.gz
[rootk8s-master-42 ~]# tar axf kubernetes-client-linux-arm64.tar.gz
[rootk8s-master-42 ~]# cp kubernetes/node/bin/{kubeadm,kubelet,kubectl} /usr/bin2、准备kubelet.service文件
[rootk8s-master-42 ~]# wget https://raw.githubusercontent.com/kubernetes/release/v0.4.0/cmd/kubepkg/templates/latest/deb/kubelet/lib/systemd/system/kubelet.service
[rootk8s-master-42 ~]# cp kubelet.service /usr/lib/systemd/system/kubelet.service3、准备10-kubeadm.conf文件
[rootk8s-master-42 ~]# wget https://raw.githubusercontent.com/kubernetes/release/v0.4.0/cmd/kubepkg/templates/latest/deb/kubeadm/10-kubeadm.conf
[rootk8s-master-42 ~]# mkdir -p /usr/lib/systemd/system/kubelet.service.d
[rootk8s-master-42 ~]# cp 10-kubeadm.conf /usr/lib/systemd/system/kubelet.service.d/10-kubeadm.conf4、设置kubectl开机自启
[rootk8s-master-42 ~]# systemctl enable kubelet六、k8s镜像下载 说明以下操作无论是control-plane节点和worker节点均需要执行。 1、查看镜像
[rootk8s-master-42 ~]# kubeadm config images list --kubernetes-versionv1.26.15
registry.k8s.io/kube-apiserver:v1.26.15
registry.k8s.io/kube-controller-manager:v1.26.15
registry.k8s.io/kube-scheduler:v1.26.15
registry.k8s.io/kube-proxy:v1.26.15
registry.k8s.io/pause:3.9
registry.k8s.io/etcd:3.5.10-0
registry.k8s.io/coredns/coredns:v1.9.32、下载镜像
#!/bin/bash
k8s_versionv1.26.15
pause_version3.9
etcd_version3.5.10-0
coredns_versionv1.9.3
registry_addressregistry.cn-hangzhou.aliyuncs.com/google_containers
ctr -n k8s.io image pull --platform linux/arm64 ${registry_address}/kube-apiserver:${k8s_version}
ctr -n k8s.io image pull --platform linux/arm64 ${registry_address}/kube-controller-manager:${k8s_version}
ctr -n k8s.io image pull --platform linux/arm64 ${registry_address}/kube-scheduler:${k8s_version}
ctr -n k8s.io image pull --platform linux/arm64 ${registry_address}/kube-proxy:${k8s_version}
ctr -n k8s.io image pull --platform linux/arm64 ${registry_address}/pause:${pause_version}
ctr -n k8s.io image pull --platform linux/arm64 ${registry_address}/etcd:${etcd_version}
ctr -n k8s.io image pull --platform linux/arm64 ${registry_address}/coredns:${coredns_version}3、导出镜像
#!/bin/bash
k8s_versionv1.26.15
pause_version3.9
etcd_version3.5.10-0
coredns_versionv1.9.3
registry_addressregistry.cn-hangzhou.aliyuncs.com/google_containers
ctr -n k8s.io image export --platform linux/arm64 \
kube-apiserver-${k8s_version}.tar.gz ${registry_address}/kube-apiserver:${k8s_version}
ctr -n k8s.io image export --platform linux/arm64 \
kube-controller-manager-${k8s_version}.tar.gz ${registry_address}/kube-controller-manager:${k8s_version}
ctr -n k8s.io image export --platform linux/arm64 \
kube-scheduler-${k8s_version}.tar.gz ${registry_address}/kube-scheduler:${k8s_version}
ctr -n k8s.io image export --platform linux/arm64 \
kube-proxy-${k8s_version}.tar.gz ${registry_address}/kube-proxy:${k8s_version}
ctr -n k8s.io image export --platform linux/arm64 \
pause-${pause_version}.tar.gz ${registry_address}/pause:${pause_version}
ctr -n k8s.io image export --platform linux/arm64 \
etcd-${etcd_version}.tar.gz ${registry_address}/etcd:${etcd_version}
ctr -n k8s.io image export --platform linux/arm64 \
coredns-${coredns_version}.tar.gz ${registry_address}/coredns:${coredns_version}4、导入镜像
#!/bin/bash
k8s_versionv1.26.15
pause_version3.9
etcd_version3.5.10-0
coredns_versionv1.9.3
ctr -n k8s.io image import --platform linux/arm64 pause-${pause_version}.tar.gz
ctr -n k8s.io image import --platform linux/arm64 kube-apiserver-${k8s_version}.tar.gz
ctr -n k8s.io image import --platform linux/arm64 kube-controller-manager-${k8s_version}.tar.gz
ctr -n k8s.io image import --platform linux/arm64 kube-scheduler-${k8s_version}.tar.gz
ctr -n k8s.io image import --platform linux/arm64 kube-proxy-${k8s_version}.tar.gz
ctr -n k8s.io image import --platform linux/arm64 etcd-${etcd_version}.tar.gz
ctr -n k8s.io image import --platform linux/arm64 coredns-${coredns_version}.tar.gz说明由于网络问题国内服务器无法访问registry.k8s.io镜像仓库地址建议使用国内阿里云的镜像仓库下载k8s镜像。如果你的是专网环境请找一台能访问阿里云镜像仓库的服务器下载然后打包成tar.gz格式上传到要部署的专网服务器通过ctr image import命令导入镜像即可。 七、calico镜像及yaml文件下载 calico 3.26版本对应K8S版本如下图所示
# 支持系统
RedHat Linux 7
CentOS 7
Flatcar Container Linux
Fedora CoreOS
Ubuntu 18.04
Debian 8
# 支持k8s版本
v1.24
v1.25
v1.26
v1.27
v1.281、calico.yml文件下载 说明以下操作只需要在control-plane节点执行。
[rootk8s-master-42 ~]# wget https://raw.githubusercontent.com/projectcalico/calico/v3.26.4/manifests/calico.yaml
[rootk8s-master-42 ~]# grep image: calico.yaml | uniq -c2 image: docker.io/calico/cni:v3.26.42 image: docker.io/calico/node:v3.26.41 image: docker.io/calico/kube-controllers:v3.26.42、镜像下载 说明以下操作无论是control-plane节点和worker节点均需要执行。
#!/bin/bash
calico_versionv3.26.4
ctr -n k8s.io image pull --platform linux/arm64 docker.io/calico/cni:${calico_version}
ctr -n k8s.io image pull --platform linux/arm64 docker.io/calico/node:${calico_version}
ctr -n k8s.io image pull --platform linux/arm64 docker.io/calico/kube-controllers:${calico_version}3、镜像导出
#!/bin/bash
calico_versionv3.26.4
ctr -n k8s.io image export --platform linux/arm64 \
calico-cni-${calico_version}.tar.gz docker.io/calico/cni:${calico_version}
ctr -n k8s.io image export --platform linux/arm64 \
calico-node-${calico_version}.tar.gz docker.io/calico/node:${calico_version}
ctr -n k8s.io image export --platform linux/arm64 \
calico-kube-controllers-${calico_version}.tar.gz docker.io/calico/kube-controllers:${calico_version}4、镜像导入
#!/bin/bash
calico_versionv3.26.4
ctr -n k8s.io image import --platform linux/arm64 calico-cni-${calico_version}.tar.gz
ctr -n k8s.io image import --platform linux/arm64 calico-node-${calico_version}.tar.gz
ctr -n k8s.io image import --platform linux/arm64 calico-kube-controllers-${calico_version}.tar.gz八、安装control-plane节点
8.1、control-plane节点初始化集群 说明以下操作只需要在control-plane节点执行。 1、生成默认kubeadm初始化config文件
[rootk8s-master-42 ~]# kubeadm config print init-defaults kubeadm-config.yaml2、修改kubeadm默认config文件
[rootk8s-master-42 ~]# vim kubeadm-config.yaml
apiVersion: kubeadm.k8s.io/v1beta3
kind: InitConfiguration
localAPIEndpoint:advertiseAddress: 172.18.1.42bindPort: 6443
nodeRegistration: criSocket: unix:///run/containerd/containerd.sockimagePullPolicy: IfNotPresentname: k8s-master-42taints:- effect: NoSchedulekey: node-role.kubernetes.io/master- effect: NoSchedulekey: node-role.kubernetes.io/control-plane
---
apiVersion: kubeadm.k8s.io/v1beta3
kind: ClusterConfiguration
kubernetesVersion: 1.26.15
controlPlaneEndpoint: 172.18.1.42:6443
networking:dnsDomain: cluster.localpodSubnet: 10.48.0.0/16serviceSubnet: 10.96.0.0/16
imageRepository: registry.cn-hangzhou.aliyuncs.com/google_containers
apiServer:extraArgs:service-node-port-range: 30000-36000
---
apiVersion: kubeproxy.config.k8s.io/v1alpha1
kind: KubeProxyConfiguration
mode: ipvs
---
kind: KubeletConfiguration
apiVersion: kubelet.config.k8s.io/v1beta1
cgroupDriver: systemd3、使用kubeadm init初始化集群
[rootk8s-master-42 ~]# kubeadm init --configkubeadm-config.yaml如下图所示 4、对kubectl进行授权这样kubectl命令可以使用这个证书对k8s集群进行管理
[rootk8s-master-42 ~]# mkdir -p $HOME/.kube
[rootk8s-master-42 ~]# cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
[rootk8s-master-42 ~]# chown $(id -u):$(id -g) $HOME/.kube/config
[rootk8s-master-42 ~]# export KUBECONFIG/etc/kubernetes/admin.conf
[rootk8s-master-42 ~]# echo export KUBECONFIG/etc/kubernetes/admin.conf /etc/profile
[rootk8s-master-42 ~]# source /etc/profile8.2、启动kubectl自动补全功能
[rootk8s-master-42 ~]# yum install bash-completion -y
[rootk8s-master-42 ~]# source /usr/share/bash-completion/bash_completion
[rootk8s-master-42 ~]# echo source (kubectl completion bash) ~/.bashrc
[rootk8s-master-42 ~]# source ~/.bashrc九、安装worker节点 说明以下操作仅在worker节点执行。 1、将worker节点加入k8s集群
#注意kubeamd join命令的token只有24h24h就过期需要执行kubeadm token create --print-join-command重新生成。
[rootk8s-worker-67 ~]# kubeadm join 172.18.1.42:6443 --token q1d0eg.wg8ia4jnm7y2898l \--discovery-token-ca-cert-hash sha256:9811e539ddee7517b9e546270e95bed00979c4504842f56f18f40e688181e2dc如下图所示 十、部署calico网络插件 说明以下操作只需要在control-plane节点执行。 1、修改calico.yaml文件增加IP_AUTODETECTION_METHOD字段 - name: CALICO_NETWORKING_BACKENDvalueFrom:configMapKeyRef:name: calico-configkey: calico_backend- name: IP_AUTODETECTION_METHOD # 增加内容value: can-reach172.18.1.42 # 增加内容# Cluster type to identify the deployment type- name: CLUSTER_TYPEvalue: k8s,bgp说明官方提供的yaml文件中ip识别策略IPDETECTMETHOD没有配置即默认为first-found这会导致一个网络异常的ip作为nodeIP被注册从而影响node-to-node mesh 。我们可以修改成 can-reach 或者 interface 的策略尝试连接某一个Ready的node的IP以此选择出正确的IP。 2、修改calico.yaml文件修改CALICO_IPV4POOL_CIDR字段 # The default IPv4 pool to create on startup if none exists. Pod IPs will be# chosen from this range. Changing this value after installation will have# no effect. This should fall within --cluster-cidr.- name: CALICO_IPV4POOL_CIDRvalue: 10.48.0.0/163、执行calico.yaml文件
[rootk8s-master-42 ~]# kubectl apply -f calico.yaml 4、部署完成后等待一段时间重启服务器 说明以下操作无论是control-plane节点和worker节点均需要执行。
[rootk8s-master-42 ~]# reboot注意经测试部署完成后等待一段时间calico日志恢复正常然后需重启服务器否则会出现在pod中无法ping通百度。 十一、K8S集群测试
11.1、检查集群状态 说明以下操作只需要在control-plane节点执行。
[rootk8s-master-42 ~]# kubectl get nodes -o wide
[rootk8s-master-42 ~]# kubectl get cs
[rootk8s-master-42 ~]# kubectl get pods -A -o wide
[rootk8s-master-42 ~]# kubectl get svc -A -o wide如下图所示 11.2、DNS测试 说明以下操作只需要在control-plane节点执行。
[rootk8s-master-42 ~]# kubectl run busybox --image busybox:1.34 --restartNever --rm -it busybox -- sh
If you dont see a command prompt, try pressing enter.
/ # cat /etc/resolv.conf
search default.svc.cluster.local svc.cluster.local cluster.local
nameserver 10.96.0.10
options ndots:5
/ # nslookup default.svc.cluster.local
Server: 10.96.0.10
Address: 10.96.0.10:53注意如果部署完之后发现无法解析kubernetes.default和ping通百度网站可以尝试重启K8S集群节点所有节点主机。 11.3、功能性测试 说明以下操作只需要在control-plane节点执行。 1、部署一个简单的Nginx服务必须
vim nginx.yaml
---
apiVersion: apps/v1
kind: Deployment
metadata:name: nginxlabels:app: nginx
spec:replicas: 2selector:matchLabels:app: nginxtemplate:metadata:labels:app: nginxspec:containers:- name: nginximage: nginx:latestimagePullPolicy: IfNotPresentports:- name: httpprotocol: TCPcontainerPort: 80resources:limits:cpu: 1.0memory: 512Mirequests:cpu: 0.5memory: 128Mi
---
apiVersion: v1
kind: Service
metadata:annotations:name: nginx-test-service
spec:ports:- port: 80targetPort: 80nodePort: 32001protocol: TCPselector:app: nginxsessionAffinity: Nonetype: NodePort2、测试Nginx服务是否正常,如下所示 总结整理不易如果对你有帮助可否点赞关注一下
更多详细内容请参考企业级K8s集群运维实战
