当前位置 博文首页 > Praywu：kubeadm部署K8S集群
1）自我修复
2）弹性伸缩
3）自动部署和回滚
4）服务发现和负载均衡
5）机密和配置管理
6）存储编排
7）批处理
1）Master组件
2）Node组件
1）Pod
2）Controller
3）更高级层次对象，部署和管理Pod
4）网络解决方案
5）三种网络
各个Pod运行在同一个网络中，而service是另外一个网络；Pod和service的地址是不同网段的。
接入外部访问时，先接入节点网络，然后由节点网络代理至集群网络，再由集群网络代理至Pod网络。
同一Pod内的多个容器之间通过 lo 接口进行通信。
两个Pod之间可以直接进行通信：通过隧道的方式（Overlay叠加网络）来转发二层报文，使得它们虽然扩主机但是好像工作在同一个二层网络中。访问对方Pod所在节点的位置，然后再代理到Pod内部的容器上。
1）minikube
2）kubeadm
3）二进制包
1）环境需求
2）角色规划
3）网络模型
1）关闭防火墙、SELinux
# 关闭防火墙并设置开机禁止启动 systemctl stop firewalld && systemctl disable firewalld # 关闭SELinux sed -i 's/^SELINUX=.*/SELINUX=disabled/' /etc/selinux/config && setenforce 0
2）关闭swap分区
# 临时关闭所有swap swapoff -a # 在/etc/fstab中机制挂载swap sed -i '/ swap / s/^\(.*\)$/#\1/g' /etc/fstab
3）设置主机名并配置hosts
# 为各个主机配置主机名 hostnamectl set-hostname k8s-master01 hostnamectl set-hostname k8s-node01 hostnamectl set-hostname k8s-node02 # 配置好主机名后将以下内容写入到所有节点的 /etc/hosts 文件中 172.18.0.67 k8s-master01 172.18.0.68 k8s-node01 172.18.0.69 k8s-node02
4）内核调整
# 设置 net.bridge.bridge-nf-call-ip6tables = 1 # 设置 net.bridge.bridge-nf-call-iptables = 1 cat > /etc/sysctl.d/k8s.conf << EOF net.bridge.bridge-nf-call-ip6tables = 1 net.bridge.bridge-nf-call-iptables = 1 EOF sysctl --system # Load settings from all system configuration files
5）为各个主机做时间同步
1）配置安装源
cd /etc/yum.repos.d/ && wget -c https://mirrors.tuna.tsinghua.edu.cn/docker-ce/linux/centos/docker-ce.repo # 注意要修改下载下来的这个repo文件中的地址，将其指向为清华的源的地址
cat > /etc/yum.repos.d/kubernetes.repo << EOF [kubernetes] name=Kubernetes baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64 enabled=1 gpgcheck=0 repo_gpgcheck=0 gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg EOF
2）安装docker-ce
yum install -y docker-ce systemctl start docker && systemctl enable docker docker info # 安装完成之后注意要为docker配置好镜像加速
3）安装kubeadm、kubelet 和 kubectl
yum install kubelet kubeadm kubectl -y # 注意，要让kubelet开机自启，现在还不能去手动启动它 systemctl enable kubelet
4）为kubelet配置额外参数
# 可以在 /etc/sysconfig/kubelet 这个文件中添加额外的参数 # 如关闭swap功能 KUBELET_EXTRA_ARGS="--fail-swap-on=false"
1）初始化master
kubeadm init \ --kubernetes-version v1.20.2 \ --pod-network-cidr=10.244.0.0/16 \ --service-cidr=10.96.0.0/12 \ --apiserver-advertise-address=172.18.0.67 \ --ignore-preflight-errors=Swap \ --image-repository registry.aliyuncs.com/google_containers # apiserver要修改成自己的master节点的地址，默认apiserver监听在所有地址的6443端口上 # 如果swap报错，可以加上选项--ignore-preflight-errors=Swap，但是注意那个Swap的S要大写 # 由于默认拉取镜像地址k8s.gcr.io国内无法访问，这里指定阿里云镜像仓库地址
# 注意kubernetes的版本要和之前安装的kubelet的版本一致
2）根据回显提示操作
mkdir -p $HOME/.kube sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config sudo chown $(id -u):$(id -g) $HOME/.kube/config
3）测试
# 获取组件状态信息 kubectl get cs # cs是kubectl get componentstatus的简写，获取组件状态信息 # 查看k8s集群的节点信息 kubectl get nodes
4）token失效解决
因为默认 token 的有效期为24小时，过期之后该token就不可用了，所以如果后续有node节点加入，可以重新生成新的token
[root@master01 ~]# kubeadm token create salxe7.gnlwtozqxxsf4uu7 [root@master01 ~]# kubeadm token list TOKEN TTL EXPIRES USAGES DESCRIPTION EXTRA GROUPS he4ugm.z537h1g7taugguco 23h 2021-01-19T15:53:34+08:00 authentication,signing <none> system:bootstrappers:kubeadm:default-node-token salxe7.gnlwtozqxxsf4uu7 23h 2021-01-19T15:53:48+08:00 authentication,signing <none> system:bootstrappers:kubeadm:default-node-token t4xdcj.5vgr19ymj4g6y7hm 6h 2021-01-18T22:31:08+08:00 authentication,signing <none> system:bootstrappers:kubeadm:default-node-token [root@master01 ~]#
[root@master01 ~]# openssl x509 -pubkey -in /etc/kubernetes/pki/ca.crt | openssl rsa -pubin -outform der 2>/dev/null | openssl dgst -sha256 -hex | sed 's/^.* //' 19060b637433363db284e831fce4bd567f82d8070b2744741dbe2f1cfa804d53
kubeadm join 172.18.0.67:6443 --token t4xdcj.5vgr19ymj4g6y7hm --discovery-token-ca-cert-hash sha256:19060b637433363db284e831fce4bd567f82d8070b2744741dbe2f1cfa804d53 --ignore-preflight-errors=Swap
注册Node节点到Master
# kubeadm join 的内容，在上面kubeadm init 已经生成好了 kubeadm join 172.18.0.67:6443 --token t4xdcj.5vgr19ymj4g6y7hm --discovery-token-ca-cert-hash sha256:19060b637433363db284e831fce4bd567f82d8070b2744741dbe2f1cfa804d53 --ignore-preflight-errors=Swap
1）安装flannel
# 这个地址可能访问不到，可以开小飞机手动把这个文件下载下来，然后再apply kubectl apply -f https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml # 执行的成功与否要看docker image ls中是否有flannel的镜像，慢慢等待它下载即可
# 要确保能够访问到 quay.io 这个registery
# 如果无法访问，可以将此文件中image项后面的地址修改成可以访问到的地址
2）查看是否安装成功
# 注意，要确保状态为全1/1时，才可进行后续操作 [root@k8s-master01 ~]# kubectl get pods -n kube-system NAME READY STATUS RESTARTS AGE coredns-7f89b7bc75-9zxjz 1/1 Running 0 12m coredns-7f89b7bc75-n8p4s 1/1 Running 0 12m etcd-k8s-master01 1/1 Running 0 12m kube-apiserver-k8s-master01 1/1 Running 0 12m kube-controller-manager-k8s-master01 1/1 Running 0 12m kube-flannel-ds-b5ljk 1/1 Running 0 7m58s kube-proxy-cwzkw 1/1 Running 0 12m kube-scheduler-k8s-master01 1/1 Running 0 12m # 确保所有节点为Ready状态 [root@k8s-master01 ~]# kubectl get nodes NAME STATUS ROLES AGE VERSION k8s-master01 Ready control-plane,master 93m v1.20.2 k8s-node01 Ready <none> 49m v1.20.2
3）flannel安装失败后重装
kubectl delete -f kube-flannel.yml # 然后重新安装 kebectl apply -f kube-flannel.yml
1）信息查看
# 查看k8s集群的整体信息 kubectl cluster-info # 查看当前系统上已经被创建的控制器 kubectl get deployment # 查看pod的相关信息 kubectl get pods kubectl get pods -o wide # 查看更详细的信息 # 查看services的相关信息 kubectl get services kubectl get svc # 查看kube-system名称空间中service的相关信息 kubectl get svc -n kube-system
2）创建一个pod
# 创建并运行一个特定的镜像，暴露80端口，并且只创建1个副本，干跑模式需要再加上--dry-run=true kubectl run nginx-deploy --image=nginx:1.14 --port=80 --replicas=1
# 如果要镜像中运行其他程序，可以写成这样（注意前面要加 -- ） kubectl run nginx-deploy --image=nginx:1.14 --port=80 --replicas=1 -- /bin/sh
3）对刚刚创建的pod进行查看并访问
[root@k8s-master01 ~]# kubectl get pods -o wide NAME READY STATUS RESTARTS AGE IP NODE NOMINATED NODE READINESS GATES nginx-deploy 1/1 Running 0 3m6s 10.244.1.2 k8s-node01 <none> <none> [root@k8s-master01 ~]# curl 10.244.1.2
1）创建deployment
# 创建一个deployment控制器，这个控制器的名字就叫nginx-deploy kubectl create deployment nginx-deploy --image=nginx
2）创建service并暴露端口
kubectl expose deployment nginx-deploy --name=nginx --port=80 --target-port=80 --protocol=TCP # 将nginx-deploy这个控制器（deployment ）相关的pod资源都创建为一个服务，服务名叫nginx # --name 是service的名称 # --port 是service暴露到外部的端口 # --target-port 是pod暴露的端口 # --protocol 使用的协议，默认就是TCP # --type 是service的类型，service有多种类型，可kubectl expose --help来查看--type选项，Defaultis 'ClusterIP'
3）查看相关信息并访问
# 查看pod和service的相关信息 [root@k8s-master01 ~]# kubectl get pods,svc NAME READY STATUS RESTARTS AGE pod/nginx-deploy-8588f9dfb-t8wzr 1/1 Running 0 11m NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) AGE service/kubernetes ClusterIP 10.96.0.1 <none> 443/TCP 78m service/nginx ClusterIP 10.99.193.184 <none> 80/TCP 34s # 查看kube-system名称空间中service的相关信息 kubectl get svc -n kube-system # 访问：http://NodeIP:PORT，只有在集群内部的节点上才能被访问到 curl http://10.99.193.184
参考：
