kubeadm安装k8s 1.18

Love The Way You Lie 2021-11-23 12:02 428阅读 0赞

## ##

### 一. 安装要求 ###

安装k8s的服务器需要满足以下条件：

1. 一台或多台机器，操作系统 CentOS7.x-86\_x64；

2. 硬件配置：2GB或更多RAM，2个CPU或更多CPU，硬盘30GB或更多；

3. 集群中所有机器之间网络互通；

4. 可以访问外网，需要拉取镜像；

5. 禁止swap分区。

## ##

### 二. 环境准备 ###

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3NraDIwMTVqYXZh_size_16_color_FFFFFF_t_70][]

单Master架构图

**1.服务器部署**

<table> 
 <tbody> 
 <tr> 
 <td style="vertical-align:top;width:138.25pt;"> 角色 </td> 
 <td style="vertical-align:top;width:138.25pt;"> hostname </td> 
 <td style="vertical-align:top;width:138.3pt;"> IP </td> 
 </tr> 
 <tr> 
 <td style="width:138.25pt;"> master </td> 
 <td style="width:138.25pt;"> k8s-master </td> 
 <td style="width:138.3pt;"> 192.168.20.160 </td> 
 </tr> 
 <tr> 
 <td style="vertical-align:top;width:138.25pt;"> node </td> 
 <td style="vertical-align:top;width:138.25pt;"> k8s-node1 </td> 
 <td style="vertical-align:top;width:138.3pt;"> 192.168.20.161 </td> 
 </tr> 
 <tr> 
 <td style="width:138.25pt;"> node </td> 
 <td style="width:138.25pt;"> k8s-node2 </td> 
 <td style="width:138.3pt;"> 192.168.20.162 </td> 
 </tr> 
 </tbody> 
</table>

**2.服务器设置**

关闭防火墙：

$ systemctl stop firewalld
    $ systemctl disable firewalld

关闭selinux：

$ sed -i 's/enforcing/disabled/'/etc/selinux/config  # 永久
    $ setenforce 0# 临时

关闭swap：

$ swapoff -a  # 临时
    $ vim /etc/fstab, 然后注释swap分区  # 永久

根据规划设置主机名：

$ hostnamectl set-hostname <hostname>

在master添加hosts：

$ cat >>/etc/hosts << EOF
 192.168.20.160 k8s-master
 192.168.20.161 k8s-node1
 192.168.20.162 k8s-node2
 EOF

将桥接的IPv4流量传递到iptables的链：

$ cat >/etc/sysctl.d/k8s.conf << EOF
 
 net.bridge.bridge-nf-call-ip6tables =1
 
 net.bridge.bridge-nf-call-iptables =1
 
 EOF

$ sysctl --system  # 生效

时间同步：

$ yum install ntpdate -y
    $ ntpdate time.windows.com

**3.安装Docker/kubeadm/kubelet/kubectl 【Master节点+Node节点】**

Kubernetes默认CRI（容器运行时）为Docker，因此先安装Docker。

*3.1安装docker*

$ wget https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo -O /etc/yum.repos.d/docker-ce.repo
    $ yum -y install docker-ce
    $ systemctl enable docker && systemctl start docker

配置镜像下载加速器：

$ cat >/etc/docker/daemon.json << EOF
 {
 "registry-mirrors":["https://b9pmyelo.mirror.aliyuncs.com"]
 }
 EOF

\#重启docker

$  systemctl restart docker

*3.2安装kubeadm、kubelet和kubectl*

(1)配置阿里的yum源

cat >/etc/yum.repos.d/kubernetes.repo << EOF
 [kubernetes]
 name=Kubernetes
 baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
 enabled=1
 gpgcheck=0
 repo_gpgcheck=0
 gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
 EOF

(2)安装kubeadm、kubelet和kubectl

$ yum install -y kubelet-1.18.0  kubeadm-1.18.0  kubectl-1.18.0
    $ systemctl enable kubelet

kubelet：systemd守护进程管理

kubeadm：部署工具

kubectl：k8s命令行管理工具

**4.初始化Master节点**

在Master节点(192.168.20.160)执行

$ kubeadm init \
    --apiserver-advertise-address=192.168.20.160 \
    --image-repository registry.aliyuncs.com/google_containers \
    --kubernetes-version v1.18.0 \
    --service-cidr=10.96.0.0/12 \
    --pod-network-cidr=10.244.0.0/16

参数说明：

\--apiserver-advertise-address 集群通告地址

\--image-repository 由于默认拉取镜像地址k8s.gcr.io国内无法访问，这里指定阿里云镜像仓库地址。

\--kubernetes-version K8s版本，与上面安装的一致

\--service-cidr 集群内部虚拟网络，Pod统一访问入口

\--pod-network-cidr Pod网络，与下面部署的CNI网络组件yaml中保持一致

初始化成功会有以下提示：

![20200809164239597.png][]

按照提示信息拷贝kubectl使用的连接k8s认证文件到默认路径：

$  mkdir -p $HOME/.kube
    $  sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
    $  sudo chown $(id -u):$(id -g) $HOME/.kube/config

kubeadm join ....  是node节点加入到k8s集群的指令

**5. Node加入k8s集群**

在Node节点(192.168.20.161/192.168.20.162)上执行

kubeadm join 192.168.20.160:6443 --token armr51.sl9i54wyua6y8b02 \
    --discovery-token-ca-cert-hash sha256:fa9f9122fa394795f5ff329c78ac1e8c7cc0b4d9bf53a2a7ecb20f142c83b4d4

token默认有效时期为24小时

1）如果不超过24小时，可以通过

$ kubeadm token list

获取 token

$ openssl x509 -pubkey -in /etc/kubernetes/pki/ca.crt | openssl rsa -pubin -outform der 2>/dev/null | openssl dgst -sha256 -hex | sed 's/^.* //'

获取 ca证书sha256编码hash值

2）超过24小时

$ kubeadm token create --print-join-command

重新创建token

kubeadm token create --ttl 0 --print-join-command

加上 –ttl 0参数时，生成的token不会失效

**6. 安装网络插件（CNI）**

跨主机的容器网络互通是Kubernetes集群能够正常工作的前提条件。k8s本身并不会对跨主机的容器网络进行设置，需要额外的工具进行设置，一般开源的工具包括：Flannel、Weave、OpenvSwitch、Calico等。

只需要安装一个网络插件即可：以下Flannel、Weave和Calico任意安装一个即可，只需在Master节点安装即可

(1).Flannel安装

Flannel是CoreOS维护的一个网络组件，Flannel为每个Pod提供全局唯一的IP，Flannel使用ETCD来存储Pod子网与Node IP之间的关系。flanneld守护进程在每台主机上运行，并负责维护ETCD信息和路由数据包。

$ kubectl apply -f  https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml

安装后查看flannel对应的pod信息

$ kubectl get pods -n kube-system

(2).Weave安装

$ kubectl apply -f https://cloud.weave.works/k8s/net?k8s-version=$(kubectl version | base64 | tr -d '\n')

(3).Calico安装

$ kubectl apply -f https://docs.projectcalico.org/manifests/calico.yaml

安装网络插件前node节点均处于NotReady状态，安装网络工具成功后，可以通过kubectl get nodes查看节点运行状态

$ kubectl get nodes

![20200809164839579.png][]

**7.部署官方Dashboard(UI)**

$ wget https://raw.githubusercontent.com/kubernetes/dashboard/v2.0.3/aio/deploy/recommended.yaml

默认Dashboard只能集群内部访问，修改Service,添加nodePort，(下图红框内是需要新加的)，暴露到外部：

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3NraDIwMTVqYXZh_size_16_color_FFFFFF_t_70 1][]

访问地址：[https://NodeIP:30001][https_NodeIP_30001]

推荐使用firefox、chrome浏览器

创建service account并绑定默认cluster-admin管理员集群角色：

\# 创建用户

$ kubectl create serviceaccount dashboard-admin -n kube-system

\# 用户授权

$ kubectl create clusterrolebinding dashboard-admin --clusterrole=cluster-admin --serviceaccount=kube-system:dashboard-admin

\# 获取用户Token

$ kubectl describe secrets -n kube-system $(kubectl -n kube-system get secret | awk '/dashboard-admin/{print $1}')

使用输出的Token登录Dashboard。

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3NraDIwMTVqYXZh_size_16_color_FFFFFF_t_70 2][]

登陆成功之后

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3NraDIwMTVqYXZh_size_16_color_FFFFFF_t_70 3][]

安装时出现的问题：

1. Failed to start ContainerManager failed to initialize top level QOS containers: failed to update top level BestEffort QOS cgroup : failed to set supported cgroup subsystems for cgroup \[kubepods besteffort\]: failed to find subsystem mount for required subsystem: pids

具体错误原因参考：https://github.com/kubernetes/kubernetes/issues/79046

kubelet配置参考：https://kubernetes.io/docs/reference/command-line-tools-reference/kubelet/

解决方法：

1）找到kubelet启动配置文件：find / -iname kubelet

2）修改配置文件：vim /etc/sysconfig/kubelet

3）KUBELET\_EXTRA\_ARGS="--feature-gates SupportPodPidsLimit=false --feature-gates SupportNodePidsLimit=false"

感谢：

[https://mp.weixin.qq.com/s/PD1CCkKZgtZD7pAZEqF-rw][https_mp.weixin.qq.com_s_PD1CCkKZgtZD7pAZEqF-rw]

https://www.kubernetes.org.cn/7189.html

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3NraDIwMTVqYXZh_size_16_color_FFFFFF_t_70]: /images/20211122/ed95f4c79d7347e497ae4ad6f4ea421e.png
[20200809164239597.png]: /images/20211122/a4a7613960974a248405ac2d8cf61e77.png
[20200809164839579.png]: /images/20211122/0c6e4fb3509445d5a0aeb2d5cebda5dd.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3NraDIwMTVqYXZh_size_16_color_FFFFFF_t_70 1]: /images/20211122/1e97c1ac87e247d69f0a7ce8f60d5f3b.png
[https_NodeIP_30001]: https://NodeIP:30001
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3NraDIwMTVqYXZh_size_16_color_FFFFFF_t_70 2]: /images/20211122/c122af3702fb472a9c74b15f0c63f764.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3NraDIwMTVqYXZh_size_16_color_FFFFFF_t_70 3]: /images/20211122/11e83f2ca54b4cdd81681543bd915433.png
[https_mp.weixin.qq.com_s_PD1CCkKZgtZD7pAZEqF-rw]: https://mp.weixin.qq.com/s/PD1CCkKZgtZD7pAZEqF-rw