Kubernetes部署记录

Dear 丶 2022-05-18 11:00 238阅读 0赞

**Kubernetes介绍**

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 3 4 5 6 7 8 9 </td> 
 <td> <code>Kubernetes是Google开源的容器集群管理系统，是基于Docker构建一个容器的调度服务，提供资源调度、均衡容灾、服务注册、动态扩缩容等功能套件。</code> <code>Kubernetes提供应用部署、维护、 扩展机制等功能，利用Kubernetes能方便地管理跨机器运行容器化的应用，其主要功能如下：</code> <code>1) 使用Docker对应用程序包装(package)、实例化(instantiate)、运行(run)。</code> <code>2) 将多台Docker主机抽象为一个资源，以集群的方式运行、管理跨机器的容器，包括任务调度、资源管理、弹性伸缩、滚动升级等功能。</code> <code>3）使用编排系统（YAML File）快速构建容器集群，提供负载均衡，解决容器直接关联及通信问题</code> <code>4) 解决Docker跨机器容器之间的通讯问题。</code> <code>5）自动管理和修复容器，简单说，比如创建一个集群，里面有十个容器，如果某个容器异常关闭，那么，会尝试重启或重新分配容器，始终保证会有</code> <code>&nbsp;&nbsp;&nbsp;</code><code>十个容器在运行，反而杀死多余的。</code> <code>&nbsp;&nbsp;&nbsp;</code><code>Kubernetes的自我修复机制使得容器集群总是运行在用户期望的状态当前Kubernetes支持GCE、vShpere、CoreOS、OpenShift。</code> </td> 
 </tr> 
 </tbody> 
</table>

**Kubernetes和Mesos的区别**

**Kubernetes结构图**

**![907596-20170515171832432-144042188.png][]**

**kubernetes角色组成**

**kubernetes组件组成**

**Kubelet**

**![907596-20170519001052713-1701525727.png][]**

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 </td> 
 <td> <code>根据上图可知Kubelet是Kubernetes集群中每个Minion和Master API Server的连接点，Kubelet运行在每个Minion上，是Master API Server和Minion之间的桥梁，</code> <code>接收Master API Server分配给它的commands和work，与持久性键值存储etcd、</code><code>file</code><code>、server和http进行交互，读取配置信息。Kubelet的主要工作是管理Pod和容</code> <code>器的生命周期，其包括Docker Client、Root Directory、Pod Workers、Etcd Client、Cadvisor Client以及Health Checker组件，具体工作如下：</code> <code>1) 通过Worker给Pod异步运行特定的Action。</code> <code>2) 设置容器的环境变量。</code> <code>3) 给容器绑定Volume。</code> <code>4) 给容器绑定Port。</code> <code>5) 根据指定的Pod运行一个单一容器。</code> <code>6) 杀死容器。</code> <code>7) 给指定的Pod创建network 容器。</code> <code>8) 删除Pod的所有容器。</code> <code>9) 同步Pod的状态。</code> <code>10) 从Cadvisor获取container info、 pod info、root info、machine info。</code> <code>11) 检测Pod的容器健康状态信息。</code> <code>12) 在容器中运行命令。</code> </td> 
 </tr> 
 </tbody> 
</table>

**kubernetes基本部署步骤**

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 3 4 5 6 7 8 9 10 </td> 
 <td> <code>1）minion节点安装docker</code> <code>2）minion节点配置跨主机容器通信</code> <code>3）master节点部署etcd、kube-apiserver、kube-controller-manager和kube-scheduler组件</code> <code>4）minion节点部署kubelet、kube-proxy组件</code> &nbsp; <code>温馨提示：</code> <code>如果minion主机没有安装docker，启动kubelet时会报如下错误：</code> <code>Could not load kubeconfig&nbsp;</code><code>file</code>&nbsp;<code>/var/lib/kubelet/kubeconfig</code><code>: stat&nbsp;</code><code>/var/lib/kubelet/kubeconfig</code><code>: no such&nbsp;</code><code>file</code>&nbsp;<code>or directory. Trying auth path instead.</code> <code>Could not load kubernetes auth path&nbsp;</code><code>/var/lib/kubelet/kubernetes_auth</code><code>: stat&nbsp;</code><code>/var/lib/kubelet/kubernetes_auth</code><code>: no such&nbsp;</code><code>file</code>&nbsp;<code>or directory. Continuing with defaults.</code> <code>No cloud provider specified.</code> </td> 
 </tr> 
 </tbody> 
</table>

**kubernetes集群环境部署过程记录**

![907596-20170515140634119-357639569.png][]

1）设置三台机器的主机名

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 </td> 
 <td> <code>Master上执行：</code> <code>[root@localhost ~]</code><code># hostnamectl --static set-hostname&nbsp; k8s-master</code> &nbsp; <code>Node1上执行：</code> <code>[root@localhost ~]</code><code># hostnamectl --static set-hostname&nbsp; k8s-node-1</code> <code>　　</code> <code>Node2上执行：</code> <code>[root@localhost ~]</code><code># hostnamectl --static set-hostname&nbsp; k8s-node-2</code> &nbsp; <code>在三台机器上都要设置hosts，均执行如下命令：</code> <code>[root@k8s-master ~]</code><code># vim /etc/hosts</code> <code>182.48.115.233&nbsp;&nbsp;&nbsp; k8s-master</code> <code>182.48.115.233&nbsp;&nbsp;&nbsp; etcd</code> <code>182.48.115.233&nbsp;&nbsp;&nbsp; registry</code> <code>182.48.115.235&nbsp;&nbsp;&nbsp; k8s-node-1</code> <code>182.48.115.236&nbsp;&nbsp;&nbsp; k8s-node-2</code> </td> 
 </tr> 
 </tbody> 
</table>

2）关闭三台机器上的防火墙

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 </td> 
 <td> <code>[root@k8s-master ~]</code><code># systemctl disable firewalld.service</code> <code>[root@k8s-master ~]</code><code># systemctl stop firewalld.service</code> </td> 
 </tr> 
 </tbody> 
</table>

**3）现在开始部署Master**

**4）接着部署Node（在两台node节点机器上都要操作）**

查看状态

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 3 4 5 6 7 8 9 10 11 </td> 
 <td> <code>在master上查看集群中节点及节点状态</code> <code>[root@k8s-master ~]</code><code># kubectl -s http://k8s-master:8080 get node</code> <code>NAME&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; STATUS&nbsp;&nbsp;&nbsp; AGE</code> <code>k8s-node-1&nbsp;&nbsp; Ready&nbsp;&nbsp;&nbsp;&nbsp; 10m</code> <code>k8s-node-2&nbsp;&nbsp; Ready&nbsp;&nbsp;&nbsp;&nbsp; 1m</code> <code>[root@k8s-master ~]</code><code># kubectl get nodes</code> <code>NAME&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; STATUS&nbsp;&nbsp;&nbsp; AGE</code> <code>k8s-node-1&nbsp;&nbsp; Ready&nbsp;&nbsp;&nbsp;&nbsp; 10m</code> <code>k8s-node-2&nbsp;&nbsp; Ready&nbsp;&nbsp;&nbsp;&nbsp; 1m</code> &nbsp; <code>到这里，就已经搭建了一个kubernetes集群，但目前该集群还不能很好的工作，请需要继续后续的操作。</code> </td> 
 </tr> 
 </tbody> 
</table>

kubernetes常用命令

5）创建覆盖网络——Flannel

**6）部署nginx pod 和复制器**  
以下面的图来安装一个简单的静态内容的nginx应用：

![907596-20170519003144807-312268129.jpg][]

用复制器启动一个2个备份的nginx Pod，然后在前面挂Service，一个service只能被集群内部访问，一个能被集群外的节点访问。下面所有的命令都是在master管理节点上运行的。

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 166 167 168 169 170 171 172 173 174 175 176 177 178 179 180 181 182 183 184 185 186 187 188 189 190 191 192 193 194 195 196 197 198 199 </td> 
 <td> <code>1）首先部署nginx pod 和复制器---------------------------------------------------------------------</code> &nbsp; <code>[root@k8s-master ~]</code><code># docker images</code> <code>REPOSITORY&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; TAG&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; IMAGE ID&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; CREATED&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; SIZE</code> <code>docker.io</code><code>/nginx</code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;<code>latest&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 3448f27c273f&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 8 days ago&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 109.4 MB</code> &nbsp; <code>通过下面命令发现apiVersion版本是v1</code> <code>[root@k8s-master ~]</code><code># curl -s -L http://182.48.115.237:8080/api/v1beta1/version | python -mjson.tool</code> <code>{ </code> <code>&nbsp;&nbsp;&nbsp;&nbsp;</code><code>"apiVersion"</code><code>:&nbsp;</code><code>"v1"</code><code>,</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;</code><code>.......</code> <code>}</code> &nbsp; <code>开始创建pod单元</code> <code>[root@k8s-master ~]</code><code># mkdir -p /home/kubermange &amp;&amp; cd /home/kubermange</code> <code>[root@k8s-master kubermange]</code><code># vim nginx-rc.yaml</code> <code>apiVersion: v1</code> <code>kind: ReplicationController</code> <code>metadata:</code> <code>&nbsp;&nbsp;</code><code>name: nginx-controller</code> <code>spec:</code> <code>&nbsp;&nbsp;</code><code>replicas: 2&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;</code><code>#即2个备份</code> <code>&nbsp;&nbsp;</code><code>selector:</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;</code><code>name: nginx</code> <code>&nbsp;&nbsp;</code><code>template:</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;</code><code>metadata:</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;</code><code>labels:</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;</code><code>name: nginx</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;</code><code>spec:</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;</code><code>containers:</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;</code><code>- name: nginx</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;</code><code>image: docker.io</code><code>/nginx</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;</code><code>ports:</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;</code><code>- containerPort: 80</code> <code>[root@k8s-master kubermange]</code><code># kubectl -s http://182.48.115.237:8080 create -f nginx-rc.yaml</code> <code>replicationcontroller&nbsp;</code><code>"nginx-controller"</code>&nbsp;<code>created</code> &nbsp; <code>由于kubernetes要去gcr.io下载gcr.io</code><code>/google_containers/pause</code><code>镜像，然后下载nginx镜像，所以所创建的Pod需要等待一些时间才能处于running状态。</code> <code>然后查看pods清单</code> <code>[root@k8s-master kubermange]</code><code># kubectl -s http://k8s-master:8080 get pods</code> <code>NAME&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; READY&nbsp;&nbsp;&nbsp;&nbsp; STATUS&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; RESTARTS&nbsp;&nbsp; AGE</code> <code>nginx-controller-f0j9c&nbsp;&nbsp; 0</code><code>/1</code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;<code>ContainerCreating&nbsp;&nbsp; 0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 1m</code> <code>nginx-controller-v219k&nbsp;&nbsp; 0</code><code>/1</code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;<code>ContainerCreating&nbsp;&nbsp; 0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 1m</code> &nbsp; <code>可以使用describe 命令查看pod所分到的节点:</code> <code>[root@k8s-master kubermange]</code><code># kubectl -s http://182.48.115.237:8080 describe pod nginx-controller-f0j9c</code> <code>Name:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; nginx-controller-f0j9c</code> <code>Namespace:&nbsp; default</code> <code>Node:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; k8s-node-1</code><code>/182</code><code>.48.115.238</code> <code>.......</code> &nbsp; <code>同理，查看另一个pod</code> <code>[root@k8s-master kubermange]</code><code># kubectl -s http://182.48.115.237:8080 describe pod nginx-controller-v219k</code> <code>Name:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; nginx-controller-v219k</code> <code>Namespace:&nbsp; default</code> <code>Node:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; k8s-node-2</code><code>/182</code><code>.48.115.239</code> <code>.......</code> &nbsp; <code>由上可以看出，这个复制器启动了两个Pod，分别运行在182.48.115.238和182.48.115.239这两个节点上了。到这两个节点上查看，发现已经有nginx应用容器创建了。</code> &nbsp; <code>2）部署节点内部可访问的nginx service------------------------------------------------------------------------</code> <code>Service的</code><code>type</code><code>有ClusterIP和NodePort之分，缺省是ClusterIP，这种类型的Service只能在集群内部访问。配置文件如下：</code> <code>[root@k8s-master kubermange]</code><code># vim nginx-service-clusterip.yaml</code> <code>apiVersion: v1</code> <code>kind: Service</code> <code>metadata:</code> <code>&nbsp;&nbsp;</code><code>name: nginx-service-clusterip</code> <code>spec:</code> <code>&nbsp;&nbsp;</code><code>ports:</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;</code><code>- port: 8001</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;</code><code>targetPort: 80</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;</code><code>protocol: TCP</code> <code>&nbsp;&nbsp;</code><code>selector:</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;</code><code>name: nginx</code> &nbsp; &nbsp; <code>然后执行下面的命令创建service:</code> <code>[root@k8s-master kubermange]</code><code># kubectl -s http://182.48.115.237:8080 create -f ./nginx-service-clusterip.yaml</code> <code>service&nbsp;</code><code>"nginx-service-clusterip"</code>&nbsp;<code>created</code> <code>[root@k8s-master kubermange]</code><code># kubectl -s http://182.48.115.237:8080 get service</code> <code>NAME&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; CLUSTER-IP&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; EXTERNAL-IP&nbsp;&nbsp; PORT(S)&nbsp;&nbsp;&nbsp; AGE</code> <code>kubernetes&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 10.254.0.1&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; &lt;none&gt;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 443</code><code>/TCP</code>&nbsp;&nbsp;&nbsp;&nbsp;<code>2h</code> <code>nginx-service-clusterip&nbsp;&nbsp; 10.254.163.249&nbsp;&nbsp; &lt;none&gt;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 8001</code><code>/TCP</code>&nbsp;&nbsp;&nbsp;<code>24s</code> &nbsp; <code>验证service的可访问性（访问节点）：</code> <code>上面的输出告诉我们这个Service的Cluster IP是10.254.163.249，端口是8001。那么我们就来验证这个PortalNet IP的工作情况：</code> <code>ssh</code><code>登录到节点机上验证（可以提前做</code><code>ssh</code><code>无密码登录的信任关系，当然也可以不做，这样验证时要手动输入登录密码）</code> <code>[root@k8s-master kubermange]</code><code># ssh 182.48.115.238 curl -s 10.254.163.249:8001&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; //或者直接到节点机上执行"curl -s 10.254.163.249:8001"</code> <code>The authenticity of host&nbsp;</code><code>'182.48.115.238 (182.48.115.238)'</code>&nbsp;<code>can't be established.</code> <code>ECDSA key fingerprint is 4c:24:35:e0:35:00:86:05:94:a2:9e:f9:22:b0:90:b7.</code> <code>Are you sure you want to&nbsp;</code><code>continue</code>&nbsp;<code>connecting (</code><code>yes</code><code>/no</code><code>)?&nbsp;</code><code>yes</code> <code>Warning: Permanently added&nbsp;</code><code>'182.48.115.238'</code>&nbsp;<code>(ECDSA) to the list of known hosts.</code> <code>root@182.48.115.238's password:</code> <code>&lt;!DOCTYPE html&gt;</code> <code>&lt;html&gt;</code> <code>&lt;</code><code>head</code><code>&gt;</code> <code>&lt;title&gt;Welcome to nginx!&lt;</code><code>/title</code><code>&gt;</code> <code>&lt;style&gt;</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;</code><code>body { </code> <code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;</code><code>width: 35em;</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;</code><code>margin: 0 auto;</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;</code><code>font-family: Tahoma, Verdana, Arial, sans-serif;</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;</code><code>}</code> <code>&lt;</code><code>/style</code><code>&gt;</code> <code>&lt;</code><code>/head</code><code>&gt;</code> <code>&lt;body&gt;</code> <code>&lt;h1&gt;Welcome to nginx!&lt;</code><code>/h1</code><code>&gt;</code> <code>&lt;p&gt;If you see this page, the nginx web server is successfully installed and</code> <code>working. Further configuration is required.&lt;</code><code>/p</code><code>&gt;</code> &nbsp; <code>&lt;p&gt;For online documentation and support please refer to</code> <code>&lt;a href=</code><code>"http://nginx.org/"</code><code>&gt;nginx.org&lt;</code><code>/a</code><code>&gt;.&lt;br/&gt;</code> <code>Commercial support is available at</code> <code>&lt;a href=</code><code>"http://nginx.com/"</code><code>&gt;nginx.com&lt;</code><code>/a</code><code>&gt;.&lt;</code><code>/p</code><code>&gt;</code> &nbsp; <code>&lt;p&gt;&lt;em&gt;Thank you&nbsp;</code><code>for</code>&nbsp;<code>using nginx.&lt;</code><code>/em</code><code>&gt;&lt;</code><code>/p</code><code>&gt;</code> <code>&lt;</code><code>/body</code><code>&gt;</code> <code>&lt;</code><code>/html</code><code>&gt;</code> &nbsp; <code>同理验证到另外一个节点机上的service的可访问性也是ok的</code> <code>[root@k8s-master kubermange]</code><code># ssh 182.48.115.239 curl -s 10.254.163.249:8001</code> &nbsp; <code>由此可见，从前面部署复制器的部分可以知道nginx Pod运行在182.48.115.238和182.48.115.239这两个节点上。</code> <code>从这两个节点上访问我们的服务来体现Service Cluster IP在所有集群节点的可到达性。</code> &nbsp; <code>3）部署外部可访问的nginx service-------------------------------------------------------------------</code> <code>下面我们创建NodePort类型的Service，这种类型的Service在集群外部是可以访问。下表是本文用的配置文件：</code> <code>[root@k8s-master kubermange]</code><code># vim nginx-service-nodeport.yaml</code> <code>apiVersion: v1</code> <code>kind: Service</code> <code>metadata:</code> <code>&nbsp;&nbsp;</code><code>name: nginx-service-nodeport</code> <code>spec:</code> <code>&nbsp;&nbsp;</code><code>ports:</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;</code><code>- port: 8000</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;</code><code>targetPort: 80</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;</code><code>protocol: TCP</code> <code>&nbsp;&nbsp;</code><code>type</code><code>: NodePort</code> <code>&nbsp;&nbsp;</code><code>selector:</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;</code><code>name: nginx</code> &nbsp; &nbsp; <code>执行下面的命令创建service:</code> <code>[root@k8s-master kubermange]</code><code># kubectl -s http://182.48.115.237:8080 create -f ./nginx-service-nodeport.yaml</code> <code>service&nbsp;</code><code>"nginx-service-nodeport"</code>&nbsp;<code>created</code> <code>[root@k8s-master kubermange]</code><code># kubectl -s http://182.48.115.237:8080 get service</code> <code>NAME&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; CLUSTER-IP&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; EXTERNAL-IP&nbsp;&nbsp; PORT(S)&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; AGE</code> <code>kubernetes&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 10.254.0.1&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; &lt;none&gt;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 443</code><code>/TCP</code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;<code>2h</code> <code>nginx-service-clusterip&nbsp;&nbsp; 10.254.163.249&nbsp;&nbsp; &lt;none&gt;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 8001</code><code>/TCP</code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;<code>13m</code> <code>nginx-service-nodeport&nbsp;&nbsp;&nbsp; 10.254.146.68&nbsp;&nbsp;&nbsp; &lt;nodes&gt;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 8000:31298</code><code>/TCP</code>&nbsp;&nbsp;&nbsp;<code>22s</code> &nbsp; <code>使用下面的命令获得这个service的节点级别的端口：</code> <code>[root@k8s-master kubermange]</code><code># kubectl -s http://182.48.115.237:8080 describe service nginx-service-nodeport 2&gt;/dev/null | grep NodePort</code> <code>Type:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; NodePort</code> <code>NodePort:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; &lt;</code><code>unset</code><code>&gt; 31298</code><code>/TCP</code> &nbsp; <code>验证service的可访问性（访问节点）：</code> <code>上面的输出告诉我们这个Service的节点级别端口是31298。下面我们验证这个Service的工作情况：</code> <code>[root@k8s-master kubermange]</code><code># curl 182.48.115.238:31298</code> <code>&lt;!DOCTYPE html&gt;</code> <code>&lt;html&gt;</code> <code>&lt;</code><code>head</code><code>&gt;</code> <code>&lt;title&gt;Welcome to nginx!&lt;</code><code>/title</code><code>&gt;</code> <code>&lt;style&gt;</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;</code><code>body { </code> <code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;</code><code>width: 35em;</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;</code><code>margin: 0 auto;</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;</code><code>font-family: Tahoma, Verdana, Arial, sans-serif;</code> <code>&nbsp;&nbsp;&nbsp;&nbsp;</code><code>}</code> <code>&lt;</code><code>/style</code><code>&gt;</code> <code>&lt;</code><code>/head</code><code>&gt;</code> <code>&lt;body&gt;</code> <code>&lt;h1&gt;Welcome to nginx!&lt;</code><code>/h1</code><code>&gt;</code> <code>&lt;p&gt;If you see this page, the nginx web server is successfully installed and</code> <code>working. Further configuration is required.&lt;</code><code>/p</code><code>&gt;</code> &nbsp; <code>&lt;p&gt;For online documentation and support please refer to</code> <code>&lt;a href=</code><code>"http://nginx.org/"</code><code>&gt;nginx.org&lt;</code><code>/a</code><code>&gt;.&lt;br/&gt;</code> <code>Commercial support is available at</code> <code>&lt;a href=</code><code>"http://nginx.com/"</code><code>&gt;nginx.com&lt;</code><code>/a</code><code>&gt;.&lt;</code><code>/p</code><code>&gt;</code> &nbsp; <code>&lt;p&gt;&lt;em&gt;Thank you&nbsp;</code><code>for</code>&nbsp;<code>using nginx.&lt;</code><code>/em</code><code>&gt;&lt;</code><code>/p</code><code>&gt;</code> <code>&lt;</code><code>/body</code><code>&gt;</code> <code>&lt;</code><code>/html</code><code>&gt;</code> &nbsp; <code>同理验证到另外一个节点机上的service的可访问性也是ok的</code> <code>[root@k8s-master kubermange]</code><code># curl 182.48.115.239:31298</code> &nbsp; <code>----------------------------------------------------------</code> <code>登录另外两个节点机上，发现已经创建了nginx应用容器</code> <code>[root@k8s-node-1 ~]</code><code># docker ps</code> <code>CONTAINER ID&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; IMAGE&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; COMMAND&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; CREATED&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; STATUS&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; PORTS&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; NAMES</code> <code>620d9171a42c&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; docker.io</code><code>/nginx</code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;<code>"nginx -g 'daemon off"</code>&nbsp;&nbsp;&nbsp;<code>19 minutes ago&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; Up 19 minutes&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; k8s_nginx.3d610115_nginx-controller-f0j9c_default_eaa0497b-3be5-11e7-a8a1-52540030ba6d_a6cde2e2</code> <code>01facbbbe7cb&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; registry.access.redhat.com</code><code>/rhel7/pod-infrastructure</code><code>:latest&nbsp;&nbsp;&nbsp;</code><code>"/pod"</code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;<code>19 minutes ago&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; Up 19 minutes&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; k8s_POD.a8590b41_nginx-controller-f0j9c_default_eaa0497b-3be5-11e7-a8a1-52540030ba6d_d2dd947d</code> &nbsp; <code>[root@k8s-node-2 ~]</code><code># docker ps</code> <code>CONTAINER ID&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; IMAGE&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; COMMAND&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; CREATED&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; STATUS&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; PORTS&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; NAMES</code> <code>308749352e55&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; docker.io</code><code>/nginx</code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;<code>"nginx -g 'daemon off"</code>&nbsp;&nbsp;&nbsp;<code>30 minutes ago&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; Up 30 minutes&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; k8s_nginx.3d610115_nginx-controller-v219k_default_eaa02644-3be5-11e7-a8a1-52540030ba6d_7d54d433</code> <code>cde94e406f9a&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; registry.access.redhat.com</code><code>/rhel7/pod-infrastructure</code><code>:latest&nbsp;&nbsp;&nbsp;</code><code>"/pod"</code>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;<code>30 minutes ago&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; Up 30 minutes</code> </td> 
 </tr> 
 </tbody> 
</table>

![907596-20170519010012260-1153248634.png][]

![907596-20170519005955853-934020767.png][]

\------------------------------------------------------------------------------------------------------------------------

![907596-20170519111142635-1357749622.png][]

![907596-20170519111617463-1331861280.png][]

原文地址：[https://www.cnblogs.com/kevingrace/p/5575666.html][https_www.cnblogs.com_kevingrace_p_5575666.html]

[907596-20170515171832432-144042188.png]: /images/20220518/9ab1a5ca4d3d4ecd900fecfb73433420.png
[907596-20170519001052713-1701525727.png]: /images/20220518/bcb8e82d7ba449bea1626c9182c62ff5.png
[907596-20170515140634119-357639569.png]: /images/20220518/c42970f04e9e40f683975c553ffae714.png
[907596-20170519003144807-312268129.jpg]: /images/20220518/170d57e136a842f7aff1d9f420e32f88.png
[907596-20170519010012260-1153248634.png]: /images/20220518/97d99a115ae140a08b9c3dbd4af7b9fc.png
[907596-20170519005955853-934020767.png]: /images/20220518/c2996437de4b4707beef3192a9b636ab.png
[907596-20170519111142635-1357749622.png]: /images/20220518/e0a2d7e7344840f682b4b4d70f1de0f5.png
[907596-20170519111617463-1331861280.png]: /images/20220518/abd5dd4289004669ab817fedfabc0b12.png
[https_www.cnblogs.com_kevingrace_p_5575666.html]: https://www.cnblogs.com/kevingrace/p/5575666.html