Linux服务器内存、CPU、文件系统、磁盘IO性能以及网络连通性shell巡检

系统管理员 2022-05-24 07:40 157阅读 0赞

shell自动巡检服务器基础配置

每个项目都要部署在服务器上，那么服务器的安全性能和一些基本情况是我们需要了解的，比如服务器CPU、内存、文件系统、磁盘IO、还有一些网络连通性等等，这些操作很多项目组都是安排一个特定的巡检人员来完成，那么为什么不写一个shell脚本来自动巡检服务器而代替人工操作呢，下面给出巡检的标准与shell脚本代码：  
  
一、巡检标准

### 1.1 CPU利用率巡检 ###

1) 执行巡检指令（红色字体部分）：top，结果示例如下，该显示结果会每隔3秒刷新一次。按【q】键可退出巡检。

![Center][]

2) 关注图中红色标记部分，连续三次及以上低于20%，认为CPU占用率过高，系统存在风险。

### 1.2 内存利用率巡检 ###

1) 执行巡检指令（红色字体部分）： free -g，(-g的意义是单位为GB)结果示例如下。

![20170309174612277][]

2) 关注图中红色标记部分，若低于总量的20% (GB)，认为内存占用率过高，系统存在风险。

### 1.3 文件系统巡检 ###

1) 执行巡检指令（红色字体部分）：df -h，结果示例如下。

![20170309174808874][]

2) 关注图中红色标记部分，若任意一条记录高于90%，认为磁盘空间占用率过高，系统存在风险。

### 1.4 磁盘IO性能巡检    ###

1) 执行巡检指令（红色字体部分）：iostat  –x 2 5，结果示例如下，该显示结果会每隔2秒刷新一次，共执行5次。

![20170309175044767][]

2) 关注图中红色标记部分，若scvtm超过15，且%util接近100连续三次及以上,认为磁盘IO可能存在瓶颈，系统存在风险。

### 1.5 网络连通性巡检 ###

1）执行巡检指令（红色字体部分）：ping -s 4096 -c 5  135.0.51.12，结果示例如下。

![20170309175221614][]

2) 关注图中红色标记部分，若高于0%，认为数据库到该目标IP之间的网络不稳定，存在丢包，系统存在风险。

二、巡检shell代码

巡检结果若系统正常则不管，异常则输出到指定文件里面。

\[plain\]  [view plain][]   [copy][view plain]

1.  \#!/bin/bash  
2.  \#admin:spirits  
3.    
4.  \#\*\*\*\*\*\*\*\*\*\*\*CPU检测\*\*\*\*\*\*\*\*\*\*\*\*\*  
5.  echo "\`date '+%Y年%m月%d日 %H:%M:%S'\` 数据库服务器硬件情况开始巡检。。。"  
6.    
7.  top -bn 6 >>top  
8.    
9.  grep -n "%id" top >> newtop  
10.   
11. grep -n "zombie" top >> insisttop  
12.   
13. top1=\`cat  newtop   | awk '\{print $5\}' | sed -n 4p | sed 's/%//g' |sed 's/id,//g'\`  
14. top2=\`cat  newtop   | awk '\{print $5\}' | sed -n 5p | sed 's/%//g' |sed 's/id,//g'\`  
15. top3=\`cat  newtop   | awk '\{print $5\}' | sed -n 6p | sed 's/%//g' |sed 's/id,//g'\`  
16.   
17. top4=\`cat insisttop | awk '\{print $10\}' | sed -n 2p | sed 's/%//g' |sed 's/id,//g'\`  
18.   
19. \#echo "top4:$top4"  
20.   
21. if \[ $top4 -gt 0 \]  
22.   
23. then   
24.     echo "\`date '+%Y年%m月%d日 %H:%M:%S'\` 采集处理服务器上出现僵尸进程，巡检程序将自动kill该进程，如需人工确认请执行命令top后再执行ps -A -ostat,ppid,pid,cmd | grep -e '^\[Zz\]'来确认是否将僵尸进程杀死"  >> ./newreport.txt  
25.   
26.     ps -A -o stat,ppid,pid,cmd | grep -e '^\[Zz\]' | awk '\{print $2\}' | xargs kill -9  
27.   
28. else   
29.     echo "\`date '+%Y年%m月%d日 %H:%M:%S'\` 采集处理服务器上无僵尸进程正常运行！"  
30. fi  
31.   
32. a=$\{top1:0:2\}  
33. b=$\{top2:0:2\}  
34. c=$\{top3:0:2\}  
35.   
36. echo "top1: $a"  
37. echo "top2: $b"  
38. echo "top3: $c"  
39.   
40.   
41.  if \[  $a    -lt  20  \]&&\[  $b    -lt  20  \]&&\[  $c    -lt  20  \]    ; then  
42.   
43.     echo  "\`date '+%Y年%m月%d日 %H:%M:%S'\` 数据库服务器CPU占用率不正常，top取到的值是$top1,$top2,$top3,小于参考值20，请及时处理！" >> ./newreport.txt  
44.   
45. else  
46.   
47.   echo "CPU占用率正常!"   
48.   
49. fi  
50.   
51. rm -rf top  
52.   
53. rm -rf newtop  
54.   
55. rm -rf insisttop  
56.   
57. \#\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*内存检测\*\*\*\*\*\*\*\*\*\*\*  
58. free1=\`free -g | awk '\{print $4\}' | sed -n 3p | sed 's/%//g' |sed 's/t//g'\`  
59.   
60. total=\`free -g | awk '\{print $2\}' | sed -n 2p | sed 's/%//g' |sed 's/t//g'\`  
61.   
62. canshu=0.2  
63.   
64. tempd=\`echo $total $canshu |awk '\{print $1\*$2\}'\`  
65.   
66. biaozhun=$\{tempd%.\*\}  
67.   
68. if \[ $free1  -le  $biaozhun  \]  ;  then   
69. echo "\`date '+%Y年%m月%d日 %H:%M:%S'\`  数据库服务器内存占用率过高，free -g取到的值是$free1,小于等于参考值$biaozhun，请及时处理！" >> ./newreport.txt  
70.   
71. else  
72.   
73. echo "内存占用率正常！"  
74.   
75. fi  
76.   
77. \#\*\*\*\*\*\*\*\*\*\*\*\*\*\*文件系统巡检\*\*\*\*\*\*\*\*\*\*  
78. df1=\`df -h | awk '\{print $5\}' | sed -n 2p | sed 's/%//g'\`  
79. df2=\`df -h | awk '\{print $5\}' | sed -n 3p | sed 's/%//g'\`  
80. df3=\`df -h | awk '\{print $5\}' | sed -n 4p | sed 's/%//g'\`  
81. df4=\`df -h | awk '\{print $5\}' | sed -n 5p | sed 's/%//g'\`  
82. df5=\`df -h | awk '\{print $5\}' | sed -n 6p | sed 's/%//g'\`  
83.   
84.  if \[ $df1 -gt  90 \]||\[ $df2  -gt  90 \]||\[ $df3 -gt  90 \]||\[ $df4 -gt  90 \]||\[ $df5 -gt  90 \] ; then  
85.   
86.     echo "\`date '+%Y年%m月%d日 %H:%M:%S'\` 数据库服务器磁盘占用率过高！df -h取到的值是$df1,$df2,$df3,$df4,$df5,参考值是90，若其中一个或一个以上大于参考值，请及时处理！" >> ./newreport.txt  
87.   
88. else  
89.   
90.     echo "磁盘占用率正常！"  
91.   
92. fi  
93.   
94. \#\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*磁盘IO性能巡检\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*  
95. iostat -x 2 5 >>iostat.txt  
96.   
97. scvtm1=" \`cat  iostat.txt  | awk '\{print $11\}' | sed -n 16p | sed 's/%//g' \`"  
98.   
99. scvtm2="\` cat  iostat.txt  | awk '\{print $11\}' | sed -n 17p | sed 's/%//g'\`"  
100.   
101. scvtm3="\` cat  iostat.txt  | awk '\{print $11\}' | sed -n 18p | sed 's/%//g'\`"  
102.   
103. scvtm4="\` cat  iostat.txt  | awk '\{print $11\}' | sed -n 19p | sed 's/%//g'\`"  
104.   
105. scvtm13="\` cat  iostat.txt  | awk '\{print $11\}' | sed -n 25p | sed 's/%//g'\`"  
106.   
107. scvtm6=" \`cat  iostat.txt  | awk '\{print $11\}' | sed -n 26p | sed 's/%//g' \`"  
108.   
109. scvtm7="\` cat  iostat.txt  | awk '\{print $11\}' | sed -n 27p | sed 's/%//g'\`"  
110.   
111. scvtm8="\` cat  iostat.txt  | awk '\{print $11\}' | sed -n 28p | sed 's/%//g'\`"  
112.   
113. scvtm9="\` cat  iostat.txt  | awk '\{print $11\}' | sed -n 34p | sed 's/%//g'\`"  
114.   
115. scvtm10="\` cat  iostat.txt  | awk '\{print $11\}' | sed -n 35p | sed 's/%//g'\`"  
116.   
117. scvtm11="\` cat  iostat.txt  | awk '\{print $11\}' | sed -n 36p | sed 's/%//g'\`"  
118.   
119. scvtm12="\` cat  iostat.txt  | awk '\{print $11\}' | sed -n 37p | sed 's/%//g'\`"  
120.   
121.   
122.   
123. util1="\`cat  iostat.txt  | awk '\{print $12\}' | sed -n 16p | sed 's/%//g'\`"  
124.   
125. util2="\` cat  iostat.txt  | awk '\{print $12\}' | sed -n 17p | sed 's/%//g'\`"  
126.   
127. util3="\` cat  iostat.txt  | awk '\{print $12\}' | sed -n 18p | sed 's/%//g'\`"  
128.   
129. util4="\` cat  iostat.txt  | awk '\{print $12\}' | sed -n 19p | sed 's/%//g'\`"  
130.   
131. util5="\` cat  iostat.txt  | awk '\{print $12\}' | sed -n 25p | sed 's/%//g'\`"  
132.   
133. util6=" \`cat  iostat.txt  | awk '\{print $12\}' | sed -n 26p | sed 's/%//g' \`"  
134.   
135. util7="\` cat  iostat.txt  | awk '\{print $12\}' | sed -n 27p | sed 's/%//g'\`"  
136.   
137. util8="\` cat  iostat.txt  | awk '\{print $12\}' | sed -n 28p | sed 's/%//g'\`"  
138.   
139. util9="\` cat  iostat.txt  | awk '\{print $12\}' | sed -n 34p | sed 's/%//g'\`"  
140.   
141. util10="\` cat  iostat.txt  | awk '\{print $12\}' | sed -n 35p | sed 's/%//g'\`"  
142.   
143. util11="\` cat  iostat.txt  | awk '\{print $12\}' | sed -n 36p | sed 's/%//g'\`"  
144.   
145. util12="\` cat  iostat.txt  | awk '\{print $12\}' | sed -n 37p | sed 's/%//g'\`"  
146.   
147. \#\*\*\*\*\*\*\*\*\*\*\*1/2/3/4\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*  
148.   
149. maxa=\`echo "$scvtm1 $scvtm2 $scvtm3 $scvtm4" | awk '\{for(i=1;i<=NF;i++)$i>a?a=$i:a\}END\{print a\}'\`  
150.   
151. \#\*\*\*\*\*\*\*\*\*\*\*\*\*13/6/7/8/\*\*\*\*\*\*\*\*\*\*\*\*\*\*  
152.   
153. maxb=\`echo "$scvtm13 $scvtm6 $scvtm7 $scvtm8" | awk '\{for(i=1;i<=NF;i++)$i>a?a=$i:a\}END\{print a\}'\`  
154.   
155. \#\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*9/10/11/12\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*  
156.   
157. maxc=\`echo "$scvtm9 $scvtm10 $scvtm11 $scvtm12" | awk '\{for(i=1;i<=NF;i++)$i>a?a=$i:a\}END\{print a\}'\`  
158.   
159. \#\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*util1/2/3/4\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*  
160.   
161. maxd=\`echo "$util1 $util2 $util3 $util4" | awk '\{for(i=1;i<=NF;i++)$i>a?a=$i:a\}END\{print a\}'\`  
162.   
163.   
164. \#\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*util5/6/7/8\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*  
165.   
166. maxe=\`echo "$util5 $util6 $util7 $util8" | awk '\{for(i=1;i<=NF;i++)$i>a?a=$i:a\}END\{print a\}'\`  
167.   
168. \#\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*util9/10/11/12\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*  
169.   
170. maxf=\`echo "$util9 $util10 $util11 $util12" | awk '\{for(i=1;i<=NF;i++)$i>a?a=$i:a\}END\{print a\}'\`  
171.   
172. \#\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*做判断\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*  
173. m=$\{maxa:0:1\}  
174.   
175. n=$\{maxb:0:1\}  
176.   
177. h=$\{maxc:0:1\}  
178.   
179. k=$\{maxd:0:1\}  
180.   
181. l=$\{maxe:0:1\}  
182.   
183. o=$\{maxf:0:1\}  
184.   
185.   
186. if \[  $m -ge 15 \]&&\[ $k -ge 99 \]&&\[ $k -lt 100 \]$$\[  $n -ge 15 \]&&\[ $l -ge  99 \]&&\[ $l -lt 100 \]&&\[  $h -ge 15\]&&\[ $o -ge 99 \]&&\[ $o -lt 100 \]  
187.   
188. then  
189.   
190.     echo "\`date '+%Y年%m月%d日 %H:%M:%S'\`  数据库服务器磁盘IO存在瓶颈，请及时处理！" >> ./newreport.txt  
191.   
192. else  
193.   
194.    echo "磁盘IO正常！"  
195.   
196. fi  
197.   
198. rm -rf ./iostat.txt  
199.   
200. \#\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*网络连通性检测\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*  
201.   
202. network1=\`ping -s 4096 -c 5  135.0.51.15 | awk '\{print $6\}' | sed -n 9p | sed 's/%//g' |sed 's/t//g'\`  
203.   
204. if \[ $network1 -gt 0 \]  
205.   
206. then   
207.   
208.    echo "\`date '+%Y年%m月%d日 %H:%M:%S'\` 数据库服务器到该目标IP之间的网络不稳定，ping取到的值是$network1,大于参考值是0，系统存在风险，请及时处理！"  >> ./newreport.txt  
209.   
210. else   
211.   
212.    echo "网络连通性正常！"  
213.   
214. fi  
215.   
216. echo "\`date '+%Y年%m月%d日 %H:%M:%S'\` 数据库服务器硬件情况巡检结束！"

[Center]: /images/20220524/7f33eb975e594e4c827aac83c98381a6.png
[20170309174612277]: /images/20220524/d9a8ec6feba54369b0629281fcb886a4.png
[20170309174808874]: /images/20220524/3a67076b177b48a1a19df1daab40a25d.png
[20170309175044767]: /images/20220524/8d6bd9b6994545dfae4f6ad9a33631d3.png
[20170309175221614]: /images/20220524/2019870084c54dc0b07195495bda9ab5.png
[view plain]: https://blog.csdn.net/u013144287/article/details/60964012#