IT运维监控平台

布满荆棘的人生 2023-08-17 16:57 150阅读 0赞

> 最近设计了公司监控系统，已向高层汇报；会上沟通还不错，领导也非常认可
> 
> 这边现在来总结分享设计思路及监控方案

## 背景条件 ##

首先是业务系统多、团队多，而且还有不少流动的厂商及外包人员

所以这里面就有一个规划的问题，包括监控点、日志格式是否统一

目前上述这些都是单打独斗，无整体规划的

其次是目前对监控系统的需求性不高，底层有公有云提供的稳定服务和简单监控

业务层面有业务人员报障，也有业务运维针对关键业务编写了监控脚本

其余的非关键业务，则对服务的可用性没有那么高要求

最后是已经有部分监控系统在做测试及试用：Grafana/Prometheus/ELK

基于以上背景，和公司提出的一些需求（特别是网络拓扑图），在研究了主流的开源产品后

Zabbix/Prometheus/OpenFalcon

数据处理还是使用zabbix吧，开箱即用，web管理界面做的好

## 架构概要 ##

![m9Ktyt.png][]

由grafana负责数据可视化，zabbix系统负责数据的采集和分析处理

当前zabbix版本为4.2，感觉更加开放了，支持数据推送、支持Prometheus

但是仍然有不少缺点，api有点啰嗦（个人觉得），web操作繁琐

所以我大量使用了zabbix的discovery功能生成监控

## 管理平台 ##

![m9GgC8.png][]

为了方便（偷懒）监控配置，单独写了一个统一管理平台，可以说是一种CMDB

但是不想把话说那么满，仅是用来维护监控对象的一套系统

同样是 django + jq 一把梭

把django用成不是django的样子，改天可以再单独写写这个内容

![m9GL2F.png][]

通过录入一些业务主机的基本信息，再辅以zabbix的自动发现，可以快速生成监控配置

部分 discovery 脚本：

discovery_app_monitor_script.py
    discovery_business_child_node.py
    discovery_business.py
    discovery_db_backup_ip.py
    discovery_host_monitor.py
    discovery_jvm_app.py
    discovery_wan_ip.py

我觉得挺方便的，各位业务运维同仁可以自己维护信息，我就可以休息了

同时也可以录入系统间调用关系，达到监控业务A -> B端调用是否正常等等

利用这些信息用来绘制一个系统的拓扑图，但目前仅监控了由A -> B端端口

更详细的业务层面探测，还未开始进行

![m9JosH.png][]

根据信息绘制的关系图

[![m9JTLd.md.png][]][m9JTLd.md.png 1]

本来想根据关系直接生成zabbix上的系统拓扑图，但是内容太多，一时掌握不了

目前还是手动配置中

## 后续展望 ##

对于整个框架我觉得是没有什么问题了，当前的能力也就做到这样了

继续在细节上完善，引入日志分析，告警聚合等

外部界面再加个壳就可以做成产品出售了，呵呵。

转载于:https://www.cnblogs.com/tutuye/p/11351813.html

[m9Ktyt.png]: /images/20230809/57770f1b68ea4e198d6062aedace2374.png
[m9GgC8.png]: /images/20230809/38b5a29adf3c42e698ad77b9fa853a08.png
[m9GL2F.png]: /images/20230809/99e0829ca5624cae99d1fbf91e90d03d.png
[m9JosH.png]: /images/20230809/564db01d69fd48da8d077ce75fba22f5.png
[m9JTLd.md.png]: /images/20230809/9e1a0ed3d1e642bba54b18508496d612.png
[m9JTLd.md.png 1]: https://imgchr.com/i/m9JTLd

发表评论取消回复

表情：

评论列表（有 0 条评论，150人围观）

还没有评论，来说两句吧...

相关阅读

相关运维监控之路

概述这是监控告警产品专题系列第一篇文章，涉及的主要内容为监控产品设计的一些相关基础知识，算是这个系列文章的一个索引。该篇会主要涉及到以下主要内容后续三篇文章讲

偏执的太偏执、/ 2024年02月18日 15:09/ 0 赞/ 66 阅读

相关运维监控系列（1）- IT监控系统简介

运维监控系统监控系统是实现自动化运维的基础，在一个IT环境中会存在各种各样的设备，例如，硬件基础设施需要监控；软件运行状态需要监控；程序中的API需要监控；程序执行脚本

以你之姓@/ 2023年10月10日 11:37/ 0 赞/ 62 阅读

相关 IT运维监控平台

> 最近设计了公司监控系统，已向高层汇报；会上沟通还不错，领导也非常认可 > > 这边现在来总结分享设计思路及监控方案背景条件首先是业务系统多、团队多，而且还有不

布满荆棘的人生/ 2023年08月17日 16:57/ 0 赞/ 151 阅读

相关工业互联网平台核心技术之七：运维技术-无监控，不运维

[https://blog.csdn.net/iot\_research/article/details/84203182][https_blog.csdn.net_iot_r

心已赠人/ 2023年06月03日 07:55/ 0 赞/ 40 阅读

相关运维监控体系

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ub

青旅半醒/ 2023年01月12日 01:55/ 0 赞/ 172 阅读

相关 IT运维经验小结

从最基础的windows局域网维护，后来学习active directory，isa,exchange。后来去考CCNA，想从事网络方面的工作，发现CCIE实在是难学，需要太多

- 日理万妓/ 2022年10月28日 15:23/ 0 赞/ 68 阅读

相关金融行业IT运维监控体系建设

IT运维体系的架构中，IT运维监控是IT运维体系中重要的组成部分，作为运维的生命线，安全生产保障的生命线仍需强调。运维的安全生产保障，主要以“监、管、控”为核心，其中“监”则主

灰太狼/ 2022年09月05日 12:51/ 0 赞/ 231 阅读

相关 Solr 运维管理监控

摘要：有时候需要对Solr状态进行监控，但是Solr自身不支持这种功能。需要借助一个工具Cloudera Manager。 cloudera manager四大功能

缺乏、安全感/ 2022年06月11日 01:13/ 0 赞/ 323 阅读

相关运维监控数据模型

Counter（计数器）模型计数器是一个累积指标，单调递增，其值仅能增长或重置为0。类似于“服务请求数”、“任务完成数”和“错误数”等可以使用计数器模型，而“进程数”等可

谁借莪１个温暖的怀抱￠/ 2022年04月22日 05:48/ 0 赞/ 392 阅读

相关数据库运维平台

1、数据库集中管理，通过浏览器网页方式对数据库在线管理，支持MySQL，Oracle，DB2，PostgreSQL， SQL Server，mongoDB，Hive，S

傷城~/ 2021年12月12日 00:34/ 0 赞/ 469 阅读