Prometheus+Grafana监控应用程序(process-exporter)

阳光穿透心脏的1/2处 2023-06-08 03:10 23阅读 0赞

Prometheus是一套开源的监控&报警&时间序列数据库的组合，Prometheus监控服务器的基础资源(如：内存、CPU、网络等资源)，也可以监控Kafka、MySQL、EMQ等消息中间件、日志监控，当然也可以监控某个进程(应用程序)或某几个进程(进程组)。

本文主要通过process-exporter 对进程进行监控，并介绍Process-exporter的使用说明。

Prometheus+Grafana的安装配置本文就不在累述，可参考： [https://blog.csdn.net/skh2015java/article/details/102572363][https_blog.csdn.net_skh2015java_article_details_102572363]

### process-exporter使用 ###

源码地址：[https://github.com/ncabatoff/process-exporter][https_github.com_ncabatoff_process-exporter]

下载地址：[https://github.com/ncabatoff/process-exporter/releases/tag/v0.5.0][https_github.com_ncabatoff_process-exporter_releases_tag_v0.5.0]

process-exporter可以使用命令行参数也可以指定配置文件启动

**  命令行常用的参数：**

Usage of process-exporter:
      -children
            if a proc is tracked, track with it any children that aren't part of their own group (default true)
      -config.path string
            path to YAML config file
      -debug
            log debugging information to stdout
      -man
            print manual
      -namemapping string
            comma-separated list, alternating process name and capturing regex to apply to cmdline
      -once-to-stdout-delay duration
            Don't bind, just wait this much time, print the metrics once to stdout, and exit
      -procfs string
            path to read proc data from (default "/proc")
      -procnames string
            comma-separated list of process names to monitor
      -recheck
            recheck process names on each scrape
      -threads
            report on per-threadname metrics as well (default true)
      -version
            print version information and exit
      -web.listen-address string
            Address on which to expose metrics and web interface. (default ":9256")
      -web.telemetry-path string
            Path under which to expose metrics. (default "/metrics")

**配置文件：**

选择要监视的进程并将它的分组，提供命令行参数或者使用YAML配置文件。

配置模板如下：

process_names:
      - matcher1
      - matcher2
      ...
      - matcherN

例如：监控所有的服务进程

process_names:
      - name: "{
       {.Comm}}"
        cmdline:
        - '.+'

配置模板选项如下：

\{ \{.Comm\}\} 包含原始可执行文件的basename，/proc//stat 中的换句话说，2nd 字段

\{ \{.ExeBase\}\} 包含可执行文件的basename

\{ \{.ExeFull\}\} 包含可执行文件的完全限定路径

\{ \{.Username\}\} 包含有效用户的用户名

\{ \{.Matches\}\} 映射包含应用命令行tlb所产生的所有匹配项

process\_names中的每个项目都必须包含一个或多个选择器(comm，exe或cmdline), 如果存在多个选择器，则它们必须全部匹配。 每个选择器都是一个字符串列表，用于与进程的comm，argv \[0\]匹配；对于cmdline，则是一个适用于命令行的正则表达式。 cmdline regexp使用Go语法。

对于comm和exe，字符串列表是一个OR，这意味着与任何字符串匹配的任何进程都将添加到该项目的组中。

对于cmdline，正则表达式列表为AND，表示它们都必须匹配。 正则表达式中的任何捕获组都必须使用？P <name>选项为捕获分配一个名称，该名称用于填充.Matches。

例如：> ps -ef | grep redis

** redis 771 1 0 Jun05 ? 00:45:49 /usr/bin/redis-server \*:6379**

<table> 
 <tbody> 
 <tr> 
 <td style="border-color:#c0c0c0;"> { {.Comm}}&nbsp; </td> 
 <td style="border-color:#c0c0c0;"> groupname="redis-server" </td> 
 <td style="border-color:#c0c0c0;"> exe或者sh文件名称 </td> 
 </tr> 
 <tr> 
 <td style="border-color:#c0c0c0;"> { {.ExeBase}} </td> 
 <td> groupname="redis-server *:6379" </td> 
 <td> / </td> 
 </tr> 
 <tr> 
 <td style="border-color:#c0c0c0;"> { {.ExeFull}} </td> 
 <td> groupname="/usr/bin/redis-server *:6379" </td> 
 <td> ps中的进程完成信息 </td> 
 </tr> 
 <tr> 
 <td style="border-color:#c0c0c0;"> { {.Username}} </td> 
 <td> groupname="redis" </td> 
 <td> 使用进程所属的用户进行分组 </td> 
 </tr> 
 <tr> 
 <td style="border-color:#c0c0c0;"> { {.Matches}} </td> 
 <td> groupname="map[:redis]" </td> 
 <td> 表示配置到关键字“redis” </td> 
 </tr> 
 </tbody> 
</table>

### 安装使用process-exporter ###

*  下载*

wget https://github.com/ncabatoff/process-exporter/releases/download/v0.5.0/process-exporter-0.5.0.linux-amd64.tar.gz

*  解压*

tar -zxvf  process-exporter-0.5.0.linux-amd64.tar.gz

* *创建配置文件process-conf.yaml

touch process-conf.yaml

并编写配置信息：(如监控进程名为test程序)

process_names:
      - name: "{
       {.Matches}}"
        cmdline:
        - 'test'

后台启动：并指定配置文件process-conf.yaml

nohup yourPath/process-exporter  -config.path process-conf.yaml > yourLogPath/ process-exporter.stdout 2>&1 &

process-exporter默认会监听9256端口

Prometheus配置文件中添加，并重启

- job_name: 'process'
        static_configs:
        - targets: ['localhost:9256']

curl  localhost:9256/metrics |grep test

可以看到test进程相关监控的指标

**Grafana图表显示：**

process-exporter对应的dashboard为：[https://grafana.com/grafana/dashboards/249][https_grafana.com_grafana_dashboards_249]

Import即可

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3NraDIwMTVqYXZh_size_16_color_FFFFFF_t_70][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3NraDIwMTVqYXZh_size_16_color_FFFFFF_t_70 1][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3NraDIwMTVqYXZh_size_16_color_FFFFFF_t_70 2][]

最终效果图如下：

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3NraDIwMTVqYXZh_size_16_color_FFFFFF_t_70 3][]

可以看到可以监控 进程的数量，cpu，读写速率，所占内存。

感谢：

[https://blog.csdn.net/qq\_25934401/article/details/86512657][https_blog.csdn.net_qq_25934401_article_details_86512657]

[https://www.cnblogs.com/huandada/p/10431667.html][https_www.cnblogs.com_huandada_p_10431667.html]

[https_blog.csdn.net_skh2015java_article_details_102572363]: https://blog.csdn.net/skh2015java/article/details/102572363
[https_github.com_ncabatoff_process-exporter]: https://github.com/ncabatoff/process-exporter
[https_github.com_ncabatoff_process-exporter_releases_tag_v0.5.0]: https://github.com/ncabatoff/process-exporter/releases/tag/v0.5.0
[https_grafana.com_grafana_dashboards_249]: https://grafana.com/grafana/dashboards/249
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3NraDIwMTVqYXZh_size_16_color_FFFFFF_t_70]: /images/20230531/80948cd75f41437b96a5a8a3f380edc8.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3NraDIwMTVqYXZh_size_16_color_FFFFFF_t_70 1]: /images/20230531/2fa03a4190ae49c094ae8628a704db32.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3NraDIwMTVqYXZh_size_16_color_FFFFFF_t_70 2]: /images/20230531/48309416dcb44e538f7648a0d191eb8a.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3NraDIwMTVqYXZh_size_16_color_FFFFFF_t_70 3]: /images/20230531/759620345f8a4d06a5f65c21fbc170f5.png
[https_blog.csdn.net_qq_25934401_article_details_86512657]: https://blog.csdn.net/qq_25934401/article/details/86512657
[https_www.cnblogs.com_huandada_p_10431667.html]: https://www.cnblogs.com/huandada/p/10431667.html