nginxelk日志收集

柔光的暖阳◎ 2023-10-11 18:57 64阅读 0赞

### elk 如何创建新的索引 ###

创建kibana索引

若只需要收集显示nginx的访问日志，则可以建立一个名为nginx+时间的索引

若是需要收集一个服务器下的多个服务日志，则可以在一个conf下添加多个input并根据type来区分和实现

192.168.2.112ES/kibana

192.168.2.118logstash/nginx

192.168.2.117logstash/mysql/nginx

建立nginx索引

1)在118服的logstash/etc目录下建立的nginxlog.conf，添加

input\{

file\{

path=>"/usr/local/nginx/logs/access.log"

type=>"nginx"

output\{

elasticsearch\{

hosts=>"192.168.2.112:9200"

index=>"nginx-%\{+YYYY.MM.dd\}"

\}12345678910111213

其中，index即代表对应的索引名称

2)然后启动logstash

\[root@localhostetc\]\#pwd/usr/local/logstash/etc

\[root@localhostetc\]\#../bin/logstash-fnginxlog.conf1234

3)登陆kibana设置索引

4)然后手动访问nginx页面后，可以在kibana的discover界面看到

收集nginx日志和mysql日志

1)把118服的logstash目录复制到117服对应目录下

scp-rlogstash/\*root@192.168.2.117:/usr/local/logstash1

2)在117服logstash/etc目录下建立all.conf

input\{

file\{

path=>"/usr/local/nginx/logs/access.log"

type=>"nginx"

input\{

file\{

path=>"/var/log/mysqld.log"

type=>"mysql"

output\{if\[type\]=="nginx"\{

elasticsearch\{

hosts=>"192.168.2.112:9200"

index=>"nginx-%\{+YYYY.MM.dd\}"

\}if\[type\]=="mysql"\{

elasticsearch\{

hosts=>"192.168.2.112:9200"

index=>"mysql-%\{+YYYY.MM.dd\}"

\}1234567891011121314151617181920212223242526272829

3)在kibana页面建立mysql索引

4)启动logstash

\[root@host107etc\]\#pwd/usr/local/logstash/etc

\[root@host107etc\]\#../bin/logstash-fall.conf1234

5)然后启动及关闭mysql服务，就可以看到日志数据

6)同样的，访问nginx页面后，也会收到nginx日志数据

1)其中上面的host列显示0.0.0.0，是因为没有设置主机名，在/etc/hosts下加上

127.0.0.1hostmysqlnginx

然后hostnamehostmysqlnginx

重启下logstash，就可以看到host

![nginxelk日志收集\_nginxelk日志收集][nginxelk_nginxelk]

### linux基础培训课程哪个好 ###

现在linux培训机构那么多，网络消息铺天盖地，具体选择哪家机构，最好还是自己去考察一下，现在不同城市linux机构有很多，最好自己去试听一下，看看整体机构的质量如何，是否符合你的要求和标准。

[nginxelk_nginxelk]: https://img2.baidu.com/it/u=1592156891,2735266464&fm=26&fmt=auto

发表评论取消回复

表情：

评论列表（有 0 条评论，64人围观）

还没有评论，来说两句吧...

相关阅读

相关 ELK 日志收集

文章目录方案部署 FileBeat helm部署 yaml 部署部署 Elastic 安装 eck

我会带着你远行/ 2024年04月03日 06:53/ 0 赞/ 110 阅读

相关日志收集 grafana-loki

文章目录部署 grafana-loki 部署 grafana 配置 loki 源配置节点大盘部署 grafana-loki 官方文档

逃离我推掉我的手/ 2024年02月05日 12:36/ 0 赞/ 43 阅读

相关 nginxelk日志收集

elk 如何创建新的索引创建kibana索引若只需要收集显示nginx的访问日志，则可以建立一个名为nginx+时间的索引若是需要收集一个服务器下的多个服务日志

柔光的暖阳◎/ 2023年10月11日 18:57/ 0 赞/ 65 阅读

相关 ELK 日志收集系统

ELK是Elasticsearch、Logstash、Kibana三大开源框架首字母大写简称。 Elasticsearch是一个基于Lucene、分布式、通过Res

r囧r小猫/ 2023年07月08日 10:27/ 0 赞/ 97 阅读

相关 Flume日志收集

一、Flume介绍 Flume是一个分布式、可靠、和高可用的海量日志聚合的系统，支持在系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数

向右看齐/ 2022年08月27日 05:42/ 0 赞/ 287 阅读

相关 Flume日志收集

一、Flume介绍 Flume是一个分布式、可靠、和高可用的海量日志聚合的系统，支持在系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写

亦凉/ 2022年07月16日 09:55/ 0 赞/ 317 阅读

相关 flume：日志收集工具

1. 多路复用：一个 source ----->多个 (channel----sink) 2. 故障切换: 一个（sourc

傷城~/ 2022年05月14日 12:54/ 0 赞/ 328 阅读

相关 ELK-日志收集工具nxlog

ELK-日志收集工具nxlog 文章目录 ELK-日志收集工具nxlog 前言安装语法宏变量

淩亂°似流年/ 2022年03月15日 07:08/ 0 赞/ 845 阅读

相关【学习Flume日志收集框架】

> 你晓得伐 <table> <thead> <tr> <th>单词</th> <th>含义</th> <th>拓展</th> <

╰+攻爆jí腚メ/ 2022年02月16日 10:53/ 0 赞/ 343 阅读

相关 Kubernetes容器日志收集

日志采集方式日志从传统方式演进到容器方式的过程就不详细讲了，可以参考一下这篇文章[Docker日志收集最佳实践][Docker]，由于容器的漂移、自动伸缩等特性，日志收

迈不过友情╰/ 2021年11月10日 05:10/ 0 赞/ 475 阅读