搭建ELK环境 logstash 时间差8小时问题

电玩女神 2022-01-29 13:59 760阅读 0赞

公司线上日志是通过logstash接收并上传的，使用版本是logstash2.3，发现@timestamp经常少8个小时；

处理逻辑如下，无需修改插件源码

input \{ stdin \{\} \}  
output \{ stdout \{ codec => rubydebug \} \}  
filter \{  
  date \{  
    match => \["message","UNIX\_MS"\]\#message在实际应用中修改为自己的字段  
    target => "@timestamp"     
  \}  
 ruby \{   
   code => "event\['timestamp'\] = LogStash::Timestamp.new(event\['@timestamp'\]+ 8\*60\*60)"   
 \}  
 ruby \{  
   code => "event\['@timestamp'\]= event\['timestamp'\]"  
 \}  
 mutate \{  
   remove\_field => \["timestamp"\]  
 \}  
\}  
另外在5.x版本logstash配置有不同  
input \{ stdin \{\} \}  
output \{ stdout \{ codec => rubydebug \} \}  
filter \{  
  date \{  
    match => \["message","UNIX\_MS"\]  
    target => "@timestamp"     
  \}  
 ruby \{   
   code => "event.set('timestamp', event.get('@timestamp').time.localtime + 8\*60\*60)"   
 \}  
 ruby \{  
   code => "event.set('@timestamp',event.get('timestamp'))"  
 \}  
 mutate \{  
   remove\_field => \["timestamp"\]  
 \}  
\}

测试方法

echo '1504744911000' | ./logstash -f ~/test.conf  
\---------------------   
作者：javacoer   
来源：CSDN   
原文：https://blog.csdn.net/wuyinggui10000/article/details/77879016   
版权声明：本文为博主原创文章，转载请附上博文链接！

发表评论取消回复

表情：

评论列表（有 0 条评论，760人围观）

还没有评论，来说两句吧...

相关阅读

相关 ELK环境搭建

线上地址：http://kibana.apuscn.com/ [编辑此区域][Link 1] 什么是ELK ELK Stack 是 Elasticsearch

桃扇骨/ 2023年10月17日 16:30/ 0 赞/ 54 阅读

相关 logstash 数据采集时间差8小时问题及解决

只要在input中增加 jdbc\_default\_timezone =>"Asia/Shanghai" input \{ jdbc \{

客官°小女子只卖身不卖艺/ 2023年02月22日 13:32/ 0 赞/ 19 阅读

相关 ELK环境搭建ElasticSearch7.8.0+Logstash7.8.0+Kibana7.8.0

ELK 就是 Elasticsearch、Logstash 和 Kibana 三个软件的首字母简写,ELK可以理解为集日志（数据）收集、分析、展示的一个系统。我这边用的EL

悠悠/ 2022年12月30日 15:49/ 0 赞/ 405 阅读

相关 ELK环境搭建

一、ELK软件包准备下载相关软件 wget https://artifacts.elastic.co/downloads/elasticsearch/elastics

古城微笑少年丶/ 2022年12月17日 08:46/ 0 赞/ 188 阅读

相关【ELK】- 运行环境搭建

[2019独角兽企业重金招聘Python工程师标准>>> ][2019_Python_] ![hot3.png][] ELK ELK: ElasticSearch、Lo

叁歲伎倆/ 2022年10月02日 09:51/ 0 赞/ 267 阅读

相关 proftpd的时间差8个小时的问题

在proftpd.conf增加 TimesGMT off SetEnv TZ :/etc/localtime 我是在<Global>里增

布满荆棘的人生/ 2022年09月28日 13:12/ 0 赞/ 195 阅读

相关 ELK环境搭建之logstash

下载地址 [https://www.elastic.co/downloads/logstash][https_www.elastic.co_downloads_logst

旧城等待，/ 2022年02月04日 13:53/ 0 赞/ 291 阅读

相关搭建ELK环境 logstash 时间差8小时问题

公司线上日志是通过logstash接收并上传的，使用版本是logstash2.3，发现@timestamp经常少8个小时；处理逻辑如下，无需修改插件源码 input \{

电玩女神/ 2022年01月29日 13:59/ 0 赞/ 761 阅读

相关 ELK（ElasticSearch+LogStash+Kibana)搭建

Kibana汉化参考： [https://www.deathearth.com/323.html][https_www.deathearth.com_323.html] 利

àì夳堔傛蜴生んèń/ 2021年12月20日 00:47/ 0 赞/ 410 阅读

相关 Java 读取mysql时间timestamp差8小时问题

> 再写数据库同步时，遇到Java读取主数据库存入从库时，时间不一致。正文写项目时，对于timestamp类型的数据，Java查出来的数据比mysql慢8小时。比如

柔情只为你懂/ 2021年11月16日 05:54/ 0 赞/ 673 阅读