grok在python 中的使用

ゞ浴缸里的玫瑰 2022-06-05 04:43 361阅读 0赞

grok 意为“通过感觉会意”

他比正则匹配更高级一些，在语法上略有不同，不过属于换汤不换药，正则熟悉的同学，grok对你来说也不会很难。

grok很多语言已经支持，python 中也有第三方库，pygrok项目地址  
[https://github.com/garyelephant/pygrok][https_github.com_garyelephant_pygrok]

### 安装 ###

pip install pygrok

### 示例 ###

from pygrok import Grok
    text = 'gary is male, 25 years old and weighs 68.5 kilograms'
    pattern = '%{WORD:name} is %{WORD:gender}, %{NUMBER:age} years old and weighs %{NUMBER:weight} kilograms'
    grok = Grok(pattern)
    print grok.match(text)
    
    # {
       'gender': 'male', 'age': '25', 'name': 'gary', 'weight': '68.5'}

我们看到格式中\{WORD:xxx\},\{NUMBER:xxx\},这里面的NUMBER类型后面可以定义类型，例如， %\{NUMBER:age:int\}  
那么输出的字典直接输出我们定义的类型

# {
       'gender': 'male', 'age': 25, 'name': 'gary', 'weight': 68.5}

### 常用类型 ###

`WORD` 意思是 \b\w+\b 规则.
    `NUMBER` 意思是 (?:%{BASE10NUM}) 数字
    `BASE10NUM` means (?<![0-9.+-])(?>[+-]?(?:(?:[0-9]+(?:\.[0-9]+)?)|(?:\.[0-9]+)))
    
    其他的例如 `IP`, `HOSTNAME`, `URIPATH`, `DATE`, `TIMESTAMP_ISO8601`, `COMMONAPACHELOG`..

还支持很多nginx\_access ，syslog等。

参考资料：  
\[1\].[http://grokdebug.herokuapp.com/patterns][http_grokdebug.herokuapp.com_patterns]

[https_github.com_garyelephant_pygrok]: https://github.com/garyelephant/pygrok
[http_grokdebug.herokuapp.com_patterns]: http://grokdebug.herokuapp.com/patterns

发表评论取消回复

表情：

评论列表（有 0 条评论，361人围观）

还没有评论，来说两句吧...

相关阅读

相关 grok语法定义

grok默认表达式 Logstash 内置了120种默认表达式，可以查看patterns，里面对表达式做了分组，每个文件为一组，文件内部有对应的表达式模式。下面只是部分常

柔光的暖阳◎/ 2023年08月17日 17:16/ 0 赞/ 109 阅读

相关 Logstash Grok patterns

\\ logstash正则关键字，记录于此，不必每次十啬 \\ grok-patterns USERNAME [a-zA-Z0-9._-]+ USER

红太狼/ 2023年01月17日 12:52/ 0 赞/ 153 阅读

相关在python中的使用Libsvm

http://[blog.csdn.net/pipisorry/article/details/38964135][blog.csdn.net_pipisorry_articl

绝地灬酷狼/ 2022年08月04日 14:58/ 0 赞/ 356 阅读

相关 logstash 中正则grok

调试正则的工具： [http://grokdebug.herokuapp.com/][http_grokdebug.herokuapp.com] 注意：add 的field或

叁歲伎倆/ 2022年06月08日 00:26/ 0 赞/ 207 阅读

相关 grok在python 中的使用

grok 意为“通过感觉会意” 他比正则匹配更高级一些，在语法上略有不同，不过属于换汤不换药，正则熟悉的同学，grok对你来说也不会很难。 grok很多语言已经支持，pyt

ゞ浴缸里的玫瑰/ 2022年06月05日 04:43/ 0 赞/ 362 阅读

相关 assert语句在python中的使用

1、为什么要使用assert 我们不知道自己设计的程序会在哪里崩溃，但是有些最基础的我们可以把控的地方一旦发生错误，我们就可以让程序崩溃，而不需要让程序继续运行下去。

拼搏现实的明天。/ 2022年05月25日 11:35/ 0 赞/ 225 阅读

相关本地安装Grok Debugger

1.Ruby的安装。说明：别使用ruby最新的2.2或者2.3的版本，可能出现部分组件无法安装 yum -y install openssl-devel gcc

朴灿烈づ我的快乐病毒、/ 2022年05月13日 20:37/ 0 赞/ 204 阅读

相关 Logstash Grok正则

Logstash Grok正则 Grok正则简介语法解释调试工具示例1 示例2 示

谁借莪１个温暖的怀抱￠/ 2022年04月08日 08:46/ 0 赞/ 249 阅读

相关 MongoDB在python中的使用

MongoDB在python中的使用文章目录 MongoDB在python中的使用安装配置文件客户端

谁借莪１个温暖的怀抱￠/ 2021年10月23日 14:10/ 0 赞/ 838 阅读

相关使用Logstash filter grok过滤日志文件

[https://blog.csdn.net/aitangyong/article/details/49661907][https_blog.csdn.net_aitangyo

约定不等于承诺〃/ 2021年09月15日 21:54/ 0 赞/ 433 阅读