linux压缩文件不含有日志,linux – 如何组合两个命令来计算压缩和未压缩日志文件中的数据？...

左手的ㄟ右手 2023-01-19 15:53 157阅读 0赞

我正在运行此命令以从服务器的auth.log获取失败登录尝试的计数,并且它运行良好：

sudo cat /var/log/auth.\{log,log.1\} | grep 'Failed password' | grep sshd | awk '\{print $1,$2\}' | sort -k 1,1M -k 2n | uniq -c

但问题是 – 就像世界上的每个服务器一样 – 我有一些由日志轮换创建的GZip压缩文件,这个命令不会解析：

\-rw-r----- 1 syslog adm 7822722 Oct 31 13:44 /var/log/auth.log

\-rw-r----- 1 syslog adm 12532511 Oct 25 06:59 /var/log/auth.log.1

\-rw-r----- 1 syslog adm 2250939 Oct 18 06:55 /var/log/auth.log.2.gz

\-rw-r----- 1 syslog adm 2139669 Oct 11 07:06 /var/log/auth.log.3.gz

\-rw-r----- 1 syslog adm 2769919 Oct 4 06:54 /var/log/auth.log.4.gz

为了处理那些我有一个使用zcat而不是cat的命令的变体,但是必须运行两个命令来获取这些数据有点麻烦.有没有办法将cat和zcat命令组合成一个命令,这样我才能得到组合结果？我知道我可以编写一些Bash脚本来过滤压缩文件和未压缩文件,但我在各种服务器上使用这个当前的单行程序,我希望有一个单行程,我可以快速参考并在需要时使用.

更多细节.

我一直在做一些安全审计和防火墙调整,并且运行了这个命令,这给了我一个很好的“Uailed密码”尝试来自Ubuntu Linux机器上的auth.log文件：

sudo cat /var/log/auth.\{log,1M -k 2n | uniq -c

它很棒！输出看起来像这样：

5909 Oct 18

13444 Oct 19

351 Oct 20

162 Oct 21

499 Oct 22

377 Oct 23

145 Oct 24

10897 Oct 25

76 Oct 26

54 Oct 27

310 Oct 28

1024 Oct 29

208 Oct 30

30 Oct 31

虽然这对于未压缩的日志非常有效,但由于日志会旋转并被压缩,因此总会有一些GZip压缩文件也可以很好地计算.所以我运行上面使用zcat的命令的这个变种：

sudo zcat -q /var/log/auth.log\* | grep 'Failed password' | grep sshd | awk '\{print $1,1M -k 2n | uniq -c

输出是这样的：

gzip: /var/log/auth.log: not in gzip format

gzip: /var/log/auth.log.1: not in gzip format

10413 Sep 27

15977 Sep 28

12297 Sep 29

14438 Sep 30

23394 Oct 1

12912 Oct 2

15844 Oct 3

19697 Oct 4

15350 Oct 5

12358 Oct 6

12692 Oct 7

8377 Oct 8

10875 Oct 9

565 Oct 10

16027 Oct 11

10422 Oct 12

6808 Oct 13

26891 Oct 14

9493 Oct 15

5138 Oct 16

9415 Oct 17

2226 Oct 18

正如您所看到的,输出在它工作时起作用,但如果此命令的cat和zcat变体可以简单地组合成一个命令,那将会很好.怎么办？

奖励积分：

这些都不是关键问题,但如果以某种方式可以在解决方案中解决它们会很好：

>请注意,在zcat输出的顶部,zcat尝试处理两个未压缩文件时出现两个错误.压制那会很好.

>另请注意cat和zcat命令如何显示10月18日的数据;日志轮换发生的那一天.有没有办法在命令中添加这两个值？如果没有,我很好,有两行10月18日数据具有不同的值,我将不得不手动加起来.

发表评论取消回复

表情：

评论列表（有 0 条评论，157人围观）

还没有评论，来说两句吧...

相关阅读

相关 linux自动压缩日志文件

目录前言编写脚本配置计划任务前言大型项目日志量非常大，如果不采取特定措施，不到一个月200G的磁盘就会被占满，一种最简单的方法就是将日

旧城等待，/ 2024年03月24日 19:25/ 0 赞/ 81 阅读

相关 Linux—压缩文件

题：创建一个名为 /root/backup.tar.gz 的 tar 存档其应包含 /usr/local 的 tar 存档，其应包含 /usr/local 的内容。

淡淡的烟草味﹌/ 2024年03月22日 06:23/ 0 赞/ 20 阅读

相关 Linux 压缩和解压缩文件

Linux上的压缩格式，win都支持；win上的压缩格式，Linux不一定支持。源码包：.tar.gz 二进制包：yum安装 1 gzip 【gzip 文件】压缩

- 日理万妓/ 2024年02月17日 22:07/ 0 赞/ 89 阅读

相关 linux中的文件压缩和文件解压缩

linux中常用的压缩格式有如下几种： .zip .gz .bz2 .tar.gz .tar.bz2 ①.zip 格式 zip 压缩文件名源文件 \压缩文件 z

偏执的太偏执、/ 2024年02月17日 16:08/ 0 赞/ 63 阅读

相关 linux压缩文件不含有日志,linux – 如何组合两个命令来计算压缩和未压缩日志文件中的数据？...

我正在运行此命令以从服务器的auth.log获取失败登录尝试的计数,并且它运行良好： sudo cat /var/log/auth.\{log,log.1\} | grep

左手的ㄟ右手/ 2023年01月19日 15:53/ 0 赞/ 158 阅读

相关【Linux】03.压缩文件命令

压缩文件命令压缩 zip类型压缩解压压缩解压 gzip类型压缩解压压

Myth丶恋晨/ 2022年11月27日 07:24/ 0 赞/ 128 阅读

相关 linux .gz文件压缩与解压缩命令

1. 压缩文件 gzip 源文件如压缩 b.txt 使用命令 gzip b.txt 注意压缩为 .gz 文件源文件会消失如果想保留源文件使用命令 gzip

谁借莪１个温暖的怀抱￠/ 2022年09月10日 03:11/ 0 赞/ 291 阅读

相关文件压缩命令-Linux()

考试周过后，继续更新博客。。 tar `tar` 命令比较常用，其参数众多，记住几个常用到的就好。 tar [-option] [目标文件] 源文件常用到

「爱情、让人受尽委屈。」/ 2022年05月21日 04:05/ 0 赞/ 220 阅读

相关压缩文件的linux 命令

//压缩文件 tar -jcvf appendonly.tar appendonly.aof //查看压缩文件中的文件名 tar -jtvf appen

柔光的暖阳◎/ 2022年03月28日 12:30/ 0 赞/ 239 阅读

相关 linux如何解压缩文件命令

tar命令 tar 可以为文件和目录创建档案。利用tar，用户可以为某一特定文件创建档案（备份文件），也可以在档案中改变文件，或者向档案中加入新的文件。语法：ta

布满荆棘的人生/ 2021年09月10日 10:04/ 0 赞/ 428 阅读