任督二脉之Shell中的正则表达式

比眉伴天荒 2022-03-31 16:29 163阅读 0赞

VBird说学习Linux，掌握了Shell和正则就相当于打通了任督二脉，此后能力的成长才会突飞猛进。

Shell的基础学习之前已经总结了一篇博客：[http://www.cnblogs.com/jyzhao/p/4485553.html][http_www.cnblogs.com_jyzhao_p_4485553.html]

本文将总结Shell中的正则表达式及常用的字符处理命令，为打通任督二脉奠定基础^\_^。

1.  基础正则表达式举例说明
2.  字符截取命令
    
     *  cut命令
     *  awk命令
     *  sed命令
3.  字符处理命令
    
     *  sort命令
     *  wc命令

# 1. 基础正则表达式举例说明 #

`*`,`.`,`\`,`^word`,`word$`,`[list]`,`[^list]`,`[n1-n2]`,`\{n\}`,`\{n,m\}`

**例1**：简易判断日期格式

比如：2015-05-11，只是简单判断数字的格式。

`^[0-9]\{4\}-[0-9]\{2\}-[0-9]\{2\}$`

**例2**：简易判断IP地址格式

比如：192.168.1.100，只是简单判断数字的格式。

`[0-9]\{1,3\}\.[0-9]\{1,3\}\.[0-9]\{1,3\}\.[0-9]\{1,3\}`

**例3**：找出1.txt文本文件中以字母开头的以及不是以字母开头的行。

以字母开头的行：

`grep --color=auto "^[a-z,A-Z]" 1.txt`

不是以字母开头的行：

`grep --color=auto "^[^a-z,A-Z]" 1.txt`

# 2. 字符截取命令 #

## cut命令 ##

用途：对于分隔符规范的文本进行特定截取某些列，特点是简单易用。

**例4**：cut截取出用户名以及对应的uid，gid，过滤掉包含'/sbin'的行。

`grep -v "/sbin" /etc/passwd | cut -f 1,3,4 -d ":"`

截取结果示例：

root:0:0
    oracle:500:500
    grid:501:500

## awk命令 ##

用途：对于分隔符不规范的文本进行截取，特点是功能强大，语法比cut命令复杂。

awk '条件类型1{动作1}条件类型2{动作2} ...' filename

1.  awk的内置变量：

NF 每一行（$0）拥有的字段总数
    NR 目前awk所处理的是“第几行”数据
    FS 目前的分隔字符，默认是空格键

1.  awk的逻辑运算符：
    
    `>, <, >=, <=, ==, !=`

**例5**：查询pmon进程的PID。

`ps -ef | grep pmon | grep -v grep | awk '{print $2}'`

**例6**：打印出/etc/passwd中uid<3的用户和他们的uid。

`cat /etc/passwd | awk 'BEGIN{FS=":"} $3 < 3 {print $1 "\t" $3}'`

注：注意BEGIN在这里的用途，没有BEGIN第一行显示会不正确。

**例7**：截取出系统根目录的磁盘空间使用率

`df -h | awk '{print $5}'|cut -f 1 -d "%"`

## sed命令 ##

sed可以将数据进行替换、删除、新增、选取特定行。

-n 只有经过sed处理的才显示（默认显示全部）
    -e 直接在命令行模式上进行sed的动作编辑
    -f 将sed的动作写入一个文件，然后-f filename执行filename中的sed命令
    -r 支持扩展型正则表达式语法（默认是基础正则表达式语法）
    -i 直接修改读取的文件内容，而不是默认的屏幕输出结果

**例8**：显示行号并打印出/etc/hosts,删除文件的前两行。

`nl /etc/hosts | sed '1,2d'`

**例9**：把/etc/hosts文件中的JY-DB全部替换为Alfred-DB显示出来

`sed -e 's/JY-DB/Alfred-DB/g' /etc/hosts`

注：此处不写`-e`参数也可以，如果两个及以上sed命令需要每个前面都写`-e`参数。

**例10**：直接修改/etc/hosts文件，在文件的第2行下插入新的一行“192.168.1.100 JY-DB”

`sed -i '2a 192.168.1.100 JY-DB' /etc/hosts`

# 3. 字符处理命令 #

## sort命令 ##

用途：对结果进行排序显示。

`du -sk * | sort -rn`  
`sort -t ":" -k "3,3" /etc/passwd`  
`sort -n -t ":" -k "3,3" /etc/passwd`

## wc命令 ##

用途：统计结果行，单词，字符的数量。

统计行`wc -l`

**例11**：统计oracle的用户进程数

`ps -ef | grep LOCAL=NO | grep -v grep | wc -l`

统计单词`wc -w`

**例12**：统计/etc/issue文件的单词数

`wc -w /etc/issue`

统计字符`wc -m`

**例13**：统计/etc/issue文件的字符数

`wc -m /etc/issue`

[http_www.cnblogs.com_jyzhao_p_4485553.html]: http://www.cnblogs.com/jyzhao/p/4485553.html

发表评论取消回复

表情：

评论列表（有 0 条评论，163人围观）

还没有评论，来说两句吧...

相关阅读

相关 English learning method ---学英语重中之重打通“任督二脉”

漫漫十年艰辛路，英语学习之旅曾经秉承“路漫漫其修远兮，吾将上下而求索”的信念，初一那年了解到原来（a b c d e f g）不仅仅读作（啊，波，词，的，额，

红太狼/ 2023年01月20日 13:48/ 0 赞/ 21 阅读

相关 shell中正则表达式详解_Shell if中的正则表达式使用详解

由于工作需要对用户提交的数据进行验证，这是一个简单的日期正则验证实例，有需要了解的同学可参考。 shell中的if语句需要做一个正则判断,查了一下语法记录之。 DATEPA

秒速五厘米/ 2022年12月31日 11:21/ 0 赞/ 173 阅读

相关前后端分离项目开发，助你打通任督二脉

本篇文章我们来实现一个简单的前后端分离功能——学生系统，前端采用Vue+ElementUI，后端采用SpringBoot+MyBatis。 > 文章里不会介绍相应的技术内容，

约定不等于承诺〃/ 2022年08月31日 01:59/ 0 赞/ 166 阅读

相关 linux学习的任督二脉

Linux工程师很多，甚至有很多有多年工作经验，但是对一些关键概念的理解非常模糊，比如不理解CPU、内存资源等的真正分布，具体的工作机制，这使得他们对很多问题的分析都摸不到方向

淩亂°似流年/ 2022年04月24日 04:02/ 0 赞/ 172 阅读

相关任督二脉之Shell中的正则表达式

VBird说学习Linux，掌握了Shell和正则就相当于打通了任督二脉，此后能力的成长才会突飞猛进。 Shell的基础学习之前已经总结了一篇博客：[http://www.c

比眉伴天荒/ 2022年03月31日 16:29/ 0 赞/ 164 阅读

相关打通任督二脉

任督二脉是两条涉及长寿的经脉！欲要获得长寿，必须打开任督二脉间的断脉！在历史上打开任督二脉者只有一人，那就是印度的静树大师，而中国武林历史上没有任何人打开过任督二脉！凡

柔情只为你懂/ 2021年11月17日 01:14/ 0 赞/ 431 阅读

相关 shell编程之正则表达式

shell编程之正则表达式一、正则表达式 1.什么是正则表达式它是用来做字符串的分割，匹配，查询，替换等操

深碍√TFBOYSˉ_/ 2021年11月16日 15:46/ 0 赞/ 337 阅读

相关 shell脚本之正则表达式

一、基础正则表达式实例：元字符总结： ![shell脚本之正则表达式][shell] 在Linux系统中常见的文件处理工具中grep和sed支持基础正则表达式。

男娘i/ 2021年11月10日 11:22/ 0 赞/ 359 阅读

相关【kernel code】进程--任督二脉之一

进程和内存管理堪称内核的任督二脉，是最重要的两部分，也是最难的两部分，这两部弄清楚了，主体架构也就确立，其它都是支脉（1）基本部分：进程。 start\_ker

女爷i/ 2021年09月22日 14:48/ 0 赞/ 236 阅读

相关 Java程序员必看经典书籍，助你早日打通任督二脉

不知不觉，已经在开发界混迹了三年半，由于转行的缘故，感觉自己依旧是一个小菜鸟，既然你是一个非计算机专业的，还想鸠占鹊巢，那私底下的努力必定是少不了的，要想人前显贵，必定人后受罪

缺乏、安全感/ 2021年08月30日 13:54/ 0 赞/ 275 阅读