Linux||正则表达式及grep命令

以下内容首发自公众号“小汪Waud”。

本期介绍在Linux环境下的正则表达式及grep命令。

正则表达式（Regular Expression）是对字符串 *** 作的一种逻辑公式，就是用事先定义好的一些特定字符及这些字符的特定组合，组成一个“规则字符串”，这个字符串用来表达对字符串的一种过滤逻辑。

正则表达式基本上是一种表示法，只要程序支持这种表示法，该程序就可以用来作为正则表达式的字符串处理之用。如vi、grep、awk、sed等程序支持正则表达式，所以可以使用正则表达式的特殊字符来进行字符串的处理。但例如cp、ls等命令并不支持正则表达式，所以只能用自己的通配符。

正则表达式依照 不同的严谨度 分为：基础正则表达式和扩展正则表达式。

注意！

grep是一种强大的文本搜索工具，可以使用 正则表达式匹配模式 查找文件里符合条件的字符串，并打印出来。

有点类似于WORD里的查找功能。

grep支持三种正则表达式语法：Basic、Extended和perl兼容。 如果没有提供正则表达式类型，grep将搜索模式解释为基本的正则表达式。要将模式解释为扩展正则表达式，请使用-E。

查看grep的帮助文档，如下

基本用法

grep [OPTION]... PATTERN [FILE]...

高级用法

grep [-A] [-B] [--color=auto] "查找字符" [模式] [文件]

常用参数

首先通过cat命令查看samples.txt的内容，如下图

如果想检索以K为行首的行，通过以下命令即可得到

如果想检索以Z为行尾的行，通过以下命令即可得到

如果想检索三个字符其中前面为K，后面为D中间字符，为任意字符，通过以下命令即可得到

参考资料

https://www.runoob.com/linux/linux-comm-grep.html

https://www.bilibili.com/video/BV1Yy4y117SX?p=12

grep egrep区别

grep 默认不支持扩展 但可以通过-E 选择来支持扩展正则

egrep 支持扩展正则

关于正则与扩展正则的区别可以看我另一篇shell 正则的介绍

文件处理顺序 以行为单位,逐行进行处理

默认只输出与表达式相匹配的文本行

基本用法

- 格式1:egrep [选择] '正则表达式' 文件

- 格式2:前置命令 | egrep [选择] '正则表达式'

• egrep命令工具 (扩展正则命令)

• 常用命令选项

•grep 正则表达式,用来查找过滤文档的工具符号

grep "root" user//在user文档中查找有单词root的行

grep "^root" user //在user文档中查找以单词root开头的行

grep "bash " user//查找空行

grep "^ " user//查找以空格开头的行

grep "[rot]" user //查找字母r或者o或者t

grep "roo[tn]" user //查找root或者roon

grep "[^rot]" user //查找字母r或者o或者t之外的内容

grep "[a-z]" user //查找小写字母

grep "[A-Z]" user //查找大写字母

grep "[a-Z]" user //查找所有字母

grep "[0-9]" user //查找数字

grep "r..t" user //查找以r开头t结尾中间有2个任意字符的单词

grep "r. " user //查找以r开头后面任意字符 相当手通配符

grep "ro*" user //查找以r开头后面有或没有字母o的单词,o可以出现任意次

grep "o{1,2}" user //查找o出现1次到2次的行

grep "o{2,3}" user //查找o出现2次到3次的行

grep "o{2}" user //查找o出现2次的行

grep "o{1,} " user //查找o出现1次以及1次以上

grep "(:0){2}" user //查找:0(数字零)连续出现2次的行

扩展正则

egrep "o+" user //查找o出现1次以及1次以上

egrep "o?" user //查找o出现0次或1次

egrep "o{1,2}" user //查找o出现1次到2次的行

egrep "o{2,3}" user //查找o出现2次到3次的行

egrep "o{2}" user //查找o出现2次的行

egrep "o{1,}" user //查找o出现1次以及1次以上

egrep "(:0){2}" user //查找:0(数字零)连续出现2次的行

egrep "bash|nologin" user //查找bash或者nologin

egrep "\bthe\b" a //查找单词the,前后是空格或者特殊符号

案例:

正则表达式匹配练习

1）典型的应用场合：grep、egrep检索文本行

grep命令不带-E选项时，支持基本正则匹配模式。比如“word”关键词检索、“^word”匹配以word开头的行、“word$”匹配以word结尾的行……等等。

输出以“r”开头的用户记录：

输出以“localhost”结尾的行：

若希望在grep检索式同时组合多个条件，比如输出以“root”或者以“daemon”开头的行：

而若若使用grep -E或egrep命令，可支持扩展正则匹配模式，能够自动识别 |、{} 等扩展正则表达式中的特殊字符，用起来更加方便，比如：

或者

使用grep -E 与 使用egrep命令完全等效，推荐使用后者，特别是涉及到复杂的正则表达式的时候。

2）grep、egrep命令的-q选项

选项 -q 表示 quiet（静默）的意思，结合此选项可以只做检索而并不输出，通常在脚本内用来识别查找的目标是否存在，通过返回状态 $? 来判断，这样可以忽略无关的文本信息，简化脚本输出。

比如，检查/etc/hosts文件内是否存在192.168.4.4的映射记录，如果存在则显示“YES”，否则输出“NO”，一般会执行：

这样grep的输出信息和脚本判断后的提示混杂在一起，用户不易辨别，所以可以改成以下 *** 作：

是不是清爽多了，从上述结果也可以看到，使用 -q 选项的效果与使用 &>/dev/null的效果类似。

3）基本元字符 ^、$ —— 匹配行首、行尾

输出注释的配置行（以#开头的行）：

统计本地用户中登录Shell为“/sbin/nologin”的用户个数：

提示: -m10仅在文件的前10行中过滤，后面的行不再过滤。

结合 -c 选项输出匹配的行数

使用 -c 选项可输出匹配行数，这与通过管道再 wc -l的效果是相同的，但是写法更简便。比如，统计使用“/bin/bash”作为登录Shell的正常用户个数，可执行：

或者

4）基本元字符 . —— 匹配任意单个字符

以/etc/rc.local文件为例，确认文本内容：

输出/etc/rc.local文件内的空行（用 –v 选项将条件取反）：

5）基本元字符 +、?、 —— 目标出现的次数*

还以/etc/rc.local文件为例：

输出包括 f、ff、ff、……的行，即“f”至少出现一次：

输出包括init、initial的行，即末尾的“ial”最多出现一次（可能没有）：

输出包括stu、stuf、stuff、stufff、……的行，即末尾的“f”可出现任意多次，也可以没有。重复目标只有一个字符时，可以不使用括号：

输出所有行，单独的“.*”可匹配任意行（包括空行）：

输出/etc/passwd文件内“r”开头且以“nologin”结尾的用户记录，即中间可以是任意字符：

6）元字符 {} —— 限定出现的次数范围

创建一个练习用的测试文件：

输出包括ababab的行，即“ab”连续出现3次：

输出包括abab、ababab、abababab的行，即“ab”连续出现2~4次：

输出包括ababab、abababab、……的行，即“ab”最少连续出现3次：

7）元字符 [] —— 匹配范围内的单个字符

还以前面的测试文件bracet.txt为例：

输出包括abc、abd的行，即前两个字符为“ab”，第三个字符只要是c、d中的一个就符合条件：

输出包括大写字母的行，使用[A-Z]匹配连续范围：

8）单词边界匹配

以文件/etc/rc.local为例：

输出包括单词“init”的行，文件中“initialization”不合要求：

或者：

输出包括以“ll”结尾的单词的行，使用 >匹配单词右边界：

或者：

9）多个条件的组合

通过dmesg启动日志查看蓝牙设备、网卡设备相关的信息：

---