文章目录

  • 一,正则表达式
    • 1.1正则表达式定义
    • 1.2 基础正则表达式常见元字符
    • 1.3 扩展正则表达式元字符
  • 二,grep命令
    • 2.1常用选项
    • 2.2grep配合元字符操作的案列
      • (1)查找特定字符
      • (2)利用中括号“[]”来查找集合字符
      • (3)查找行首“^”与行尾字符“$”
      • (4)查找任意一个字符“.”与重复字符“*”
      • (5)查找连续字符范围“{}”
  • 总结

一,正则表达式

  • 正则表达式,又称规则表达式。(英语:Regular Expression),在代码中常简写为 regex、regexp 或 RE),计算机科学的一个概念。

Linux中常用的有两种正则表达式:

  1. 基础正则表达式:BRE
  2. 扩展正则表达式: ERE

1.1正则表达式定义

1.正则表达式通常被用来检索、替换那些符合某个模式(规则)的文本

2.正则表达式,通常用于判断语句中,用来检查某一字符串是否满足某一格式

3.正则表达式是由普通字符与字符组成

4.普通字符包括大小写字母,数字,标点符号及一些其他符号

5.元字符是指在正则表达式中具有特殊意义的专用字符,可以用来规定其前导字符(即位于元字符前面的字符)在目标对象中的出现模式

  • 正则表达式不只有一种,而且 LINUX 中不同的程序可能会使用不同的正则表达式,如:
    工具:grep sed awk egrep

1.2 基础正则表达式常见元字符

  • 支持的工具: grep、egrep、sed、awk

  • 特殊字符:

\: 转义字符,用于取消特殊符号的含义,例: !、\n、$等

^: 匹配行首,^ 则是匹配字符串的开始 ^tux匹配以tux开头的行

$: 匹配行尾,则 是 匹 配 字 符 串 的 结 尾 t u x 则是匹配字符串的结尾tux则是匹配字符串的结尾tux匹配以tux结尾的行

.: 匹配除换行符\r,\n之外的任意单个字符,awk则中可以ab.匹配abc或bad,不可匹配abcd或abde,只能匹配单字符…

[list]: 匹配list列表中的一个字符

例:
go[ola]d
[abc]
[a-z]
[a-z0-9]

[^list]: 匹配任意不在list列表中的一个字符

例:
[ ^a-z ]
[ ^0-9 ]
[ ^A-Z0-9]

  • 匹配前面子表达式0次或者多次 例:goo*d、go.*d

星号匹配前面子表达式0次或者多次 例:goo*d、go.*d
{n} :匹配前面的子表达式n次,例:go{2}d、'[O-9]{2}‘匹配两位数字
{n,}:匹配前面的子表达式不少于n次,例: go{2,}d、’ [0-9]{2,}‘匹配两位及两位以上数宁
{n,m}﹔匹配前面的子表达式n到m次,例: go{2,3)d、’[0-9]{2,3}'匹配两位到三位数字
注: egrep、awk使用{n}、{n, }、{n, m}匹配时“{}“前不用加”\”

  • 定位符

^:匹配输入字符串开始的位置

$:匹配输入字符串结尾的位置

  • 非打印字符

\n 匹配一个换行符

\r 匹配一个回车符

\t 匹配一个制表符

1.3 扩展正则表达式元字符

1.通常情况下会使用基础正则表达式就已经足够了,但有时为了简化整个指令,需要使用 范围更广的扩展正则表达式。例如,使用基础正则表达式查询除文件中空白行与行首为“#”

2.之外的行(通常用于查看生效的配置文件),执行“grep -v‘^KaTeX parse error: Expected group after '^' at position 21: ….txt | grep -v‘^̲#’”即可实现。这里需要使用管…|^#’test.txt”,其中,单引号内的管道符号表示或者(or)

3.此外,grep 命令仅支持基础正则表达式,如果使用扩展正则表达式,需要使用 egrep 或 awk 命令。awk 命令,这里我们直接使用 egrep 命令。egrep 命令与 grep 命令的用法基本相似。egrep 命令是一个搜索文件获得模式,使用该命令可以搜索文件中的任意字符串和符号,也可以搜索一个或多个文件的字符串,一个提示符可以是单个字符、一个字符串、一个字或一个句子。
与基础正则表达式类型相同,扩展正则表达式也包含多个元字符,常见的扩展正则表达 式的元字符主要包括以下几个

  • 支持工具(egrep awk)

(+) 重复一个或者一个以上的前一个字符

例:
“egrep -n 'wo+d' test.txt”命令,即可查询"wood" "woood" "woooooood"等字符串

? 零个或者一个的前一个字符

例
“egrep -n 'bes?t' test.txt”命令,即可查询“bet”“best”这两个字符串

() 查找“组”字符串

例:
“egrep -n 't(a e)st’ test.txt”。即可查询"tast"或者"test"字符串

()+ 辨别多个重复的组

例:
“egrep -n ‘A(xyz)+C’ test.txt”。该命令是查询开头的"A"结尾是"C",中间有一个以上的"xyz"字符串

| 使用或者(or)的方式找出多个字符

例:
“egrep -n 'of|is|on' test.txt”命令即可查询"of"或者"if"或者"on"字符串

示例:执行“egrep -n ‘of|is|on’ test.txt”命令即可查询"of"或者"if"或者"on"字符串

二,grep命令

格式:

grep [选项] 查找文件 目标文件

2.1常用选项

-a 将 binary 文件以 text 文件的方式搜寻数据
-E 开启扩展的正则表达式
-o 只显示被模式匹配到的字符串
-c 计算找到 ‘搜寻字符串’ 的次数
-i 忽略大小写的不同,所以大小写视为相同
-n 输出行号
-v 反向选择,亦即显示出没有 ‘搜寻字符串’ 内容的那一行!
-w 精确匹配,表示我输入什么匹配什么
–color=auto : 可以将找到的关键词部分加上颜色的显示喔!

例:

[root@qjm ky20]# grep -cw ens33 ifcfg-ens33     ##查看文件,精准匹配显示ens33出现几次
2[root@qjm ky20]# grep -in ens33 ifcfg-ens33     ##查看文件忽略大小写的不同,输出行号
12:NAME=ens33
14:DEVICE=ens33[root@qjm ky20]# cat ifcfg-ens33 |grep -v '^$\|#$'   ##查看文件,并把空行和#号过滤掉[root@qjm ky20]# ifconfig ens33 | grep -o "[0-9]\+\.[0-9]\+\.[0-9]\+\.[0-9]\+"|head -1
192.168.113.126
##把ifconfig ens33里的第一个IP过滤出来 (|head -1)
##只显示被模式匹配到的字符串(grep -o )
##拼接的意思([0-9]\+\.)
##\+表示匹配前面字符串1或多个,因为有特殊含义要用转义符转义
##\.点也有特殊含义,转义符转义后边正常的点,就是已点为分割

2.2grep配合元字符操作的案列

(1)查找特定字符

1.查找特定字符非常简单,如执行以下命令即可从 test.txt 文件中查找出特定字符“the”所在位置。其中“-n”表示显示行号、“-i”表示不区分大小写。命令执行后,符合匹配标准的字符, 字体颜色会变为红色(本章中全部通过加粗显示代替)

 [root@qjm ky20]# grep -n 'the' test.txt

2.若反向选择,如查找不包含“the”字符的行,则需要通过 grep 命令的“-v”选项实现,并配合“-n”一起使用显示行号

 [root@qjm ky20]# grep -vn 'the' test.txt
(2)利用中括号“[]”来查找集合字符

1.想要查找“shirt”与“short”这两个字符串时,可以发现这两个字符串均包含“sh”与“rt”。此时执行以下命令即可同时查找到“shirt”与“short”这两个字符串,其中“[]”中无论有几个字符, 都仅代表一个字符,也就是说“[io]”表示匹配“i”或者“o”

 [root@qjm ky20]# grep -n 'sh[io]rt' test.txt

2.若要查找包含重复单个字符“oo”时,只需要执行以下命令即可

 [root@qjm ky20]# grep -n 'oo' test.txt

3.若查找“oo”前面不是“w”的字符串,只需要通过集合字符的反向选择“[^]”来实现该目的。例如执行“grep -n‘[^w]oo’test.txt”命令表示在 test.txt 文本中查找“oo”前面不是“w”的字符串

 [root@qjm ky20]# grep -n '[^w]oo' test.txt

4.在上述命令的执行结果中发现“woood”与“wooooood”也符合匹配规则,二者均包含“w”。其实通过执行结果就可以看出,符合匹配标准的字符加粗显示,而上述结果中可以得知, “#woood #”中加粗显示的是“ooo”,而“oo”前面的“o”是符合匹配规则的。同理“#woooooood #”也符合匹配规则。
若不希望“oo”前面存在小写字母,可以使用“grep -n‘[^a-z]oo’test.txt”命令实现,其中

“a-z”表示小写字母,大写字母则通过“A-Z”表示

 [root@qjm ky20]#  grep -n '[^a-z]oo' test.txt

5.查找包含数字的行可以通过“grep -n ‘[0-9]’test.txt”命令来实现

[root@qjm ky20]# grep -n '[0-9]' test.txt
(3)查找行首“^”与行尾字符“$”

1.基础正则表达式包含两个定位元字符:“^”(行首)与“$”(行尾)。在上面的示例中, 查询“the”字符串时出现了很多包含“the”的行,如果想要查询以“the”字符串为行首的行,则可以通过“^”元字符来实现

[root@qjm ky20]# grep -n '^the' test.txt

2.查询以小写字母开头的行可以通过“[a-z]”规则来过滤,查询大写字母开头的行则使用“[A-Z]”规则,若查询不以字母开头的行则使用“[a-zA-Z]”规则

查询以小写字母开头的行可以通过“^[a-z]”规则来过滤,查询大写字母开头的行则使用“^[A-Z]”规则,若查询不以字母开头的行则使用“^[^a-zA-Z]”规则[root@qjm ky20]# grep -n '^[a-z]' test.txtbash
[root@qjm ky20]# grep -n '^[A-Z]' test.txt
[root@qjm ky20]# grep -n '^[^a-zA-Z]' test.txt

3.“^”符号在元字符集合“[]”符号内外的作用是不一样的,在“[]”符号内表示反向选择,在“[]” 符号外则代表定位行首。反之,若想查找以某一特定字符结尾的行则可以使用“$”定位符。例如,执行以下命令即可实现查询以小数点(.)结尾的行。因为小数点(.)在正则表达式中也是一个元字符,所以在这里需要用转义字符“\”将具有特殊意义的字符转化成普通字符

[root@qjm ky20]# grep -n '\.$' test.txt

4.当查询空白行时,执行“grep -n‘^$’test.txt”命令即可

[root@qjm ky20]# grep -n '^$' test.txt
(4)查找任意一个字符“.”与重复字符“*”

1.在正则表达式中小数点(.)也是一个元字符,代表任意一个字符。例如执行以下命令就可以查找“以w为开头以d为结尾中间多少个字符(用多少个 . 表示)“,即共有四个字符,以 w 开头 d 结尾

[root@qjm ky20]# grep -n 'w..d' test.txt

2.“wood”字符串“w…d”匹配规则。若想要查询 oo、ooo、ooooo 等资料, 则需要使用星号()元字符。但需要注意的是,“”代表的是重复零个或多个前面的单字符。 “o*”表示拥有零个(即为空字符)或大于等于一个“o”的字符,因为允许空字符,所以执行“grep
-n ‘o*’ test.txt”命令会将文本中所有的内容都输出打印。如果是“oo*”,则第一个 o 必须存在, 第二个 o 则是零个或多个 o,所以凡是包含 o、oo、ooo、ooo,等的资料都符合标准。同理,若查询包含至少两个 o 以上的字符串,则执行“grep -n ‘ooo*’ test.txt”命令即可

[root@qjm ky20]# grep -n 'ooo*' test.txt

3.查询以 w 开头 d 结尾,中间包含至少一个 o 的字符串,执行以下命令即可实现

[root@qjm ky20]# grep -n 'woo*d' test.txt

4.执行以下命令即可查询以 w 开头 d 结尾,中间的字符可有可无的字符串

[root@qjm ky20]# grep -n 'w.*d' test.txt

5.执行以下命令即可查询任意数字所在行

[root@qjm ky20]# grep -n '[0-9][0-9]*' test.txt
(5)查找连续字符范围“{}”

使用了“.”与“*”来设定零个到无限多个重复的字符,如果想要限制一个范围内的重复的字符串该如何实现呢?例如,查找三到五个 o 的连续字符,这个时候就需要使用基础正则表达式中的限定范围的字符“{}”。因为“{}”在 Shell 中具有特殊意义,所以在使用“{}”字符时,需要利用转义字符“\”,将“{}”字符转换成普通字符。“{}”字符的使用方法如下所示

  1. 查询两个 o 的字符
[root@qjm ky20]# grep -n 'o\{2\}' test.txt

2.查询以 w 开头以 d 结尾,中间包含 2~5 个 o 的字符串

[root@qjm ky20]# grep -n 'wo\{2,5\}d' test.txt

3.查询以 w 开头以 d 结尾,中间包含 2 个或 2 个以上 o 的字符串

[root@qjm ky20]# grep -n 'wo\{2,\}d' test.txt

总结

  • 通过上面几个简单的示例,可以了解到常见的基础正则表达式的元字符主要包括以下几个:

1.^ 匹配输入字符串的开始位置。除非在方括号表达式中使用,表示不包含该字符集合。要匹配“^” 字符本身,请使用“^”

2.$ 匹配输入字符串的结尾位置。如果设置了RegExp 对象的 Multiline 属性,则“KaTeX parse error: Undefined control sequence: \n at position 6: ”也匹配‘\̲n̲’或‘\r’。要匹配“”字符本身,请使用“$”. 匹配除“\r\n”之外的任何单个字符

3.\ 反斜杠,又叫转义字符,去除其后紧跟的元字符或通配符的特殊意义

4.“星*” 匹配前面的子表达式零次或多次。要匹配星字符,请使用 “星*”

5.[] 字符集合。匹配所包含的任意一个字符。例如,“[abc]”可以匹配“plain”中的“a”

6.[^] 赋值字符集合。匹配未包含的一个任意字符。例如,“[^abc]”可以匹配“plain”中任何一个字母

7.[n1-n2] 字符范围。匹配指定范围内的任意一个字符。例如,“[a-z]”可以匹配“a”到“z”范围内的任意一个小写字母字符。
注意:只有连字符(-)在字符组内部,并且出现在两个字符之间时,才能表示字符的范围;如果出现在字符组的开头,则只能表示连字符本身

8.{n} n 是一个非负整数,匹配确定的 n 次。例如,“o{2}”不能匹配“Bob”中的“o”,但是能匹配“food”中的“oo”

9.{n,} n 是一个非负整数,至少匹配 n 次。例如,“o{2,}”不能匹配“Bob”中的“o”,但能匹配“foooood”中的所有o。“o{1,}”等价于“o+”。“o{0,}”则等价于“o*”

10.{n,m} m 和 n 均为非负整数,其中 n<=m,最少匹配 n 次且最多匹配m 次
围内的任意一个字符。例如,“[a-z]”可以匹配“a”到“z”范围内的任意一个小写字母字符。
注意:只有连字符(-)在字符组内部,并且出现在两个字符之间时,才能表示字符的范围;如果出现在字符组的开头,则只能表示连字符本身

8.{n} n 是一个非负整数,匹配确定的 n 次。例如,“o{2}”不能匹配“Bob”中的“o”,但是能匹配“food”中的“oo”

9.{n,} n 是一个非负整数,至少匹配 n 次。例如,“o{2,}”不能匹配“Bob”中的“o”,但能匹配“foooood”中的所有o。“o{1,}”等价于“o+”。“o{0,}”则等价于“o*”

10.{n,m} m 和 n 均为非负整数,其中 n<=m,最少匹配 n 次且最多匹配m 次

6.shell之正则表达式相关推荐

  1. Shell 脚本正则表达式(一)

    Shell 脚本正则表达式(一) 一.正则表达式概述 1.正则表达式定义 2.正则表达式用途 二.基础正则表达式 1.基础正则表达式常见元字符 2.基础正则表达式示例 三.扩展正则表达式 1.扩展正则 ...

  2. Shell扩展正则表达式练习1——电话号码过滤

    Shell扩展正则表达式练习1--电话号码过滤 国内电话号码目前一般采用区号+7位或8位阿拉伯数字组成,为了尽可能达到练习的目的,自己添加一些规则:①3位区号:如北京010,上海021,西安029,这 ...

  3. 系统学习Shell之正则表达式

    系列文章目录 Shell系统学习之什么是Shell Shell系统学习之创建一个Shell程序 Shell系统学习之向Shell脚本传递参数 Shell系统学习之如何执行Shell程序 Shell系统 ...

  4. shell常用正则表达式

    shell常用正则表达式 1.匹配中文字符的正则表达式: [\u4e00-\u9fa5] 评注:匹配中文还真是个头疼的事,有了这个表达式就好办了 2.匹配双字节字符(包括汉字在内):[^\x00-\x ...

  5. shell编程-正则表达式

    1.正则表达式是什么 它主要用于字符串的模式分割,匹配,查找及替换操作. 2.正则表达式与通配符 正则表达式用来在文件中匹配符合条件的字符串,正则包含匹配.grep,awk,sed等命令可以支持正则表 ...

  6. shell中正则表达式详解_【转】【shell】正则表达式使用详解(一)

    入门简介 简单的说,正则表达式是一种可以用于模式匹配和替换的强有力的工具.我们可以在几乎所有的基于UNIX系统的工具中找到正则表达式的身影,例如,vi编辑器,Perl或PHP脚本语言,以及awk或se ...

  7. shell中正则表达式详解_Linux中的正则表达式

    点击上方Linux迷,关注我们 正文 来自:https://www.linuxmi.com/linux-zhengzebiaodashi.html 正则表达式就是用于匹配每行输入的一种模式,模式是指一 ...

  8. shell下正则表达式与其工具grep

    一.grep相关知识 1.grep      grep (global search regular expression(RE) and print out the line,全面搜索正则表达式并把 ...

  9. shell中正则表达式详解_Shell if中的正则表达式使用详解

    由于工作需要对用户提交的数据进行验证,这是一个简单的日期正则验证实例,有需要了解的同学可参考. shell中的if语句需要做一个正则判断,查了一下语法记录之. DATEPATTERN="^[ ...

  10. linux用shell写正则表达式,Linux命令行与Shell脚本编程大全-shell正则表达式

    本章内容: 定义正则表达式 了解基本正则表达式 扩展正则表达式 创建正则表达式 定义正则表达式 正则表达式是你定义的.Linux工具用来过滤文本的模式模板.正则表达式模式利用通配符来代表数据流中的一个 ...

最新文章

  1. Jprofiler注册码
  2. linux通过串口读取文件,Linux 串口读写(二)
  3. 审视安全风险 ISS贯彻“智慧的地球”理念
  4. 《美国教授:中国的研究生基本靠自学成材》
  5. mongo里的type_MongoDB $type 操作符
  6. angular 接入 IdentityServer4
  7. linux运行.pak文件,使用game-to-flatpak脚本将商业Linux游戏安装程序转换为Flatpak应用程序...
  8. java 向父类_Java基础——面向对象(Object父类)
  9. 移动发布手机病毒警示信息 发现六种新型病毒
  10. java小程序实例大全_12个用Java编写基础小程序经典案例(收藏)
  11. Drool实战系列(一)之入门程序
  12. 关于文本分类(情感分析)的英文数据集汇总
  13. ubuntu下mingw32交叉编译环境搭建
  14. C语言实战--DLL注入器
  15. 阿里数据中台与OneData
  16. 学前儿童社会教育 渝粤题库整理
  17. sqlserver-创建表
  18. 认识哈希函数和哈希表
  19. Html .CSS JQUERY (magnifier)实现详情页面特效
  20. sp_server_diagnostics

热门文章

  1. 公关战之下,分裂的今日头条
  2. 冬季好去处七彩蝴蝶园,温暖如春彩蝶纷飞
  3. 技巧 | 清理电脑垃圾
  4. java 拼音首字母_java获取中文拼音首字母的实例
  5. 华为路由器AR6300 取消密码重置提醒和密码长期有效
  6. 中心性算法的简单总结
  7. matlab怎么多重积分,多重积分的MATLAB实现
  8. eclipes安装lombok
  9. MongoDB内嵌文档查询
  10. java-IO流-将文件夹以树形结构打印(打印文件夹目录)问题