Linux 正则表达式基础 & grep 匹配正则表达式

原创 于 2025-12-02 03:30:00 发布 · 1k 阅读 · 28 ·
本内容遵循CC 4.0 BY-SA版权协议
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
GEO检测

Linux 正则表达式

文章目录

  • 正则表达式作为一个 pattern，将 pattern 与要搜索的字符串进行匹配，以便查找一个或多个字符串。
  • 正则表达式，自成体系，由普通字符（例如字符 a 到 z）和元字符组成的文字模式。
    • 普通字符：没有显式指定为元字符的所有可打印和不可打印字符字符，包括所有大写和小写字母、所有数字、所有标点符号和其他一些符号。
    • 元字符：出了普通字符之外的字符。
  • 正则表达式，工具（vim、grep、less等）和程序语言（Perl、Python、C等）都使用正则表达式。

正则表达式分类：

  • 普通正则表达式
  • 扩展正则表示，支持更多的元字符。

环境准备

[laoma@shell ~]$ vim words
cat
category
acat
concatenate
cbt
c1t
cCt
c-t
c.t
dog

普通字符

[laoma@shell ~]$ grep 'cat' words
cat
category
acat
concatenate

字符集

.

匹配除换行符（\n、\r）之外的任何单个字符，相等于\[^\n\r]。

[laoma@shell ~]$ grep 'c.t' words
cat
category
acat
concatenate
cbt
c1t
cCt
c-t
c.t

[…]

匹配 [...] 中的任意一个字符。

[laoma@shell ~]$ grep 'c[ab]t' words
cat
category
acat
concatenate
cbt

[a-z] [A-Z] [0-9]

  • [a-z]，匹配所有小写字母。
  • [A-Z]，匹配所有大写字母。
  • [0-9]，匹配所有数字。
[laoma@shell ~]$ grep 'c[a-z]t' words
cat
category
acat
concatenate
cbt

[laoma@shell ~]$ grep 'c[A-Z]t' words
cCt	

[laoma@shell ~]$ grep 'c[0-9]t' words
c1t

[laoma@shell ~]$ grep 'c[a-z0-9]t' words
cat
category
acat
concatenate
cbt
c1t

[laoma@shell ~]$ grep 'c[a-zA-Z0-9]t' words
cat
category
acat
concatenate
cbt
c1t
cCt

# 要想匹配-符号，将改符号写在第一个位置
[laoma@shell ~]$ grep 'c[-a-zA-Z0-9]t' words
cat
category
acat
concatenate
cbt
c1t
cCt
c-t

[^…]

匹配除了 [...] 中字符的所有字符。

[laoma@shell ~]$ grep 'c[^ab]t' words
c1t
cCt
c-t
c.t

# ^放中间会被当做普通字符
[laoma@shell ~]$ grep 'c[a^b]t' words
cat
category
acat
concatenate
cbt

\

将下一个字符标记为或特殊字符、或原义字符、或向后引用、或八进制转义符。

例如， ‘n’ 匹配字符 ‘n’。\n 匹配换行符。序列 \\ 匹配 \，而 \( 则匹配 (。

[laoma@shell ~]$ grep 'c\.t' words
c.t

# 匹配普通字符，虽然可以匹配，但强烈建议不要在前面加\
[laoma@shell ~]$ grep 'c\at' words
cat
category
acat
concatenate

|

| 符号是扩展表达式中元字符，指明两项之间的一个选择。要匹配 |，请使用 \|。

# 使用egrep或者grep -E 匹配
[laoma@shell ~]$ egrep 'cat|dog' words
cat
category
acat
concatenate
dog

# 或者
[laoma@shell ~]$ grep -E 'cat|dog' words
cat
category
acat
concatenate
dog
选项描述
[[:digit:]]数字： 0 1 2 3 4 5 6 7 8 9 等同于[0-9]
[[:xdigit:]]十六进制数字： 0 1 2 3 4 5 6 7 8 9 A B C D E F a b c d e f等同于[0-9a-fA-F]
[[:lower:]]小写字母：在 C 语言环境和ASCII字符编码中，对应于[a-z]
[[:upper:]]大写字母：在 C 语言环境和ASCII字符编码中，对应于[A-Z]
[[:alpha:]]字母字符：[[:lower:]和[[:upper:]]；在C语言环境和ASCII字符编码中，等同于**[A-Za-z]**
[[:alnum:]]字母数字字符：[:alpha:]和[:digit:]；在C语言环境和ASCII字符编码中，等同于**[0-9A-Za-z]**
[[:blank:]]或者[[:space:]]空白字符：在 C 语言环境中，它对应于制表符、换行符、垂直制表符、换页符、回车符和空格。
[[:punct:]]标点符号：在C语言环境和ASCII字符编码中，它对应于!" # $ % &'()*+,-./:;<=>?@[]^_`{|}~
[[:print:]]或者 [[:graph:]]可打印字符： [[:alnum:]]、[[:punct:]]。
[[:cntrl:]]控制字符。在 ASCII中， 这些字符对应八进制代码000到037和 177 (DEL)。

非打印字符

终端中不显示的字符，例如换行符。

字符描述
\cx匹配由x指明的控制字符。例如， \cM 匹配一个 Control-M 或回车符。x 的值必须为 A-Z 或 a-z 之一。否则，将 c 视为一个原义的 ‘c’ 字符。
\f匹配一个换页符。等价于 \x0c 和 \cL。
\n匹配一个换行符。等价于 \x0a 和 \cJ。
\r匹配一个回车符。等价于 \x0d 和 \cM。
\s匹配任何空白字符，包括空格、制表符、换页符等等。等价于 [ \f\n\r\t\v]。注意 Unicode 正则表达式会匹配全角空格符。
\S匹配任何非空白字符。等价于 [^ \f\n\r\t\v]。
\w匹配字母、数字、下划线。等价于 [A-Za-z0-9_]
\W匹配任何非单词字符。等价于[^A-Za-z0-9_]
\t匹配一个制表符。等价于 \x09 和 \cI。
\v匹配一个垂直制表符。等价于 \x0b 和 \cK。

grep 命令支持\w、\W、\s、\S。

定位符

^

匹配行首位置。

[laoma@shell ~]$ grep '^cat' words
cat
category

$

匹配行末位置。

[laoma@shell ~]$ grep 'cat$' words
cat
acat

示例：

# 查看 /var/log/message Aug 19 14:01 到 Aug 19 14:06 时间段发生的事件
[laoma@shell ~]$ sudo cat /var/log/messages | egrep '^Aug 19 14:0[1-6]# 只包含cat的行
[laoma@shell ~]$ cat words | grep '^cat$'
cat

# 排除/etc/profile文件中以#开头的行
[laoma@shell ~]$ cat /etc/profile | egrep  '^[^#]'

# 查询/etc/profile文件中有效行
[laoma@shell ~]$ cat /etc/profile | egrep -v '^#|^$'
# -v 取反，不显示匹配的内容

[root@server ~]# egrep -v '^\s*#|^$' /etc/profile

# 查看系统中有哪些仓库
[laoma@shell ~]$ yum-config-manager | grep '^\[' | grep -v main
[base]
[epel]
[extras]
[updates]

# 查看 /var/log/message Aug 19 14:01 到 Aug 19 14:06 时间段发生的事件
[laoma@shell ~]$ sudo cat /var/log/messages | egrep '^Aug 19 14:0[1-6]

\b

匹配一个单词边界。

[laoma@shell ~]$ echo hello cat kitty >> words 
[laoma@shell ~]$ grep '\bcat' words
cat
category
hello cat kitty

[laoma@shell ~]$ grep 'cat\b' words
cat
acat
hello cat kitty

[laoma@shell ~]$ grep '\bcat\b' words
cat
hello cat kitty

\B

非单词边界匹配。

[laoma@shell ~]$ grep '\Bcat\B' words
concatenate

\< 和 \>

  • \< ，匹配一个单词左边界。
  • \>，匹配一个单词右边界。
[laoma@shell ~]$ grep '\<cat' words
cat
category
hello cat kitty

[laoma@shell ~]$ grep 'cat\>' words
cat
acat
hello cat kitty

限定次数

*

匹配前面的子表达式任意次数。

[laoma@shell ~]$ echo dg >> words 
[laoma@shell ~]$ echo doog >> words 
[laoma@shell ~]$ grep 'do*g' words
dog
dg
doog

+

+ 是扩展表达式元字符，匹配前面的子表达式一次以上次数。

[laoma@shell ~]$ egrep 'do+g' words
dog
doog

?

? 是扩展表达式元字符，匹配前面的子表达式一次以下次数。

[laoma@shell ~]$ egrep 'do?g' words
dog
dg

{n}

{} 是扩展表达式元字符，用于匹配特定次数。例如：{n}，配置n次。

[laoma@shell ~]$ egrep 'do{2}g' words
doog

{m,n}

{m,n}，是扩展表达式元字符，用于匹配次数介于m-n之间。

[laoma@shell ~]$ echo dooog >> words
[laoma@shell ~]$ echo doooog >> words 

[laoma@shell ~]$ egrep 'do{2,3}g' words
doog
dooog

{m,}

{m,}，是扩展表达式元字符，匹配前面的子表达式m次以上次数。

[laoma@shell ~]$ egrep 'do{2,}g' words
doog
dooog
doooog

{,n}

{,n}，是扩展表达式元字符，匹配前面的子表达式n次以下次数。

[laoma@shell ~]$ egrep 'do{,3}g' words
dog
doog
dg
dooog

()

标记一个子表达式。

[laoma@shell ~]$ echo dogdog >> words 
[laoma@shell ~]$ echo dogdogdog >> words 
[laoma@shell ~]$ echo dogdogdogdog >> words 

[laoma@shell ~]$ egrep '(dog){2,3}' words
dogdog
dogdogdog
dogdogdogdog

[laoma@shell ~]$ egrep '(dog){2,}' words
dogdog
dogdogdog
dogdogdogdog

综合案例

如何过滤出以下内容中所有有效IPv4地址？

0.0.0.0
1.1.1.1
11.11.11.111
111.111.111.111
999.9.9.9
01.1.1.1
10.0.0.0
0.1.1.1
266.1.1.1
248.1.1.1
256.1.1.1

参考答案

\b(([1-9]?[0-9])|(1[0-9]{2})|(2[0-4][0-9])|(25[0-4]))(\.(([1-9]?[0-9])|(1[0-9]{2})|(2[0-4][0-9])|(25[0-4]))){3}\b

grep -Eo ‘\b((25[0-5]|2[0-4][0-9]|[01]?[0-9][0-9]?).){3}(25[0-5]|2[0-4][0-9]|[01]?[0-9][0-9]?)\b’ 文件名

1. 命令各部分作用

  • grep：文本搜索工具

  • -E：启用扩展正则表达式（无需对 | () 等符号转义）

  • -o：仅输出匹配到的内容（而非整行）

  • 正则部分：

    \b((25[0-5]|2[0-4][0-9]|[01]?[0-9][0-9]?)\.){3}(25[0-5]|2[0-4][0-9]|[01]?[0-9][0-9]?)\b

    • \b：单词边界，避免匹配到 192.168.1.1000 中的 192.168.1.100 这类片段

    • (25[0-5]|2[0-4][0-9]|[01]?[0-9][0-9]?)

      ：匹配 0-255 的数字段：

      • 25[0-5] → 250-255
      • 2[0-4][0-9] → 200-249
      • [01]?[0-9][0-9]? → 0-199（[01]? 匹配可选的 0/1，后接 1-2 位数字）

    • \.：匹配点号（需转义，否则 . 代表任意字符）

    • {3}：重复前一段（数字段+.）3 次，即匹配前 3 段（如 192.168.1.）

    • 最后一段：单独匹配第 4 个数字段（无末尾点号）

2. 使用示例

假设文件 ips.txt 内容：

有效IP：192.168.1.1、10.0.0.255、255.255.255.255
无效IP：256.0.0.1、192.168.1.、abc.123.45.67
混合内容：服务器IP是172.16.0.0，端口8080

执行命令：

grep -Eo '\b((25[0-5]|2[0-4][0-9]|[01]?[0-9][0-9]?)\.){3}(25[0-5]|2[0-4][0-9]|[01]?[0-9][0-9]?)\b' ips.txt

输出结果：

192.168.1.1
10.0.0.255
255.255.255.255
172.16.0.0
3. 注意事项
  • 匹配范围：仅匹配标准 IPv4 地址，不支持带掩码（如 192.168.1.1/24）或端口（如 192.168.1.1:80）的格式
  • 空值 / 前导零：会匹配 0.0.0.0、010.01.001.1 这类合法（但非常规）的 IP
  • 性能：正则较复杂，处理超大文件时效率略低，可结合 grep -F 先过滤粗匹配再精准校验

反向引用

对一个正则表达式模式或部分模式两边添加圆括号将导致相关匹配存储到一个临时缓冲区中，所捕获的每个子匹配都按照在正则表达式模式中从左到右出现的顺序存储。缓冲区编号从 1 开始，最多可存储 99 个捕获的子表达式。

每个缓冲区都可以使用 \N 访问，其中 N 为一个标识特定缓冲区的一位或两位十进制数。

\N 这用引用方式称之为反向引用。

[laoma@shell ~]$ echo 'laoma laoniu laohu laoma laoniu laohu' | \
> egrep -o '(laoma) (laoniu).*\1'

# 过滤结果如下
laoma laoniu laohu laoma

[laoma@shell ~]$ echo 'Is is the cost of of gasoline going up up?' | \
> egrep -o '\b([a-z]+) \1\b' 
# 过滤结果如下
of of
up up

[laoma@shell ~]$ echo 'Is is the cost of of of gasoline going up up?' | egrep -o '(\b[a-z]+\b\s+)\1{1,}'
# 过滤结果如下
of of of

[laoma@shell ~]$ echo 'Is is the cost of  of of gasoline going up up?' | egrep -o '(\b[a-z]+\b\s+)\1{1,}'
# 过滤结果如下
of of
标签
#linux #正则表达式
Linux Shell 元字符知识笔记
Book_Sea的博客
10-07 289
在编程中，元字符是一种特殊字符，用于在Linux Shell中控制和操作文本。它们在脚本编写和命令行操作中非常有用。本文将详细介绍一些常见的Linux Shell元字符，并提供相应的源代码示例。在Linux Shell中，常用的通配符有星号（*）和问号（?管道（Pipe）：管道用于将一个命令的输出作为另一个命令的输入。命令替换（Command Substitution）：命令替换允许将命令的输出作为字符串嵌入到另一个命令中。重定向（Redirection）：重定向用于将命令的输入或输出重定向到文件或设备。
【Linux】通配符 grep与正则规则表达式 常见命令 (hwclock、passwd、su、who 、w、 uname、 uptime 、last 、free、 dmesg、 ps、 top）
Linux小白一只~正处于学习阶段，觉得我写的还好的请多多给我点赞呀,谢谢大家！！(๑＞ڡ＜)☆
07-20 5078
目录 1、grep 命令常见参数及使用方法 2、命令通配符 *的使用 ？的使用 [ ]的使用 3、命令语法 hwclock命令 passwd 命令 su命令 who命令 w 命令 uname命令 uptime 命令 last命令 free 命令（常用） dmesg命令 ps 命令（常用） top命令 1、grep 命令常见参数及使用方法 -i 忽略大小 -n 打印行号（grep -n 'root' /etc/passwd ..........
Linux - 正则表达式
qq_48391148的博客
07-01 9637
目录1. 正则表达式（regular expression）1.1 元字符1.1.1 ^ 表示以什么开头1.1.2 $ 表示以什么结尾1.1.3 " . "表示任意单个字符1.1.4 *表示前面的字符出现0次或者任意次 .*表示所有的字符1.1.5 |表示或者1.1.6 ^$ 表示空行1.1.7 +表示前面字符出现1次以上1.2 方括号表达式1.2.1 [abc] 表示 a，b，c任意一个 1.2.2 [a-z] 表示小写字母1.2.3 [A-Z] 表示大写字母 1.2.4 [0-Z
Linux：正则表达式
热门推荐
qq_57377057的博客
08-06 1万+
正则表达式又称为正规表达式、常规表达式、在代码中常简写为regex、regex或RE。正则表达式是使用单个字符串来描述、匹配一系列符合某个句法规则的字符串，简单来说，是一种匹配字符串的方法，通过一些特殊符号，实现快速查找、删除、替换某个特定的字符串。这里不得不提的是shell三剑客：grep，sed，awk。............
Linux 正则表达式的基础使用
Sakura_QKS的博客
10-21 3472
正则表达式；基本正则元字符；扩展正则元字符；^；$；.；*；.*；[ ]；[ - ]；[^]；\；\；\(\)；=；!=；=~；+；?；|；()；x{m}；x{,m}；x{m,}；x{n,m}；\s；\d
Linux 正则表达式全解析：基础元字符、扩展正则及 grep 实战用法
最新发布
专注于云计算
08-20 1万+
本文介绍了Linux正则表达式的基本概念和用法，包括普通字符和元字符的区别、正则表达式的分类（普通和扩展），以及字符集、定位符等常见语法。通过具体示例演示了如何在Linux环境下使用grep等工具进行正则匹配，包括字符范围匹配、非打印字符处理、行首/行末定位等实用技巧，并提供了查看日志文件等实际应用场景的参考命令。
Linux grep命令
书香水墨
06-17 1万+
一、grep命令 grep（global search regular expression(RE) and print out the line，全面搜索正则表达式并把行打印出来）是一种强大的文本搜索工具，它能使用正则表达式搜索文本，并把匹配的行打印出来。 1.1 选项 选项 描述 -a 不要忽略二进制数据。 -A&lt;显示列数&gt; 除了显示符合范本样式的那一行之外...
Linux grep
Arist.
03-08 2166
grep常见用法
grep正则表达式
2201_75549363的博客
07-23 4118
通过上面几个简单的示例，可以了解到常见的基础正则表达式的元字符主要包括以下几个匹配输入字符串的开始位置。除非在方括号表达式中使用，表示不包含该字符集合。要匹配“^” 字符本身，请使用“\^”匹配输入字符串的结尾位置。如果设置了RegExp 对象的 Multiline 属性，则“$”也匹配‘\n’或‘\r’。要匹配“$”字符本身，请使用“\$”匹配除“\r\n”之外的任何单个字符反斜杠，又叫转义字符，去除其后紧跟的元字符或通配符的特殊意义匹配前面的子表达式零次或多次。
linux去匹配数字结尾的文件,Linux学习笔记之grep命令和使用正则表达式
weixin_33554506的博客
05-16 2647
0x00正则表达式概述正则表达式是描述一些字符串的模式，是由一些元字符和字符组成的字符串，而这些元字符是一些表示特殊意义的字符，即被正则表达式引擎表达的字符表示与其本意不同的一些字符。0x01正则表达式的分类基本正则表达式扩展正则表达式#这两种分类其支持的元字符不同；0x02基本正则表达式的元字符1、匹配字符：.: 匹配任意单个字符[]: 匹配范围内的任意单个字符[^]: 匹配范围外的任意单...
linux匹配单个任意字符,Linux学习笔记(15)-grep及正则表达式1
weixin_39664477的博客
05-12 1915
1.根据模式搜索文本grepgrep[选项]模式[文件...]#模式：文本字符和正则表达式的元字符组合而成匹配条件-i忽略大小写--color匹配到的字符加颜色高亮-v显示没有被模式匹配到的行-o只显示被模式匹配到的字符串2.正则表达式元字符.匹配任意单个字符[]匹配指定范围内的任意单个字符[^]匹配指定范围外的任意单个字符[:alnum:]代表英文大小写字符及数字，即0-...
shell脚本之正则表达式与grep
m0_56107775的博客
05-05 1541
目录一、正则表达式1、正则表达式的定义2、grep命令3、基础正则表达式4、扩展正则表达式二、文本处理器1、cut2、sort3、uniq4、tr总结 一、正则表达式 1、正则表达式的定义 什么是正则表达式： 正则表达式，又称规则表达式，（英语：Regular Expression）在代码中常简写为 regex、regexp 或 RE ，计算机科学的一个概念。 作用： 正则表达式通常被用来检索、替换那些符合某个模式(规则)的文本 正则表达式不只有一种，而且 Linux 中不同的程序可能会使用不同
grep命令与正则表达式，快速学习正则表达式
qq_46237746的博客
05-02 1752
grep命令与正则表达式，快速学习正则表达式
shell脚本值之正则表达式之grep
weixin_67510296的博客
05-05 2482
一、正则表达式 1.1正则表达式的定义 正则表达式，又称规则表达式，（英语：Regular Expression）在代码中常简写为 regex、regexp 或 RE ，计算机科学的一个概念。 正则表达式通常被用来检索、替换那些符合某个模式(规则)的文本 正则表达式不只有一种，而且 Linux 中不同的程序可能会使用不同的正则表达式，如： 工具：grep sed awk egrep 正则表达式——通常用于判断语句中，用来检查某一字符串是否满足某一格式 正则表达式是由普通字符与元字符组成 普通字符：包括大小写
linux匹配行首字符,linux当中的正则/扩展表达式（grep篇）
weixin_36033417的博客
05-12 4294
linux当中的正则/扩展表达式(grep篇)发布时间：2020-08-25 07:58:30来源：51CTO阅读：96作者：wx5c1cfd6e22842正则表达式在linux当中我们去使用shell脚本的时候经常会用到正则表达式，所以整理一些我们会用到的表达式，以便提升shell脚本能力一、正则表达式(1)通过grep命令实践正则表达式比如我们去过滤带有bbb字段的行，直接可以通过grep "...
linux正则匹配版本号,Linux 下 grep 命令的正则表达式规范
weixin_32441957的博客
05-02 594
使用单个字符串来描述、匹配一系列符合某个句法规则的字符串,这就是正则表达式。Linux 的 grep 命令是一种查找过滤工具，用于在文件中查找指定模式的字符串，其支持正则表达式。通配符和正则表达式的区别在谈正则表达式之前，首先说一下通配符和正则表达式的区别，二者容易混淆。曾经我把通配符认为就是正则表达式，在本该使用统配符的地方意图使用正则表达式，由于没能达到想要的结果，这才意识到不对劲。通配符一般...
linux grep 源码,linux基础之grep命令
weixin_39979159的博客
05-12 665
Linux基础之grep命令grep命令是linux下的行过滤工具，参数繁多，功能比较强大，用起来比较方便，下面就将grep及其egrep分模块讲述其功能。1.Grep：根据模式搜索文本，并将符合模式的文本行显示出来2.Grep的语法：Grep[option]PATTERN[file…]Pattern：文本字符和正则表达是元字符组合而成匹配条件3.grep的常用选项：-i:不区分...
linux之基础正则表达式
tian830937的专栏
09-17 1427
避免的坑：所有的符号都是英文说白了就是用几个符号替换一部分文本，例如有两行：hello java这两行的共同点就是有hello，所以我们可以用 ^hello 或者 hello.* 来表示这两行，在这里 ^hello 或者 hello.* 就是正则表达式，正则表达式本身也是字符串，用一个字符串表示一堆字符串，这就是正则表达式的用处很多人会问正则表达式和通配符有什么区别？如何区分通配符和正则表达式？
linux grep截取字符数,Linux grep命令用法详解
weixin_34920577的博客
05-12 3798
grep: Global search regular expression and print out the line.作用：文本搜索工具，根据用户指定的“模式(过滤条件)”对目标文件逐行进行匹配检查，打印匹配的行模式：由正则表达式的元字符及文本字符所编写出的过滤条件grep [OPTIONS] PATTERN [FILE…]OPTIONS：--color=auto：对匹配到的文本着色后高亮显...
Linux日志查找——正则表达式
ginkgo_biloba的博客
12-05 4960
文章目录基础文件内容一行以xx开头 ^一行以xx结尾 $只包含xx一个单词 ^ $空行 ^$词首 \\&lt; 或 \b词尾 \\&gt; 或 \b独立单词 \\&lt; \\&gt;非单词边界 \B连续次数匹配文件内容连续n个字符 \\{ \\}只出现n次的字符 \\&lt; \{ \}\\&gt;出现的次数在x与y之间 \\{x,y\\}至少连续出现x次 \\{x,\\}至多出现x次...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值