正则表达式与grep、sed工具使用简介

2022-01-25 08:54:18

正则表达式与grep、sed工具使用简介

一、正则表达式

正则表达式是对字符串操作的一种逻辑公式，就是用事先定义好的一些特定字符、及这些特定字符的组合，组成一个“规则字符串”，这个“规则字符串”用来表达对字符串的一种过滤逻辑。

其介绍如下：

\	将下一个字符标记符、或一个向后引用、或一个八进制转义符	^	匹配输入字符串的开始位置	$	匹配输入字符串的结束位置	*	匹配前面的子表达式任意次
+	匹配前面的子表达式一次或多次(大于等于1次）	？	匹配前面的子表达式零次或一次	{n}	n是一个非负整数匹配确定的n次	{n,}	n是一个非负整数至少匹配n次
{n,m}	m和n均为非负整数其中n<=m。最少匹配n次且最多匹配m次	.	匹配除“\r\n”之外的任何单个字符	x\|y	匹配x或y	[xyz]	字符集合。匹配所包含的任意一个字符
[^xyz]	负值字符集合匹配未包含的任意字符	[a-z]	字符范围。匹配指定范围内的任意字符	[^a-z]	负值字符范围。匹配任何不在指定范围内的任意字符	[A-Z]	大写字母集
( )	定义组，可以用\1、\2等引用	\b	匹配一个单词边界	\B	匹配非单词边界	\d	匹配一个数字字符
\D	匹配一个非数字字符	\n	匹配一个换行符	\r	匹配一个回车符	\s	匹配任何不可见字符
\S	匹配任何可见字符	\t	匹配一个制表符	\v	匹配一个垂直制表符	\w	匹配包括下划线的任何单词字符
\W	匹配任何非单词字符	\f	匹配一个换页符

二、grep介绍与用法

grep 是一种强大的文本搜索工具，它能使用特定模式匹配（包括正则表达式）搜索文本，并默认输出匹配行。建议使用egrep（egrep=grep -E）

grep的选项：

-n 显示行号

-o 只显示匹配的内容

-q 没有任何输出，即静默模式

-I 如果匹配成功只将文件名打印出来

-A 2 如果匹配成功将其后两行一起打印出来不带数字打印一行

-B 2 如果匹配成功将其前两行一起打印出来不带数字打印一行

-C 2 如果匹配成功将其前后两行一起打印出来不带数字打印一行

--color 带颜色打印

-c count即将匹配到的行数打印出来

-E 相当于egrep

-i 不区分大小写

-v 取反，即不匹配

-w 匹配单词

练习：

目标文件/etc/passwd,使用grep命令或egrep

1．显示出所有含有root的行：

2．输出任何包含bash的所有行，还要输出紧接着这行的上下各两行的内容：

3. 显示出有多少行含有nologin。

4．显示出那些行含有root，并将行号一块输出。

5．显示出文件

6．新建用户

abominable

abominate

anomie

atomize

编写正则表达式，将他们匹配出来

7．建四个用户

Alex213sb

Wpq2222b

yH438PIG

egon666

egon

过滤出用户名组成是字母+数字+字母的行

8．显示出/etc目录下所有包含root的文件名

9. 过滤掉/etc/ssh/sshd_config内所有注释和所有空行

三、sed的介绍与用法

sed 是一种流编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有改变，除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。

sed [-nefr] [command]

选项与参数：

-n ：使用安静(silent)模式。在一般 sed 的用法中，所有来自 STDIN 的数据一般都会被列出到终端上。但如果加上 -n 参数后，则只有经过sed 特殊处理的那一行(或者动作)才会被列出来。

-e ：直接在命令列模式上进行 sed 的动作编辑；

-f ：直接将 sed 的动作写在一个文件内， -f filename 则可以运行 filename 内的 sed 动作；

-r ：sed 的动作支持的是延伸型正规表示法的语法。(默认是基础正规表示法语法)

-i ：直接修改读取的文件内容，而不是输出到终端。

command：

a ：新增， a 的后面可以接字串，而这些字串会在新的一行出现(目前的下一行)

c ：取代， c 的后面可以接字串，这些字串可以取代 n1,n2 之间的行

d ：删除，因为是删除啊，所以 d 后面通常不接任何东西

i ：插入， i 的后面可以接字串，而这些字串会在新的一行出现(目前的上一行)；