sed工具（编辑脚本神器！）
文章目录
sed编辑器
一、sed概念
sed是一种流编辑器，流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流。
sed编辑器可以根据命令来处理数据流中的数据，这些命令要么从命令行中输入，要么存储在一个命令文本文件中。
二、sed的工作流程
- sed 的工作流程主要包括读取、执行和显示三个过程：
读取：sed 从输入流（文件、管道、标准输入）中读取一行内容并存储到临时的缓冲区中（又称模式空间，pattern space）。
执行：默认情况下，所有的sed 命令都在模式空间中顺序地执行，除非指定了行的地址，否则sed 命令 将会在所有的行上依次执行。
显示：发送修改后的内容到输出流。在发送数据后，模式空间将会被清空。在所有的文件内容都被处理完成之前，上述过程将重复执行，直至所有内容被处理完。
在所有的文件内容都被处理完成之前，上述过程将重复执行，直至所有内容被处理完。
注意：默认情况下所有的sed命令都是在模式空间内执行的，因此输入的文件并不会发生任何变化，除非是用重定向存储输出。
三、sed命令格式
- 命令格式
格式1：sed -e ‘操作’ 文件1 文件2 ......
格式2：sed -n -e '操作' 文件1 文件2 .......
格式3：sed -f 脚本文件 文件1 文件2 .......
格式4：sed -i -e '操作' 文件1 文件2.......
格式5:
sed -e 'n{
操作1
操作2
.......
}' 文件1 文件2......
- 常用选项
-e 或--expression=：表示用指定命令来处理输入的文本文件，只有一个操作命令时可省略，一般在执行多个操作命令使用
-f 或--file=：表示用指定的脚本文件来处理输入的文本文件。
-h 或--help：显示帮助。
-n、--quiet 或 silent：禁止sed编辑器输出，但可以与p命令一起使用完成输出。
-i：直接修改目标文本文件。
- 常用操作
s：替换，替换指定字符。
d：删除，删除选定的行。
a：增加，在当前行下面增加一行指定内容。
i：插入，在选定行上面插入一行指定内容。
c：替换，将选定行替换为指定内容。
y：字符转换，转换前后的字符长度必须相同。
p：打印，如果同时指定行，表示打印指定行；如果不指定行，则表示打印所有内容；如果有非打印字符，则以 ASCII 码输出。其通常与“-n”选项一起使用。
=：打印行号。
l(小写L)：打印数据流中的文本和不可打印的ASCII字符（比如结束符$、制表符\t）
四、sed命令的使用方式
1.打印内容
①不加-n时，sed编辑器也会打印一次
[root@localhost ~] # vim shuzi.txt
[root@localhost ~] # cat shuzi.txt
one
two
three
four
five
[root@localhost ~] # sed 'p' shuzi.txt
one
one
two
two
three
three
four
four
five
five
[root@localhost ~] # sed -n 'p' shuzi.txt
one
two
three
four
five
②打印行号，如果加上-n，就限制了sed编辑器的输出，看不到内容
[root@localhost ~] # sed '=' shuzi.txt
1
one
2
two
3
three
4
four
5
five
[root@localhost ~] # sed -n '=' shuzi.txt
1
2
3
4
5
③通过使用“;”或-e来执行多个操作命令
[root@localhost ~] # sed -n '=;p' shuzi.txt
1
one
2
two
3
three
4
four
5
five
[root@localhost ~] # sed -n -e '=' -e 'p' shuzi.txt
1
one
2
two
3
three
4
four
5
five
补充：单引号“’’“后直接回车
[root@localhost ~] # sed -n '
> =
> p
> ' shuzi.txt
1
one
2
two
3
three
4
four
5
five
④打印ASCII字符
[root@localhost ~] # sed -n 'l' shuzi.txt
one$
two$
three$
four$
five$
2.使用地址
- sed编辑器有2种寻址方式：
- 以数字形式表示行区间
- 用文本模式来过滤出行
①打印行
[root@localhost ~] # sed -n '1p' shuzi.txt #打印第一行
one
[root@localhost ~] # sed -n '$p' shuzi.txt #打印最后一行
five
[root@localhost ~] # sed -n '1,3p' shuzi.txt #打印1到3行
one
two
three
[root@localhost ~] # sed -n '3,$p' shuzi.txt #打印3到最后一行
three
four
five
[root@localhost ~] # sed -n '1,+3p' shuzi.txt #打印包括1之后的连续3行
one
two
three
four
[root@localhost ~] # sed '5q' shuzi.txt #输出5行以后退出
one
two
three
four
five
②打印奇数行
第一步：sed读取第一行，p打印出来
第二步：这里n表示移动到下一行（此时是第二行）
第三步：sed命令结束，再次切换到下一行（此时是第三行）
第四步：重复一二三的步骤，直至最后一行
打印偶数行是‘n;p’与打印奇数行同理
[root@localhost ~] # sed -n 'p;n' shuzi.txt #打印奇数行
one
three
five
[root@localhost ~] # sed -n 'n;p' shuzi.txt #打印偶数行
two
four
[root@localhost ~] # sed -n '2,${n;p}' shuzi.txt #打印从2开始的奇数行
three
five
③过滤并打印出相关行
#在/etc/passwd文件中过滤出含有root的行，并打印出来
[root@localhost ~] # sed -n '/root/p' /etc/passwd
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
#从/etc/passwd文件中打印以‘r’开头的行
[root@localhost ~] # sed -n '/^r'/p /etc/passwd
root:x:0:0:root:/root:/bin/bash
rpc:x:32:32:Rpcbind Daemon:/var/lib/rpcbind:/sbin/nologin
rtkit:x:172:172:RealtimeKit:/proc:/sbin/nologin
rpcuser:x:29:29:RPC Service User:/var/lib/nfs:/sbin/nologin
radvd:x:75:75:radvd user:/:/sbin/nologin
#从/etc/passwd文件中打印以‘bash’结尾的行
[root@localhost ~] # sed -n '/bash$'/p /etc/passwd
root:x:0:0:root:/root:/bin/bash
muhonghuan:x:1000:1000:muhonghuan:/home/muhonghuan:/bin/bash
#打印文件里包含ftp或root的行
[root@localhost ~] # sed -n '/ftp\|root/p' /etc/passwd
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
#从第二行开始打印到包含ftp的行
[root@localhost ~] # sed -n '2,/ftp/p' /etc/passwd
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
#-r表示支持正则表达式
[root@localhost ~] # sed -nr '/ro{1,}t/p' /etc/passwd
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
3.删除行
①删除指定行
[root@localhost ~] # cat shuzi.txt #查看文件
one
two
three
four
five
#全删后输出，不影响原文件，因为没有重定向
[root@localhost ~] # sed 'd' shuzi.txt
#删除第3行
[root@localhost ~] # sed '3d' shuzi.txt
one
two
four
five
#删除2到4行
[root@localhost ~] # sed '2,4d' shuzi.txt
one
five
#删除最后一行
[root@localhost ~] # sed '$d' shuzi.txt
one
two
three
four
②过滤删除指定行
[root@localhost ~] # cat shuzi.txt
one
two
three
four
five
#删除空行
[root@localhost ~] # sed '/^$/d' shuzi.txt
one
two
three
four
five
[root@localhost ~] # cat shuzi.txt
one
two
three
four
five
#删除以e结尾的行
[root@localhost ~] # sed '/e$/d' shuzi.txt
two
four
#删除不以e结尾的行
[root@localhost ~] # sed '/e$/!d' shuzi.txt
one
three
five
③下面这个慎用
即从第一个位置打开行删除功能，到第二个位置关闭行删除功能，按行删除
[root@localhost ~] # cat shuzi.txt
one
two
three
four
five
#从e开始删除，到h结束，但是后面字符里含有e还会开始删除，直到有h结束
[root@localhost ~] # sed '/e/,/h/d' shuzi.txt
four
4.替换
- 格式
行范围 s/旧字符串/新字符串/替换标记
- 4种替换标记
数字：表明新字符串将替换第几处匹配的地方
g：表明新字符串将会替换所有匹配的地方
p：打印与替换命令匹配的行，与-n 一起使用
w 文件：将替换的结果写到文件中
#将第一行的第一个root替换为admin并打印出来
[root@localhost ~] # sed -n 's/root/admin/p' /etc/passwd
admin:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/admin:/sbin/nologin
#将第一行的第二个root替换为admin
[root@localhost ~] # sed -n 's/root/admin/2p' /etc/passwd
root:x:0:0:admin:/root:/bin/bash
#替换所有的root
[root@localhost ~] # sed -n 's/root/admin/gp' /etc/passwd
admin:x:0:0:admin:/admin:/bin/bash
operator:x:11:0:operator:/admin:/sbin/nologin
#删除所有的root
[root@localhost ~] # sed -n 's/root//gp' /etc/passwd
:x:0:0::/:/bin/bash
operator:x:11:0:operator:/:/sbin/nologin
#将1-5行的开头添加#号
[root@localhost ~] # sed '1,5 s/^/#/' /etc/passwd
#root:x:0:0:root:/root:/bin/bash
#bin:x:1:1:bin:/bin:/sbin/nologin
#daemon:x:2:2:daemon:/sbin:/sbin/nologin
#adm:x:3:4:adm:/var/adm:/sbin/nologin
#lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
#把以root开头的行结尾的$替换为#
[root@localhost ~] # sed -n '/^root/ s/$/#/p' /etc/passwd
root:x:0:0:root:/root:/bin/bash#
#创建一个用于sed命令的脚本
[root@localhost ~] # vim script.sed
s/1/22/ #将1替换为22，下面以此类推
s/5/66/
#然后直接使用该脚本对文件进行操作
[root@localhost ~] # sed -f script.sed file
#将/etc/passwd中的1-20行输出保存到file.txt文件中
[root@localhost ~] # sed '1,20w file.txt' /etc/passwd
#将/etc/passwd 中的1-20行的开头添加#后保存到out.txt文件中
[root@localhost ~] # sed '1,20 s/^/#/w out.txt' /etc/passwd
#将/bin/bash替换成/bin/csh，这里在“/”前面加了转义符“\”是防止“/”具有其他的功能，转义符使其只有普通字符的功能
[root@localhost ~] # sed -n 's/\/bin\/bash/\/bin\/csh/p' /etc/passwd #转义符看着很乱，可以使用“!”或者“#”作为字符串的分隔符，作用同上
[root@localhost ~] # sed -n 's!/bin/bash!/bin/csh!p' /etc/passwd