sed编辑器的概念
sed是一种流编辑器,流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流。
sed编辑器可以根据命令来处理数据流中的数据,这些命令要么从命令行中输入,要么存储在一个命令文本文件中。
sed编辑器的工作流程
sed 的工作流程主要包括读取、执行和显示三个过程∶
- 读取∶ sed 从输入流(文件、管道、标准输入)中读取一行内容并存储到临时的缓冲区中 (又称模式空间,pattern space)
- 执行:默认情况下,所有的sed 命令都在模式空间中顺序地执行,除非指定了行的地址, 否则sed 命令将会在所有的行上依次执行。
- 显示∶发送修改后的内容到输出流。在发送数据后, 模式空间将会被清空。在所有的文件内容都被处理完成之前,上述过程将重复执行,直至所有内容被处理完。
在所有的文件内容都被处理完成之前,上述过程将重复执行, 直至所有内容被处理完。
注意∶ 默认情况下所有的sed命令都是在模式空间内执行的,因此输入的文件并不会发生任何变化,除非是用重定向存储输出。
sed命令的格式
第一种: sed -e‘操作‘ 文件1 文件2 第二种: sed -n -e‘操作‘ 文件1 文件2 第三种: sed -f 脚本文件 文件1 文件2 第四种: sed -i -e‘操作‘ 文件1 文件2
常用选项
- -e或--expression=:表示用指定命令来处理输入的文本文件,只有一个操作命令时可省略,一般在执行多个操作命令使用
- -f或--file=:表示用指定的脚本文件来处理输入的文本文件。
- -h或--help:显示帮助。
- -n、--quiet 或 silent:l禁止sed编辑器输出,但可以与p命令一起使用完成输出。
- -i:直接修改目标文本文件。
常用操作
- s:替换,替换指定字符。d:删除,删除选定的行。
- a:增加,在当前行下面增加一行指定内容。i:插入,在选定行上面插入一行指定内容。c:替换,将选定行替换为指定内容。
- y:字符转换,转换前后的字符长度必须相同。
- p:打印,如果同时指定行,表示打印指定行;如果不指定行,则表示打印所有内容;如果有非打印字符,则以ASCII码输出。其通常与"-n"选项一起使用。
- =:打印行号。
- l(小写L):打印数据流中的文本和不可打印的ASCII字符(比如结束符$、制表符\t)
sed对文本的操作方式
sed编辑器有两种寻址方式
以数字形式表示行区间
sed -n ‘1p‘ testfilel #打印第一行
sed -n ‘$p‘ testfile1 #打印最后一行
sed -n ‘1,3p‘ testfile1 #打印1-3行
sed -n ‘3,Sp‘ testfilel #打印3-最后行
sed -n ‘1, +3p‘ testfile1 #打印1之后的连续3行,即1-4行
sed ‘5q‘ testfilel #打印前5行信息后退出,q表示退出
sed -n ‘p;n‘ testfile1 #打印奇数行: n表示移动到下一行
sed -n ‘n;p‘ testfilel #打印偶数行
sed -n ‘2,${n;p}‘ testfile1 #打印2开始 遇到n表示移动到下一行也就是3 打印 以此类推
用文本模式来过滤出行
sed -n ‘/user/p‘ /etc/passwd #过滤包含user的行
sed -n ‘/^a/p‘ /etc/ passwd #过滤以a开头的行
sed -n ‘ /bash$/p‘ /etc/passwd #过滤以bash结尾的行
sed -n ‘ /ftp\| root/p‘ /etc/ passwd #过滤 "|" 或 要加转义符
sed -n ‘2, /nobody/p‘ /etc/passwd #从第2行打印至含有/nobody的行
sed -n ‘2, /nobody/=‘ /etc/passwd #打印第二行至含有/nobody的行的行号
sed -nr ‘ /ro{1, }t/p‘ /etc/ passwd #-r表示支持扩展正则表达式
删除行 (d)
sed ‘d‘ testfile1 #全删
sed ‘ 3d‘ testfile1 #删除第3行
sed ‘2, 4d‘ testfile1 #删除2至4行
sed ‘$d‘ testfile1 #删除末尾行
sed ‘ /^$/a‘ testfilel #删除空行
sed ‘ /nologin$/d‘ /etc/passwd #删除以XX结尾的行
sed ‘ /nologin$/!d‘ /etc/passwd #“!"表示取反操作
sed ‘ /2/. /3/a‘ testfile2 #从第一个位置打开行删除功能,到第二个位置关闭行删除功能
替换
sed 行范围 s/旧字符串/新字符串/替换标记
四种替换标记:
- 数字: 表明新字符串将替换第几处匹配的地方
- g: 表明新字符串将会替换所有匹配的地方
- p: 打印与替换命令匹配的行,与-n一起使用
- w文件: 将替换的结果写到文件中
sed -n ‘s/ 1/ 2/p‘ /etc/passwd #将每行的第一个字符串1替换为字符串2
sed -n ‘s/ 1/ 2/2p‘ /etc/passwd #将每行的第二个字符串1替换为字符串2
sed -n ‘ s/ 1/ 2/gp‘ /etc/passwd #将所有1替换成2
sed ‘s/1//g‘ /etc/passwd #将所有1替换为空 也就是删除所有1
sed ‘1,20 s/^/#/‘ /etc/ passwd #将1到20行的开头替换为#
sed ‘/^root/ s/$/#/‘ /etc/ passwd #将以root开头的行的末尾替换为#
sed -f script.sed testfile2 #使用脚本文件对处理文件进行sed操作
sed ‘1,20w 保存文件‘ 处理文件 #将处理文件的1至20行写入到保存文件
sed ‘1,20 s/^/#/w 保存文件‘ 处理文件 #将处理文件的1至20行开头替换为#并写入到保存文件
sed -n ‘s//a/b//c/d/p‘ 文件名 #将文件中的/a/b替换为/c/d
注:字符串分隔符可用其他任意字符代替,例如"!"、"#"、" "、"1"等
插入
sed ‘ /45/c ABC‘ testfile2 #(c 整行替换) 将45替换成ABC
sed ‘ /45/ y/45/AB/‘ testfile2 #(y替换字符长度要一样 一一对应) 将还有45的行里的4替换成A 5替换成B
sed ‘1,3a ABC‘ testfile2 #(a插入行后) 在1-3行后插入ABC
sed ‘li ABC‘ testfile2 #(i行前插入)在1行前插入ABC
sed ‘5r 文件名‘ testfile2 #(在里面插入其他文件里面的内容) 在第五行后插入文件
sed ‘/root/{H;d};$G‘ /etc/passwd #将包含root的行剪切到末尾,H表示复制到剪切板,d表示删除,G表示粘贴到指定行后
sed ‘1,2H;3, 4G‘ /etc/passwd #将1、2行复制到3和4行的下面
echo "111222333" | sed -r ‘s/ (111) (222)/\2\1/‘ #将字符 111和222互换位置
echo "111222333" | sed -r ‘s/^(.) (.*) (.)$/\3\2\1/‘ #将第一一个字符和最后-一个字符互换