sed编辑器
- sed是一种流编辑器,流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流。
- sed编辑器可以根据命令来处理数据流中的数据,这些命令要么从命令行中输入,要么存储在一个命令文本文件中。
工作流程
sed 的工作流程主要包括读取、执行和显示三个过程:
- 读取:sed 从输入流(文件、管道、标准输入)中读取一行内容并存储到临时的缓冲区中(又称模式空间,pattern space)。
- 执行:默认情况下,所有的sed 命令都在模式空间中顺序地执行,除非指定了行的地址,否则sed 命令 将会在所有的行上依次执行。
- 显示:发送修改后的内容到输出流。在发送数据后,模式空间将会被清空。在所有的文件内容都被处理完成之前,上述过程将重复执行,直至所有内容被处理完。
- 在所有的文件内容都被处理完成之前,上述过程将重复执行,直至所有内容被处理完。
- 注意:默认情况下所有的sed命令都是在模式空间内执行的,因此输入的文件并不会发生任何变化,除非是用重定向存储输出。
sed常用选项和操作
命令格式
sed 选项 '操作' 文件1 文件2 .....
常用选项
选项 | 含义 |
---|---|
-e 或–expression= | 表示用指定命令来处理输入的文本文件,只有一个操作命令时可省略,一般在执行多个操作命令使用 |
-f 或–file= | 表示用指定的脚本文件来处理输入的文本文件 |
-h 或–help | 显示帮助 |
-n、–quiet 或 --silent | 禁止sed编辑器输出,但可以与p命令一起使用完成输出 |
-i | 直接修改目标文本文件 |
常用操作
操作 | 含义 |
---|---|
s | 替换,替换指定字符 |
d | 删除,删除选定的行 |
a | 增加,在当前行下面增加一行指定内容 |
i | 插入,在选定行上面插入一行指定内容 |
c | 替换,将选定行替换为指定内容 |
y | 字符转换,转换前后的字符长度必须相同(和tr命令替换字符的原理一样,ab替换为AB,即所有匹配到的a字符替换为A,b字符替换为B,不只只替换ab字符,和上文s用法要做区别) |
p | 打印,如果同时指定行,表示打印指定行;如果不指定行,则表示打印所有内容;如果有非打印字符,则以 ASCII 码输出。其通常与“-n”选项一起使用 |
= | 打印行号 |
l(小写L) | 打印数据流中的文本和不可打印的ASCII字符(比如结束符$、制表符\t) |
一:打印内容
打印文件的所有内容
sed -n -e 'p' ayaka1
打印行号
sed -n -e '=' ayaka1
打印数据流中的文本和不可打印的ASCII字符
sed -n -e 'l' ayaka1
两种操作一起用,以p和=为例
方法一
sed -n -e '=;p' ayaka1
#两个操作命令一起写,中间用;号隔开
方法二
sed -n -e '=' -e 'p' ayaka1
#用-e来引导操作选项,两个命令就用2个-e
方法三
sed -n '
> =
> p
> ' testfile1
#方法一的;号就和这里的>类似.具体操作为回车键
二:使用地址:即用sed来寻找要查看的内容
sed编辑器有2种寻址方式:
- 1、以数字形式表示行区间
- 2、用文本模式来过滤出行
以数字形式表示行区间
sed -n '1p' ayaka1
#打印第一行
sed -n '$p' ayaka1
#打印最后一行,$表示最后一行
sed -n '1,3p' ayaka1
#打印从第一行到第三行
sed -n '3,$p' ayaka1
#打印第三行到最后一行
sed -n '1,+3p' ayaka1
#打印1之后的连续3行,即1-4行
sed '5q' ayaka1
#打印前5行信息后退出,q表示退出
sed -n 'p;n' testfile1
#打印奇数行;n表示移动到下一行
sed -n 'n;p' testfile1
#打印偶数行;n表示移动到下一行
原理以奇数行为例,
操作命令p;n
指的先执行p然后在执行n,依次类推,直到文件所有内容都执行完毕。所以此处第一行,执行p操作打印出内容,然后第二行执行n操作移动到下一行,第三行又执行p操作,第四行执行n操作,以此类推,就能输出奇数行的内容
sed -n '2,${n;p}' ayaka1
#从第二行开始到最后一行为止,执行n;p操作。
用文本模式来过滤出行
使用文本模式要在文本条件的两边加上“/”号
sed -n '/user/p' /etc/passwd
#查看etc/passwd里面的含有user的行,注意不是只匹配user这个单词
sed -n '/^a/p' /etc/passwd
#查找以a开头的行
sed -n '/bash$/p' /etc/passwd
#查找bash结尾的行
sed -n '/ftp\|root/p' /etc/passwd
#查找有root或者ftp的行
sed -n '2,/nobody/p' /etc/passwd
#打印出从第二行开始到第一个含有nobody的行结束
sed -n '2,/nobody/=' /etc/passwd
#打印行号
sed -nr '/ro{1,}t/p' /etc/passwd
#-r表示支持扩展正则表达式
#sed -r 使用{n}、{n,}、{n,m}匹配时“{}”不用加“\”
#o{1,}表示匹配o至少一次,上不封顶,即rot,root,rooot等
三:删除行
sed 'd' testfile1
#全删
sed '3d' testfile1
#删除第三行
sed '2,4d' testfile1
#删除2到4行
sed '$d' testfile1
#删除最后一行
sed '/^$/d' ayaka1
sed '/nologin$/d' /etc/passwd
#删除以nologin为结尾的行
sed '/nologin$/!d' /etc/passwd
#d操作前面的!表示取反,即不删除nologin结尾的其他都删除
sed '/2/,/3/d' ayaka2
#从第一个位置打开行删除功能,到第二个位置关闭行删除功能,下面的文档继续执行此操作,直到所有文档执行完毕
sed '/1/,/3/d' ayaka2
四:替换
行范围 s/旧字符串/新字符串/替换标记
4种替换标记:
数字:表明新字符串将替换第几处匹配的地方
g:表明新字符串将会替换所有匹配的地方
p:打印与替换命令匹配的行,与-n一起使用
w 文件:将替换的结果写到文件中
sed -n 's/root/admin/p' /etc/passwd
#p代表将一行中的第一个root替换为admin
sed -n 's/root/admin/2p' /etc/passwd
#2p代表将一行中的第二个root替换为admin
sed -n 's/root/admin/gp' /etc/passwd
#gp代表将一行中所有的root替换为admin
sed 's/root//gp' /etc/passwd
#将所有的root用空替换
sed 's/root/ /gp' /etc/passwd
#将所有的root用空格替换(注意和上面一条用空替换做对比)
sed '1,20 s/^/#/' /etc/passwd
将1到20行的开头替换为#号,即在开头加上#号
sed '/^root/ s/$/#/' /etc/passwd
将以root开头的行的结尾加上#号
sed '/root/ s/^/#/' /etc/passwd
将包含root的行的行首加上#号
sed -rn 's/.*root.*/#&/p' /etc/passwd
#也是表示在含有root的行前面加上#号,其中&代表前面搜索的含有root的行的内容
sed -f passwd.sh /etc/passwd
#用指定的脚本文件passwd.sh来处理输入的文本文件/etc/passwd
sed '1,20w out.txt' /etc/passwd
#将/etc/passwd里面的1到20行保存到当前目录下的out.txt文件中
sed '1,20 s/^/#/w out.txt' /etc/passwd
#将/etc/passwd里面的1到20行的开头加上#号注释并保存到当前目录下的out.txt文件中
替换中使用的分隔符可以为任意字符,但前后要一致,有特殊含义的字符要使用反斜杠\来取消特殊含义
sed -n 's/\/bin\/bash/\/bin\/csh/p' /etc/passwd
#/有特殊含义,要使用\来取消特殊含义
sed -n 's!/bin/bash!/bin/csh!p' /etc/passwd
#使用“!”作为字符串分隔符
sed -i 's9\945\9\99\98\939g' test.ttt
#将94599替换为9893,其中9为分割符
五:插入
sed '/abc/c ABC' ayaka3
#将ayaka3文件中abc这行整体替换为ABC,其中c为整行替换的意思
sed 'y/145/ABC/' testfile2
#使所有的1字符转换成A,所有的4字符转换成B,所有的5字符转换成C,
#其中y可以理解为转化操作,将单个字符转换为对应的单个字符
sed '1,3a ABC' testfile2
在第一到三行下面插入内容,其中a表示在第几行下插入内容
sed '1i ABC' testfile2
#表示在第一行上面插入内容,其中i表示在第几行上面插入内容
sed '5r /etc/resolv.conf' testfile2
#在第五行后面插入文件/etc/resolv.conf里面的内容,其中r表示在第几行后面插入文件内容
sed '/ab/{H;d};$G' /root/ayaka3
#将包含ab的行剪切到末尾,H表示复制到剪切板,G表示粘贴到指定行后
#含义,先用H复制行内容到剪切板,然后d把行内容删除,在G粘贴到指定行后
#注意,sed是一种流编辑器,所以不能将后面的内容复制到前面内容的下面
sed '1,2H;3,4G' /etc/passwd
#将第一行和第二行的内容,复制到第三行下面和第四行下面各一次
sed '1,+3H;6,7G' ayaka3
#将第一行和后面3行的内容,复制到第六行下面和第七行下面各一次
echo "111222333" | sed -r 's/(111)(222)/\2\1/'
#将字符 111 和 222 互换位置
echo "111222333" | sed -r 's/^(.)(.*)(.)$/\3\2\1/'
#将第一个字符和最后一个字符互换