sed
一.概念
sed是一种流编辑器,流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流。
sed编辑器可以根据命令来处理数据流中的数据,这些命令要么从命令行中输入,要么存储一个命令文本文件中。
二.工作流程
·读取: sed从输入流(文件、管道、标准输入〉中读取一行内容并存储到临时的缓冲区中(又称模式空间,pattern space)。
·执行: 默认情况下,所有的sed命令都在模式空间中顺序地执行,除非指定了行的地址,否则sed命令将会在所有的行上依次执行。
·显示: 发送修改后的内容到输出流。在发送数据后,模式空间将会被清空。
在所有的文件内容都被处理完成之前,上述过程将重复执行,直至所有内容被处理完。
注意:默认情况下所有的sed命令都是在模式空间内执行的,因此输入的文件并不会发生任何变化,除非是用重定向存储输出。
三.命令格式
sed -e '操作' 文件l 文件2 ...
sed -n -e '操作' 文件1 文件2 ...
sed -f 脚本文件 文件1 文件2 ...
sed -i -e '操作' 文件1 文件2 ...
sed -e 'n{
操作l
操作2
...
}' 文件1 文件2 ...
四.常用选项
选项 | 说明 |
---|---|
-e或–expression= | 表示用指定命令来处理输入的文本文件,只有一个操作命令时可省略,一般在执行多个操作命令使用 |
-f或–file= | 表示用指定的脚本文件来处理输入的文本文件 |
-h或–help | 显示帮助 |
-n、–quiet或silent | 禁止sed编辑器输出,但可以与p命令一起使用完成输出 |
-i | 直接修改目标文本文件 |
五.常用操作
选项 | 说明 |
---|---|
s | 替换,替换指定字符 |
d | 删除,删除选定的行 |
a | 增加,在当前行下面增加一行指定内容 |
i | 插入,在选定行上面插入一行指定内容 |
c | 替换,将选定行替换为指定内容 |
y | 字符转换,转换前后的字符长度必须相同 |
p | 打印,如果同时指定行,表示打印指定行;如果不指定行,则表示打印所有内容,如果有非打印字符,则以ASCII码输出。其通常与"-n"选项一起使用 |
= | 打印行号 |
l(小写L) | 打印数据流中的文本和不可打印的AscII字符(比如结束符$、制表符\t) |
六.实验
1.查询
sed -n '行号p' 打印指定行号的行
sed -n '行1,行2 p' 打印 行1与行2区间的行
sed -n '行1,+n p' 打印 行1与其之后的n行
sed -n '/字符串/p' 打印包含字符串的行
sed -n '/正则表达式/p' 打印所有包含正则能够匹配带内容的行
2.删除
sed '行号 d' 删除指定行号的行
sed '行1,行2 d' 删除行1与行2之间的行
sed '/字符串/ d' 删除包含字符串的行
sed '/正则表达式/ d' 删除所有正则能够匹配到内容的行
sed '行号,/字符串/ d' 删除指定的行到第一个出现字符串的行
sed '/字符串1/,/字符串2/ d' 第一个包含字符串1的行开始删除到从第一个包含字符串2的行,之后的行会重复之前的规则操作
删除空行
1)sed '/^$/d' 文件
2)grep -v '^$'
3)tr -s '\n'
3.替换
sed 's/旧字符串/新字符串/' 替换匹配行的第一个对应的字符串
sed 's/旧字符串/新字符串/2' 替换匹配行的第二个对应的字符串
sed 's/旧字符串/新字符串/g' 替换匹配行所有的字符串
sed '行号 s/旧字符串/新字符串/' 替换指定行的对应的字符串
sed '行1,行2 s/旧字符串/新字符串/g'替换行1与行2区间的匹配行的对应的字符串
sed '/字符串/ s/旧字符串/新字符串/g' 在匹配到的字符串范围内,将旧字符串全部替换成新字符串
sed '/正则表达式/ s/旧字符串/新字符串/g' 在符合匹配条件的正则表达式范围内,将旧字符串全部替换成新字符串
sed '行号c xxxxx' 替换指定行的整行内容
sed '$c xxxxx' 替换最后行的整行内容
sed 'y/abc/123/' 替换所有对应的字符
将修改的内容保存到新文件
sed 's/旧字符串/新字符串/gw file' 把替换后的行内容保存到指定文件
sed -n s/旧字符串/新字符串/gp’> file
4.插入
sed '行号a xxxx' 在指定行下面插入内容
sed '/字符串/a xxxx' 在第一个指定字符串下面插入内容
sed '行号i xxxx'在指定行上面插入内容
sed '/字符串/i xxxx' 在第一个指定字符串上面插入内容
sed '行号r file' 在指定行下面读取文件内容
5.复制剪切
sed '/root/{H;d};$G' /etc/passwd #将包含root的行剪切到末尾,H表示复制到剪切板,G表示粘贴到指定行后
sed '1,2H;3,4G' /etc/passwd #将1、2行复制到3和4行的下面
echo "111222333" | sed -r 's/(111)(222)/\2\1/' #将字符 111 和 222 互换位置
echo "111222333" | sed -r 's/^(.)(.*)(.)$/\3\2\1/' #将第一个字符和最后一个字符互换