『运维备忘录』之 Sed 命令详解

运维人员不仅要熟悉操作系统、服务器、网络等只是，甚至对于开发相关的也要有所了解。很多运维工作者可能一时半会记不住那么多命令、代码、方法、原理或者用法等等。这里我将结合自身工作，持续给大家更新运维工作所需要接触到的知识点，希望大家喜欢。

今天我们要讲的是 Sed 命令。

一、简介

Sed 全名为 Stream Editor（流编辑器），是 Linux 下一款功能强大的非交互流式文本编辑器，可以对文本文件进行增、删、改、查等操作，支持按行、按字段、按正则匹配文本内容，灵活方便，特别适合于大文件的编辑。它主要依赖于正则表达式。本文主要介绍 sed 的一些基本用法和使用实例。

1.1. Sed 的工作流程

Read：SED 从输入流（文件、管道或标准输入）中读取一行并将其存储在其内部缓冲区中，称为pattern buffer.
Execute：所有 SED 命令都按顺序应用于模式缓冲区。默认情况下，除非指定了行寻址，否则 SED 命令将应用于所有行（全局）。
Display：将（修改后的）内容发送到输出流。发送数据后，模式缓冲区将为空。
重复上述过程，直到文件用完。

二、基本用法

$ sed [选项] command [文件]

参数说明：

参数	说明	示例
-r, -E	使用扩展正则表达式	sed -E 's/[0-9]+//g' input-file
-e	执行多个 sed 命令	sed -e 'command1' -e 'command2' input-file
-f	执行 sed 脚本文件	sed -f script.sed config.conf
-i	直接对内容进行修改，不加-i时默认只是预览，不会对文件做实际修改	sed -i 's/On/Off/' php.ini
-n	取消默认输出，sed默认会输出所有文本内容，使用-n参数后只显示处理过的行	sed -n '3 p' config.conf

2.1. Sed 中的编辑命令

命令	示例	描述
p	sed -n '1,4 p' input.txt	打印第 1-4 行
p	sed -n -e '1,4 p' -e '6,7 p' input.txt	打印第 1-4 行和第 6-7 行
d	sed '1,4 d' input.txt	打印除 1-4 之外的行
w	sed -n '1,4 w output.txt' input.txt	将模式空间写入文件
a	sed '2 a new-line' input.txt	在后面追加一行
i	sed '2 i new-line' input.txt	在前面插入行

2.2. Sed 中的循环命令

参数	描述
b label	分支到标签（用于循环）
t label	仅在成功替换时分支到标签（用于循环）
:label	b 和 t 命令的标签（用于循环）
N	将下一行追加到模式空间
P	多行打印第一行
D	删除多行中的第一行

2.3. Sed 中的杂项标志

参数	描述
/ \| ^ @ ! #	替换分隔符可以是任何字符
&	获取匹配的模式
( ) \1 \2 \3	使用 ( 和 ) 进行分组使用 \1、\2 替换来引用组

2.4. Sed 中替换的结尾标志

$ sed 's/old/new/[flags]' [input-file]

上述 [flag] 的参数释义：

参数	描述
g	全球替代
1,2...	替换第 n 次出现
p	仅打印替换的行
w	仅将替换的行写入文件
I	搜索时忽略大小写
e	在命令行中替换并执行

三、Sed 实例

3.1. 替换文本

$ sed 's/old/new/g' file.txt    # 替换所有出现的字符串
$ sed 's/old/new/2' file.txt    # 仅替换第 n 次出现的字符串
$ sed '5 s/old/new/' file.txt   # 仅在第 5 行替换替换字符串
$ sed '/hello/s/world/universe/' file.txt   # 将“world”替换为“universe”，但前提是该行以“hello”开头
$ sed 's/\\$//' file.txt    # 从每行的末尾删除“\”
$ sed 's/^\s*//' file.txt   # 删除每行开头的所有空格
$ sed 's/#.*$//' file.txt   # 删除评论。 即使是那些在行尾的

3.2. 搜索文本

$ sed -n '/hello/p' file.txt    # 搜索字符串并仅打印匹配的行
$ sed -n '/hello/Ip' file.txt   # 不区分大小写的搜索
$ sed -n '/hello/!p' file.txt   # 搜索字符串，但仅输出不匹配的行

3.3. 追加行

$ sed '2a Text after line 2' file.txt   # 在第 2 行之后追加一行
$ sed '$a THE END!' file.txt            # 在文件末尾追加一行
$ sed '3~3a Some text' file.txt         # 从第 3 行开始，每 3 行后追加一行
$ sed '5i line number five' file.txt    # 在第 5 行之前插入文本
$ sed '/hello/i Example: ' file.txt     # 在包含“hello”的每一行之前插入“Example：”

3.4. 删除行

$ sed '5,7d' file.txt    # 删除文件中的第 5-7 行
$ sed '3~2d' file.txt    # 删除从第 3 行开始的每 2 行
$ sed '$d' file.txt      # 删除文件的最后一行
$ sed '/^Hello/d' file.txt   # 删除以“Hello”开头的行
$ sed '/^$/d' file.txt   # 删除所有空行
$ sed '/^#/d' file.txt   # 删除以“#”开头的行

3.5. 文件格式调整

$ sed G          # 双倍行距
$ sed '/^$/d;G'  # 删除所有空行和双空格
$ sed 'G;G'      # 三倍空间文件
$ sed 'n;d'      # 撤消双倍行距
$ sed '/regex/{x;p;x;}'    # 在匹配“正则表达式”的行上方插入一个空行
$ sed '/regex/G'           # 在匹配“正则表达式”的行下方插入一个空行
$ sed '/regex/{x;p;x;G;}'  # 在匹配“正则表达式”的行周围插入一个空行

3.6. Sed 编号

$ sed = file.txt | sed 'N;s/\n/\t/'   # 文件的数字行（简单的左对齐）
$ sed = file.txt | sed 'N; s/^/   /; s/ *\(.\{6,\}\)\n/\1  /'   # 文件的数字行（数字在左，右对齐）
$ sed '/./=' file.txt | sed '/./N; s/\n/ /'   # 文件的数字行，但如果行不为空，则仅打印数字
$ sed -n '$='   # 计算行数（模拟“wc -l”）