Linux之sed流文本编辑器

发表于 分类于 阅读次数： 本文字数： 1.1k 阅读时长 ≈ 4 分钟

前言

stream editor是Unix的行处理命令, 以行为单位, 依次读入文本的每行进行处理。
sed一般不会对原文件进行操作, 当然, 有例外。

1
2
# 复制测试文件
[root@localhost ~]# cp /etc/passwd /tmp/passwd

打印内容

p参数: 前面接数字或正则表达式, 打印匹配内容
-n参数: 不自动打印内容, 如果不和p一起使用, 则会输出两次相同内容
!参数: 对之前的参数进行取反
a~b参数: 从a行开始, 每隔b行执行操作

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
# 1. 打印所有行
[root@localhost ~]# nl /tmp/passwd | sed -n 'p'
# 2. 打印所有行, 不使用 -n 会打印两次
[root@localhost ~]# nl /tmp/passwd | sed 'p'
# 3. 打印第2行
[root@localhost ~]# nl /tmp/passwd | sed -n '2p'
# 4. 打印匹配正则表达式为 root 的一行
[root@localhost ~]# nl /tmp/passwd | sed -n '/root/p'
# 5. 打印第2-10行的内容
[root@localhost ~]# nl /tmp/passwd | sed -n '2,10p'
# 6. 打印匹配正则表达式为 root 和 ahao 之间的行的内容
[root@localhost ~]# nl /tmp/passwd | sed -n '/root/,/ahao/p'
# 7. 打印除了第2-10行的所有行内容
[root@localhost ~]# nl /tmp/passwd | sed -n '2,10!p'
# 8. 打印第2行开始, 每3行的所有行内容
[root@localhost ~]# nl /tmp/passwd | sed -n '2~3p'

增删(不影响原文件)

na string参数: 表示在第n行后面追加(append)一行string
ni string参数: 表示在第n行前面插入(insert)一行string
nd参数: 将第n行或匹配正则表达式n的一行删除(delete)

1
2
3
4
5
6
7
8
9
10
11
12
13
14
# 1. 在第5行后面追加(append)一行内容
[root@localhost ~]# nl /tmp/passwd | sed '5a HHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHH'
# 2. 在第2-5行每行后面追加(append)一行内容
[root@localhost ~]# nl /tmp/passwd | sed '2,5a HHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHH'

# 3. 在第5行前面插入(insert)一行内容
[root@localhost ~]# nl /tmp/passwd | sed '5i HHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHH'
# 4. 在第2-5行每行前面插入(insert)一行内容
[root@localhost ~]# nl /tmp/passwd | sed '2,5i HHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHH'

# 5. 将第2-5行的内容删除(delete)
[root@localhost ~]# nl /tmp/passwd | sed '2,5d'
# 6. 将匹配正则表达式 root 的行内容删除(delete)
[root@localhost ~]# nl /tmp/passwd | sed '/root/d'

替换

nc string参数: 将第n行替换(replace)为string
s/regexp/replacement/参数: 将每行第一个匹配regexp正则表达式的替换为replacement
s/regexp/replacement/g参数: 将每行所有匹配regexp正则表达式的替换为replacement
s/regexp/str1 & str2/g参数: &参数表示正则表达式匹配的值
s/regexp/\u&/g参数: \u首字母大写, \U所有字母大写
sed -i "s/regexp/\u&/g": \u首字母大写, 回写到原文件
()参数: 括号捕获多个值, 用\1、\2等表示捕获的第几个值

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
# 1. 将第5行替换(replace)为指定字符串
[root@localhost ~]# nl /tmp/passwd | sed '5c HHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHH'
# 2. 将第2-5行替换(replace)为指定字符串
[root@localhost ~]# nl /tmp/passwd | sed '2,5c HHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHHH'

# 3. 将每行第1个匹配正则表达式 : 的内容替换为 %
[root@localhost ~]# nl /tmp/passwd | sed 's/:/%/'
# 4. 将每行所有匹配正则表达式 : 的内容替换为 %, g 全局替换
[root@localhost ~]# nl /tmp/passwd | sed 's/:/%/g'
# 5. 将每行所有匹配正则表达式 : 的内容替换为 %包裹的字符串, &表示匹配的字符串
[root@localhost ~]# nl /tmp/passwd | sed 's/:/%&%/g'

# 6. 将匹配到的单词首字母转为大写, \u转为大写
[root@localhost ~]# nl /tmp/passwd | sed 's/[a-z]*/\u&/g'
# 7. 将匹配到的单词所有字母转为大写, \U转为大写
[root@localhost ~]# nl /tmp/passwd | sed 's/[a-z]*/\U&/g'

# 8. 使用()获取用户名, UID, GID, -r 不用加转义符
[root@localhost ~]# cat /tmp/passwd | sed 's/^\([a-z_-]\+\):x:\([0-9]\+\):\([0-9]\+\):.*$/USER:\1  UID:\2  GID:\3/'
[root@localhost ~]# cat /tmp/passwd | sed -r 's/^([a-z_-]+):x:([0-9]+):([0-9]+):.*$/USER:\1  UID:\2  GID:\3/'

退出

q参数: 退出sed命令

1
2
3
4
# 1. 到第3行就退出(quit)sed
[root@localhost ~]# nl /tmp/passwd | sed '3q'
# 2. 找到匹配 root 正则就退出(quit)sed
[root@localhost ~]# nl /tmp/passwd | sed '/root/q'

读写原文件(修改原文件)

1
2
3
4
5
6
7
8
# 1. 创建一个文件
[root@localhost ~]#  echo -e '123\n456\n789' > hello.txt
# 2. 将/tmp/passwd插入 读入(read)的hello.txt文件的第1行后面打印输出, 不修改hello.txt
[root@localhost ~]# sed '1r /tmp/passwd' hello.txt
# 3. 将 hello.txt 写入(write)覆盖 /tmp/passwd, 修改/tmp/passwd
[root@localhost ~]# sed 'w /tmp/passwd' 
# 4. 将 hello.txt 的第2行写入(write)覆盖 /tmp/passwd
[root@localhost ~]# sed '2w /tmp/passwd' hello.txt