Shell脚本sed命令
知识要点
sed命令的工作原理
sed的常用编辑命令
sed的替换命令
sed的特殊用法
sed命令的工作原理
sed是一种支持正则表达式的交互式流编辑器(stream editor)
脚本中修改文本或者文本替换的最佳工具:pattern space是模式空间 hold space是保留空间(相当于仓库)
sed命令的语法
1.sed的语法命令格式
sed [选项] sed编辑命令 输入文件
shell 命令 | sed [选项] sed编辑命令
sed [选项] -f sed脚本文件 输入文件
2.sed的常用选项
-n:只显示匹配处理的行(否则会输出所有)(取消默认输出)
-e:执行多个编辑命令时(一般用;代替)
-i:直接在文件中进行修改,而不是输出到屏幕
-r:支持扩展正则表达式
-f:从脚本文件中读取内容并执行(文件中的编辑命令每行一个,不用;隔开
3.sed的常用编辑命令
p:打印匹配行 print
d:删除指定行 delete
a:在匹配行后面追加 append
i:在匹配行前面插入 insert
c:整行替换
r:将文件的内容读入 read
w:将文本写入文件 write
s:字符串替换(匹配正则表达式)substitution
sed命令示例
1.sed的p命令示例
sed -n ‘/模式/p’ 输入文件 (用来匹配行内容)
这里的模式可以是正则表达式也可以是精确字符
模式用/括起,扩展正则要加 -r选项
例1:sed -n ‘/bash/p’ /etc/passwd (sed读一行处理一行)
显示包含bash的行
例2:sed -rn ‘/^#/!p’ /etc/grub.conf
不显示#号开头的
例3:df -h | sed -n ‘//$/p’
显示以/结尾的行
例4:ifconfig -a | sed -n ‘/1/p’
显示以字母开头的行
2)sed的p命令示例
sed -n ‘行号1,行号2p’ 输入文件 (用来匹配行号)
sed -n 2,3p /etc/passwd 显示2到3行
sed -n ‘10p’ /etc/passwd 显示第10行
sed -n ‘$p’ /etc/passwd 显示最后1行
sed -n ‘2,+2p’ /etc/passwd 显示234行
sed -n ‘3,100!p’ /etc/passwd 不打印3到100行
2.sed的d命令示例
删除操作可以根据行号和模式匹配进行操作
例1: sed ‘3,5d’ /etc/fstab
删除3到5行 (其他行会输出,默认输出)
例2:sed ‘/2/d’ /etc/fstab
删除包含数字2的行
例3:sed ‘/ext3/!d’ /etc/fstab
除了包含ext3的行都删除
例4:sed -r '/^KaTeX parse error: Expected group after '^' at position 2: |^̲#/d' /etc/initt…或者以#开头的行
例5:删除空行和注释
sed -e ‘/^KaTeX parse error: Expected group after '^' at position 10: /d' -e '/^̲#/d' /etc/vsftp…/d ; /^#/d’ /etc/vsftpd/vsftpd.conf
3.sed的a命令示例
追加操作可以根据行号和模式匹配进行操作
例1:sed ‘1a 1111111111111111’ /etc/fstab
在第一行后面追加后面的字符串
例2:sed ‘/boot/a 1111111111111’ /etc/fstab
在包含boot的行下面追加后面的字符串
4.sed的i命令示例
插入操作可以根据行号和模式匹配进行操作
例1:sed ‘$i 1111111111111111’ /etc/fstab
在最后一行前面插入后面的字符串
例2:sed ‘/defaults/i 1111111111111’ /etc/fstab
在包含defaults的行前面插入后面的字符串
5.sed的c命令示例
更改整行操作可以根据行号和模式匹配进行操作
例1:sed ‘/id:/c id:5:initdefault:’ /etc/inittab
将id:所在的行整行替换成后面的字符串
例2:sed ‘3c ONBOOT=no’ ifcfg-eth0
将第三行改成后面的字符串
6.sed的r命令示例
读入操作可以根据行号和模式匹配进行操作
例1:sed ‘$r /etc/hosts’ /etc/fstab
在fstab文件的末尾后面读入hosts文件的内容
例2:df -h | sed '//dev/sda1/r /etc/mtab‘
在/dev/sda1后面读入mtab文件的内容
7.sed的w命令示例
写入文件操作可以根据行号和模式匹配进行操作
例1:sed ‘1w abc.txt’ /etc/passwd
将文件的第一行写入abc.txt(文件不存在,会自动创建)
例2:sed ‘/^#/!w abc.txt’ /etc/inittab
将所有不是#开头的行都写入abc.txt
例3:sed -r ‘/#|$/!w abc.txt’ /etc/vsftpd/vsftpd.conf
将配置文件中除了空行和注释都写入abc.txt
sed的s命令语法格式
sed -n [行号或模式]s/查找内容/替换内容/[替换标记] 文件
替换操作可以根据行号和模式匹配进行操作
替换标记有四种
1.数字:替换每行的第几个
2.g:全局替换,否则只替换第一个字符串。例如ng从第n个开始替换
3.p:显示被执行替换操作的行和-n合用
4.w:将执行替换操作的行输出到指定文件
sed的s命令示例
例1:sed -n ‘s/root/ROOT/2p’ /etc/passwd
将文件中每行的第2个root替换为ROOT
例2:sed ‘/^id/s/:3:/:6:/’ /etc/inittab
将文件中找到以id开头的行中的:3:替换成:6:
例3:sed ‘/^local_enable/s/YES/NO/’ vsftpd.conf
将文件中以local_enable开头的行中的YES改为NO
《禁止本地用户登陆》
例4:sed ‘s/????\n/g’ /etc/passwd
将文件中的:号替换为换行符 (\n是换行符)
例5:sed ‘s/bash/nologin/ ; s/sbin/bin/’ /etc/passwd
将文件中bash替换成nologin,同时将sbin替换成bin
例6:sed -n ‘2,10s/^/#/p’ /etc/passwd
将文件的2到10行开头替换为#号
在2到10行前面加上注释
例7:sed -n ‘s/$/?/p’ /etc/passwd
在每行末尾加上?
sed的s命令可以使用任意分隔符作为定界符
sed -n ‘/^hello/s//bin/bash//sbin/nologin/p’ /etc/passwd(转义)
sed -n ‘/^hello/s|/bin/bash|/sbin/nologin|p’ /etc/passwd
sed -n ‘/^hello/s:/bin/bash:/sbin/nologin:p’ /etc/passwd
注意-i选项是直接修改文件,小心使用
sed命令特殊用法
1.sed的命令中包含变量 # 将文件中的含有root的行整行替换为aixocm
2.sed的命令中有多次操作3.sed的命令中取反操作# 第一个表示不删除最后一行,其余行会删除。 第二个表示第二行到第十行不追加111111111
4.sed的命令中&的用法
1)&用于表示替换命令中的匹配模式# .是正则,表示任意一个字符
2)sed -rn ‘s/<[0-9]{3}>/&0/gp’ /etc/passwd
将所有三位数字后面加个0
5.sed的s命令中支持\t \n
sed -n ‘s/^xixi/\n1111111111111111/p’ /etc/passwd
在xix后中添加换行和1111111111111
sed -n ‘s/^xixi/\t1111111111111111/p’ /etc/passwd
在xixi后添加table和111111111111
sed ‘s/^abrt.*/&\n/’ passwd
将以abrt的行后边加个空行
6.sed的命令中标签的用法
标签:sed使用圆括号定义替换模式中的部分字符
标签可以方便在后面引用,每行指令最多使用9个标签
sed -r ‘s/(2+)(.*)/\1/’ /etc/passwd
显示文件的第一列
sed -r ‘s/(3+)(.*)/\2/’ /etc/passwd
删除文件的第一列
echo aaa bbb ccc | sed -r 's/([a-z]+) ([a-z]+) ([a-z]+)/\3 \2 \1/‘
显示为ccc bbb aaa