shell编程系列9--文本处理三剑客之sed概述及常见用法总结
sed的工作模式:对文本的行数据一行行处理,如下图
sed(stream editor),是流编辑器,依据特定的匹配模式,对文本逐行匹配,并对匹配行进行特定处理
语法格式
第一种形式:stdout | sed [option] "pattern command"
第二种形式:sed [option] "pattern command" file
命令格式:sed [option] "/pattern/command" file
sed的处理过程
sed的选项
选项
-n 只打印模式匹配行
-e 直接在命令行进行sed编辑,默认选项
-f 编辑工作保存在文件中,指定文件执行
-r 支持扩展正则表达式
-i 直接修改文件内容
# 只打印数据
[root@es01 shell]# cat sed.txt
I love python
I love PYTHON
Hadoop is bigdata frame
[root@es01 shell]# sed 'p' sed.txt
I love python
I love python
I love PYTHON
I love PYTHON
Hadoop is bigdata frame
Hadoop is bigdata frame
[root@es01 shell]# sed -n 'p' sed.txt
I love python
I love PYTHON
Hadoop is bigdata frame
# -n 只显示处理的行,静默模式
[root@es01 shell]# sed '/python/p' sed.txt
I love python
I love python
I love PYTHON
Hadoop is bigdata frame
[root@es01 shell]# sed -n '/python/p' sed.txt
I love python
[root@es01 shell]#
# 通过文件引入规则进行流处理
[root@es01 shell]# cat edit.sed
/python/p
[root@es01 shell]# sed -n -f edit.sed sed.txt
I love python
# -r支持扩展正则表达式
[root@es01 shell]# sed -n -r '/python|PYTHON/p' sed.txt
I love python
I love PYTHON
# 将love替换为like,源文件不修改
[root@es01 shell]# sed -n 's/love/like/g' sed.txt
[root@es01 shell]# sed -n 's/love/like/g;p' sed.txt
I like python
I like PYTHON
Hadoop is bigdata frame
[root@es01 shell]# cat sed.txt
I love python
I love PYTHON
Hadoop is bigdata frame
# 将love替换为like,修改源文件
[root@es01 shell]# sed -i 's/love/like/g' sed.txt
[root@es01 shell]# cat sed.txt
I like python
I like PYTHON
Hadoop is bigdata frame
sed中的pattern详解
pattern用法表
pattern用法:
1、LineNumber 直接指定行号
sed -n "17p" file 打印file文件的第17行
2、StartLine,EndLine 指定起始行号和结束行号
sed -n "10,20p" file 打印file文件的10到20行
3、StartLine,+N 指定起始行号,然后后面N行
sed -n "10,+5p" file 打印file文件从第10行开始,往后面5行的所有行
4、/pattern1/ 正则表达式匹配的行
sed -n "/^root/p" file 打印file文件中以root开头的行
5、/pattern1/,/pattern2/ 从匹配到pattern1的行,到匹配到pattern2的行
sed -n "/^ftp/,/^mail/p" file 打印file文件中第一个匹配到以ftp开头的行,到第二个mail的行
[root@localhost ~]# sed -n "/^mail/,/^ftp/p" passwd
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
6、/LineNumber,/pattern1/ 从指定行号开始匹配,直到匹配到pattern1的
sed -n "4,/^hdfs/p" file 打印file文件中第4行开始匹配,直到以hdfs开头的行
7、/pattern1/,LineNumber 从pattern1匹配的行开始,直到匹配到特定
sed -n "/root/,10p" file 打印file文件中匹配root的行,直到第10行结束
# 打印5行并往后+3行
[root@es01 shell]# sed -n '5,+3p' /etc/passwd
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
# 查找bash的行
[root@es01 shell]# sed -n '/bash/p' /etc/passwd
root:x:0:0:root:/root:/bin/bash
ajie:x:1000:1000:ajie:/home/ajie:/bin/bash
elasticsearch:x:1001:1001::/home/elasticsearch:/bin/bash
# 查找/sbin/nologin的行
[root@es01 shell]# sed -n '/\/sbin\/nologin/p' /etc/passwd
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
polkitd:x:999:998:User for polkitd:/:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
chrony:x:998:996::/var/lib/chrony:/sbin/nologin
nginx:x:997:995:Nginx web server:/var/lib/nginx:/sbin/nologin
mysql:x:27:27:MariaDB Server:/var/lib/mysql:/sbin/nologin
# 正则匹配
# 打印以root开头的行
[root@es01 shell]# sed -n "/^root/p" /etc/passwd
root:x:0:0:root:/root:/bin/bash
# 查找root开头的行到 sync 开头的行结束
[root@es01 shell]# sed -n '/^root/,/^sync/p' /etc/passwd
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
[root@es01 shell]#
# 查找root开头的行,到10行结束
[root@es01 shell]# sed -n '/root/,10p' /etc/passwd
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
编辑命令对照表-上
类别 编辑命令 含义
查询 p 打印
增加 a 往后追加
i 往前追加
r 外部文件读入,往后追加
w 匹配行写入外部文件
编辑命令对照表-下
删除 d 删除
修改 s/old/new 将行内第一个old替换为new
s/old/new/g 将行内全部的old替换为new
s/old/new/2g 将行内前2个old替换为new
s/old/newig 将行内old全部替换为new,忽略大小写
对文件的操作无非就是增加、删除、查询、修改
编辑命令用法总结:
查询:
1、p 打印
删除:
2、d 删除
增加:
3、a 匹配到的行后追加内容
4、i 匹配到的行前追加内容
5、r 将后面指定文件的内容追加到匹配到的行后面
6、w 将匹配到的行内容另存到其他文件中
修改:
7、s/pattern/string/ 查找并替换,查找符合pattern模式的字符串,将其替换为string 适配(一、二、三、四、五)
s/pattern/string/g g表示表示全部匹配
s/pattern/string/2g 2g表示:同一行内,只替换前两个匹配到的,剩下的不替换
s/pattern/string/ig 加i参数表示匹配时忽略大小写,g表示匹配到的全部替换
其他编辑命令:
8、= 显示行号
什么是反向引用?
&和\1 引用模式匹配到的整个串
sed "s/1..e/&r/g" file 在file中搜寻以1开头,然后跟两个任意字符,以e结尾的字符串
sed "s/\(1..e\)/\1r/g" file 和上面实现一样的功能,使用\1代表搜寻到的字符串
上面两种方式实现了一样的功能,分别使用&和\1引用前面匹配到的整个字符串
两者区别在于&只能表示匹配到的完整字符串,只能引用整个字符串:而\1可以使用()对匹配到的字符串进行二次操作
例如:如果我们仅想要替换匹配到的字符串的一部分,name必须使用\1这种方式,不能使用&
sed中引用变量时注意事项:
1、匹配模式中存在变量,则建议使用双引号
2、sed中需要引入自定义变量时,如果外面使用单引号,则自定义变量也必须使用单引号
[root@es01 shell]# cat -n passwd
1 root:x:0:0:root:/root:/bin/bash
2 bin:x:1:1:bin:/bin:/sbin/nologin
3 daemon:x:2:2:daemon:/sbin:/sbin/nologin
4 adm:x:3:4:adm:/var/adm:/sbin/nologin
5 lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
6 sync:x:5:0:sync:/sbin:/bin/sync
7 shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
8 halt:x:7:0:halt:/sbin:/sbin/halt
9 mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
10 operator:x:11:0:operator:/root:/sbin/nologin
11 games:x:12:100:games:/usr/games:/sbin/nologin
12 ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
13 nobody:x:99:99:Nobody:/:/sbin/nologin
14 systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
15 dbus:x:81:81:System message bus:/:/sbin/nologin
16 polkitd:x:999:998:User for polkitd:/:/sbin/nologin
17 sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
18 postfix:x:89:89::/var/spool/postfix:/sbin/nologin
19 ajie:x:1000:1000:ajie:/home/ajie:/bin/bash
20 chrony:x:998:996::/var/lib/chrony:/sbin/nologin
21 elasticsearch:x:1001:1001::/home/elasticsearch:/bin/bash
22 nginx:x:997:995:Nginx web server:/var/lib/nginx:/sbin/nologin
23 mysql:x:27:27:MariaDB Server:/var/lib/mysql:/sbin/nologin
# 删除 passwd 文件的第一行
[root@es01 shell]# sed -i '1d' passwd
[root@es01 shell]# head passwd
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
# 删除 1-3 行
[root@es01 shell]# sed -i '1,3d' passwd
[root@es01 shell]# head passwd
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
# 删除不能登录的用户,即 /sbin/nologin
[root@es01 shell]# sed -i '/\/sbin\/nologin/d' passwd
[root@es01 shell]# cat passwd
root:x:0:0:root:/root:/bin/bash
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
ajie:x:1000:1000:ajie:/home/ajie:/bin/bash
elasticsearch:x:1001:1001::/home/elasticsearch:/bin/bash
# 删除以mail开头一直到以 ftp开头的行
[root@es01 shell]# sed -i '/^mail/,/^ftp/d' passwd
# 在/bin/bash 行后面追加一句话 This is user which can login to system
[root@es01 shell]# sed -i '/\/bin\/bash/a This is user which can login to system' passwd
[root@es01 shell]# cat passwd
root:x:0:0:root:/root:/bin/bash
This is user which can login to system
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
nobody:x:99:99:Nobody:/:/sbin/nologin
systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
polkitd:x:999:998:User for polkitd:/:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
ajie:x:1000:1000:ajie:/home/ajie:/bin/bash
This is user which can login to system
chrony:x:998:996::/var/lib/chrony:/sbin/nologin
elasticsearch:x:1001:1001::/home/elasticsearch:/bin/bash
This is user which can login to system
nginx:x:997:995:Nginx web server:/var/lib/nginx:/sbin/nologin
mysql:x:27:27:MariaDB Server:/var/lib/mysql:/sbin/nologin
# 行前追加 在 root 和 nginx之间所有行之前追加 AAAAAAAAAAAAAAAAAAAA
[root@es01 shell]# sed -i '/^root/,/^nginx/i AAAAAAAAAAAAAAAAAAAA' passwd
[root@es01 shell]# cat passwd
AAAAAAAAAAAAAAAAAAAA
root:x:0:0:root:/root:/bin/bash
AAAAAAAAAAAAAAAAAAAA
This is user which can login to system
AAAAAAAAAAAAAAAAAAAA
bin:x:1:1:bin:/bin:/sbin/nologin
AAAAAAAAAAAAAAAAAAAA
daemon:x:2:2:daemon:/sbin:/sbin/nologin
AAAAAAAAAAAAAAAAAAAA
adm:x:3:4:adm:/var/adm:/sbin/nologin
AAAAAAAAAAAAAAAAAAAA
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
AAAAAAAAAAAAAAAAAAAA
sync:x:5:0:sync:/sbin:/bin/sync
AAAAAAAAAAAAAAAAAAAA
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
AAAAAAAAAAAAAAAAAAAA
halt:x:7:0:halt:/sbin:/sbin/halt
AAAAAAAAAAAAAAAAAAAA
nobody:x:99:99:Nobody:/:/sbin/nologin
AAAAAAAAAAAAAAAAAAAA
systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
AAAAAAAAAAAAAAAAAAAA
dbus:x:81:81:System message bus:/:/sbin/nologin
AAAAAAAAAAAAAAAAAAAA
polkitd:x:999:998:User for polkitd:/:/sbin/nologin
AAAAAAAAAAAAAAAAAAAA
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
AAAAAAAAAAAAAAAAAAAA
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
AAAAAAAAAAAAAAAAAAAA
ajie:x:1000:1000:ajie:/home/ajie:/bin/bash
AAAAAAAAAAAAAAAAAAAA
This is user which can login to system
AAAAAAAAAAAAAAAAAAAA
chrony:x:998:996::/var/lib/chrony:/sbin/nologin
AAAAAAAAAAAAAAAAAAAA
elasticsearch:x:1001:1001::/home/elasticsearch:/bin/bash
AAAAAAAAAAAAAAAAAAAA
This is user which can login to system
AAAAAAAAAAAAAAAAAAAA
nginx:x:997:995:Nginx web server:/var/lib/nginx:/sbin/nologin
# 查找文件中有root的行,读取 list 的内容追加进去
[root@es01 shell]# sed -i '/root/r list' passwd
[root@es01 shell]# cat passwd
root:x:0:0:root:/root:/bin/bash
First Line(XXXXXXXXXXXXXXXX)
Second Line(XXXXXXXXXXXXXX)
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
First Line(XXXXXXXXXXXXXXXX)
Second Line(XXXXXXXXXXXXXX)
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
polkitd:x:999:998:User for polkitd:/:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
ajie:x:1000:1000:ajie:/home/ajie:/bin/bash
chrony:x:998:996::/var/lib/chrony:/sbin/nologin
elasticsearch:x:1001:1001::/home/elasticsearch:/bin/bash
nginx:x:997:995:Nginx web server:/var/lib/nginx:/sbin/nologin
mysql:x:27:27:MariaDB Server:/var/lib/mysql:/sbin/nologin
# 将匹配到的 /bin/bash 行写入到 /tmp/user_login.txt 文件中
[root@es01 shell]# sed '/\/bin\/bash/w /tmp/user_login.txt' passwd
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
polkitd:x:999:998:User for polkitd:/:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
ajie:x:1000:1000:ajie:/home/ajie:/bin/bash
chrony:x:998:996::/var/lib/chrony:/sbin/nologin
elasticsearch:x:1001:1001::/home/elasticsearch:/bin/bash
nginx:x:997:995:Nginx web server:/var/lib/nginx:/sbin/nologin
mysql:x:27:27:MariaDB Server:/var/lib/mysql:/sbin/nologin
[root@es01 shell]# cat /tmp/user_login.txt
root:x:0:0:root:/root:/bin/bash
ajie:x:1000:1000:ajie:/home/ajie:/bin/bash
elasticsearch:x:1001:1001::/home/elasticsearch:/bin/bash
sed 中的修改操作
7.匹配修改
s/pattern/string
s/pattern/string/g
s/pattern/string/2g
s/pattern/string/ig
# passwd小写 /bin/bash 全部替换为/BIN/BASH
[root@localhost shell]# cp /etc/passwd ./
[root@localhost shell]# sed -i 's/\/bin\/bash/\/BIN\/BASH/g' passwd
[root@localhost shell]#
[root@localhost shell]# cat passwd
root:x:0:0:root:/root:/BIN/BASH
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
polkitd:x:999:998:User for polkitd:/:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
ajie:x:1000:1000:ajie:/home/ajie:/BIN/BASH
chrony:x:998:996::/var/lib/chrony:/sbin/nologin
deploy:x:1001:1001::/home/deploy:/BIN/BASH
nginx:x:997:995:Nginx web server:/var/lib/nginx:/sbin/nologin
# 只替换第一个root为ROOT
[root@localhost shell]# sed -i 's/root/ROOT/' passwd
[root@localhost shell]#
[root@localhost shell]# more passwd
ROOT:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/ROOT:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
polkitd:x:999:998:User for polkitd:/:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
ajie:x:1000:1000:ajie:/home/ajie:/bin/bash
chrony:x:998:996::/var/lib/chrony:/sbin/nologin
deploy:x:1001:1001::/home/deploy:/bin/bash
nginx:x:997:995:Nginx web server:/var/lib/nginx:/sbin/nologin
# 只替换 一行的第二个
[root@localhost shell]# sed -i 's/HADOOP/hadoop/2' str.txt
[root@localhost shell]# cat str.txt
HADOOP is a bigdata frame hadoop HADOOP
Spark HADOOP Kafka
Skill on HADOOP
Paper OF HADOOP
Google HADOOP
# 从一行的第二个符号条件的字符开始替换
[root@localhost shell]# sed -i 's/HADOOP/hadoop/2g' str.txt
[root@localhost shell]# cat str.txt
HADOOP is a bigdata frame hadoop
Spark HADOOP Kafka
Skill on HADOOP
Paper OF HADOOP
Google HADOOP
# 显示符合内容的行号,显示包含/sbin/nologin的行号
[root@localhost shell]# sed -n '/\/sbin\/nologin/=' passwd
2
3
4
5
9
10
11
12
13
14
15
16
17
18
20
22
[root@localhost shell]# cat passwd
ROOT:x:0:0:root:/ROOT:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/ROOT:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
polkitd:x:999:998:User for polkitd:/:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
ajie:x:1000:1000:ajie:/home/ajie:/bin/bash
chrony:x:998:996::/var/lib/chrony:/sbin/nologin
deploy:x:1001:1001::/home/deploy:/bin/bash
nginx:x:997:995:Nginx web server:/var/lib/nginx:/sbin/nologin
反向引用:
[root@localhost shell]# cat str.txt
hadAAps is a bigdata frame
Spark hadBBp Kafka
Skill on hadCCp
Paper OF hadDDp
Google hadEEp
# 将hadXXp替换为hadoops
[root@localhost shell]# sed -i 's/had..p/hadoops/g' str.txt
[root@localhost shell]# cat str.txt
hadoops is a bigdata frame
Spark hadoops Kafka
Skill on hadoops
Paper OF hadoops
Google hadoops
#
[root@localhost shell]# cat str.txt
hadAAps is a bigdata frame
Spark hadBBp Kafka
Skill on hadCCp
Paper OF hadDDp
Google hadEEp
# 不改变原来结构的情况下加s
# & 表示匹配前面查找到的内容
[root@localhost shell]# sed -i 's/had..p/&s/g' str.txt
[root@localhost shell]# cat str.txt
hadAApss is a bigdata frame
Spark hadBBps Kafka
Skill on hadCCps
Paper OF hadDDps
Google hadEEps
# \1 也可以表示前面匹配到的内容
[root@localhost shell]# sed -i 's/\(had..ps\)/\1R/g' str.txt
[root@localhost shell]# cat str.txt
hadAApsR is a bigdata frame
Spark hadBBpsR Kafka
Skill on hadCCp
Paper OF hadDDpsR
Google hadEEpsR
# 定义变量的时候如果使用单引号 ' 不会进行替换,注意需要使用双引号"$var"
[root@localhost shell]# cat str.txt
hadoop is a bigdata frame
Spark hadoop Kafka
Skill on hadoop
Paper OF hadoop
Google hadoop
[root@localhost shell]# cat examp.sh
#!/bin/bash
#
old_str=hadoop
new_str=HADOOP
sed -i 's/$old_str/$new_str/g' str.txt
[root@localhost shell]# sh examp.sh
[root@localhost shell]# cat str.txt
hadoop is a bigdata frame
Spark hadoop Kafka
Skill on hadoop
Paper OF hadoop
Google hadoop