Linux三剑客之sed

时间:2023-03-09 03:07:15
Linux三剑客之sed

sed

sed对文本的处理很强大,并且sed非常小,参数少,容易掌握,他的操作方式根awk有点像。sed按顺序逐行读取文件。然后,它执行为该行指定的所有操作,并在完成请求的修改之后的内容显示出来,也可以存放到文件中。完成了一行上的所有操作之后,它读取文件的下一行,然后重复该过程直到它完成该文件。在这里要注意一点,源文件(默认地)保持不被修改。sed 默认读取整个文件并对其中的每一行进行修改。说白了就是一行一行的操作。我用sed主要就是用里面的替换功能,真的很强大。下面以实例,详细的说一下,先从替换开始,最常用的。

参数:

 sed -h
-n, --quiet, --silent 取消自动打印模式空间
-e 脚本, --expression=脚本 添加“脚本”到程序的运行列表
-f 脚本文件, --file=脚本文件 添加“脚本文件”到程序的运行列表
--follow-symlinks 直接修改文件时跟随软链接
-i[扩展名], --in-place[=扩展名] 直接修改文件(如果指定扩展名就备份文件)
-l N, --line-length=N 指定“l”命令的换行期望长度
--posix 关闭所有 GNU 扩展
-r, --regexp-extended 在脚本中使用扩展正则表达式
-s, --separate 将输入文件视为各个独立的文件而不是一个长的连续输入
-u, --unbuffered 从输入文件读取最少的数据,更频繁的刷新输出
--help 打印帮助并退出
--version 输出版本信息并退出

实例练习:

测试文件如:

 root:x:::root:/root:/bin/bash
bin:x:::bin:/bin:/bin/false
daemon:x:::daemon:/sbin:/bin/false
mail:x:::mail:/var/spool/mail:/bin/false
ftp:x:::ftp:/home/ftp:/bin/false
&nobody:$:::nobody:/:/bin/false
zhangy:x:::,,,:/home/zhangy:/bin/bash
http:x::::/srv/http:/bin/false
dbus:x:::System message bus:/:/bin/false
hal:x:::HAL daemon:/:/bin/false
mysql:x::::/var/lib/mysql:/bin/false
aaa:x::::/home/aaa:/bin/bash
ba:x::::/home/zhangy:/bin/bash
test:x::::/home/test:/bin/bash
@zhangying:*::::/home/test:/bin/bash
policykit:x:::Po

一:把test文件中的root替换成tankzhang

 # sed 's/root/tankzhang/' test

二:用tankzhang把文件test中的root全部替换掉,请注意g这个字母

 # sed 's/root/tankzhang/g' test |grep zhang
tankzhang:x:::tankzhang:/tankzhang:/bin/bash
zhangy:x:::,,,:/home/zhangy:/bin/bash
ba:x::::/home/zhangy:/bin/bash
@zhangying:*::::/home/test:/bin/bash

三:加了-n p后表示只打印那些发生替换的行(部分替换),上面的例子,我并没有加上grep

 # sed -n 's/root/tankzhang/p' test
tankzhang:x:::root:/root:/bin/bash

四:,在第二行,到第八行之间,替换以zhang开头的行,用ying来替换,并显示替换的行

 # cat test | sed -ne '2,8s/^zhang/ying/gp'
yingy:x:::,,,:/home/zhangy:/bin/bash

五:当有多个命令要执行时,可以用分号来分开,并且分隔符可以自定义,默认是/。上面的例子意思是在第二行,到第八行之间,替换以zhang开头的行,用ying来替换,在5,到10间,用goodbay来替换dbus,并显示替换的行

 # cat test | sed -n  '2,8s/^zhang/ying/gp;5,10s#dbus#goodbay#gp'
yingy:x:::,,,:/home/zhangy:/bin/bash
goodbay:x:::System message bus:/:/bin/false

六:,行替换,用匹配root的行,来替换匹配zhangy的行

 $ sed -e '/root/h' -e '/zhangy/g' test
root:x:::root:/root:/bin/bash
bin:x:::bin:/bin:/bin/false
daemon:x:::daemon:/sbin:/bin/false
mail:x:::mail:/var/spool/mail:/bin/false
ftp:x:::ftp:/home/ftp:/bin/false
&nobody:$:::nobody:/:/bin/false
root:x:::root:/root:/bin/bash
http:x::::/srv/http:/bin/false
dbus:x:::System message bus:/:/bin/false
hal:x:::HAL daemon:/:/bin/false
mysql:x::::/var/lib/mysql:/bin/false
aaa:x::::/home/aaa:/bin/bash
root:x:::root:/root:/bin/bash
test:x::::/home/test:/bin/bash
root:x:::root:/root:/bin/bash

注意:特殊匹配

 匹配数字别忘了中括号外面还有一个中括号。
[:alnum:] 字母数字 [a-z A-Z -]
[:alpha:] 字母 [a-z A-Z]
[:blank:] 空格或制表键
[:cntrl:] 任何控制字符
[:digit:] 数字 [-]
[:graph:] 任何可视字符(无空格)
[:lower:] 小写 [a-z]
[:print:] 非控制字符
[:punct:] 标点字符
[:space:] 空格
[:upper:] 大写 [A-Z]
[:xdigit:] 十六进制数字 [- a-f A-F]

例a,删除1,14行

 $ sed -e '1,14d' test
@zhangying:*::::/home/test:/bin/bash
policykit:x:::Po

例b,删除4以后的行,包括第4行,把$当成最大行数就行了。

 $ sed -e '4,$d' test
root:x:::root:/root:/bin/bash
bin:x:::bin:/bin:/bin/false
daemon:x:::daemon:/sbin:/bin/false

例c,删除包括false的行,或者包括bash的行,别忘了加\

 $ sed -e '/\(false\|bash\)$/d' test
policykit:x:::Po

例d,删除从匹配root的行,到匹配以test开头的行,中间的行

 $ sed -e '/root/,/^test/d' test
@zhangying:*::::/home/test:/bin/bash
policykit:x:::Po