文本处理三剑客——sed基础及进阶_1
2017-08-31 本文已影响0人
二郎5
sed基础及进阶 行编辑器;
用法:sed [option].. 'script' inputfile(处理的文件)..
常用选项:
-n:静默模式,不输出模式空间中的内容到屏幕;
-e:多点编辑;
-f:/path/to/script_file:从指定路径调用编辑脚本;
-r:支持使用扩展的正则表达式;
-i:原处编辑,修改原文件
地址定界:
1.不给地址:对全文做出处理
2.单地址:
4:指定的行,第四行
/pattern/:被此处模式所能匹配到的每一行
3.地址范围
4.步进 ~
步进的用法例如:sed -n '1~2p' wyf.txt
sed -n '2~2p' wyf.txt
编辑命令:
d:删除
p:显示模式空间中的内容;
a \'text':在行后面追加文本,支持使用\n实现多行添加;
例如:sed '/^[0-9]/a \aaa' wyf.txt ##在wyf.txt中查找数字开头的在符合条件的行后边插入aaa;
i \'text':在符合条件的行前面插入文本;支持使用\n实现多行插入;
例如:sed '/^[0-9]/i \aaa' wyf.txt ##在wyf.txt文件中查找数字开头的并在符合条件的行前面插入aaa;
c \'text':替换符合条件的行为单行或多行文本;
例如:sed '/^1/c \wwwwwwwwwwwwwwwwwww' wyf.txt ##在wyf.txt中查找以数字1开头的行,替换为wwwwwwwwwww;
w /path/to/somefile:保存模式空间中的内容至指定文件中;
例如:sed '/^1/w /data/w.txt' wyf.txt ##在wyf.txt中查找以数字1开头的行,将符合条件的行写入到/data/w.txt文件中去;
=:为模式空间中的行打印行号;
例如:sed '/^[0-9]/=' wyf.txt ##在wyf.txt文件中,查找数字开头的行,然后打印符合条件的行号
r /path/from/somefile: 读取指定文件的文本内容到匹配到的行的行后;
例如:sed '/^1/r /data/w.txt' wyf.txt ##在wyf.txt文件中,查找数字1开头的行,在行后读入/data/w.txt文件的内容;
!:取反条件;
s/x/y/:替换x为y,支持使用其他分隔符,例如s@x@y@;
替换标记:
g:行内全局替换;
p:显示替换成功的行;
sed练习:
1.删除/boot/grub/grub.conf文件中所有以空白开头的行行首的空白字符;
sed s'/^[[:space:]]\+//' /boot/grub/grub.conf
2.删除/etc/fstab文件中所有以#开头,后面至少跟一个空白字符的行的行首的#和空白字符;
sed s'/^#[[:space:]]\+//' /etc/fstab
高级编辑命令
sed之所以能以行为单位的编辑或修改文本,其原因在于它使用了两个空间:一个是活动的“模式空间(pattern space)”,另一个是起辅助作用的“保持空间(hold space)这2个空间的使用
模式空间:可以想成工程里面的流水线,数据之间在它上面进行处理。
保持空间:可以想象成仓库,我们在进行数据处理的时候,作为数据的暂存区域。
正常情况下,如果不显示使用某些高级命令,保持空间不会使用到!
sed在正常情况下,将处理的行读入模式空间,脚本中的“sed command(sed命令)”就一条接着一条进行处理,直到脚本执行完毕。然后该行被输出,模式被清空;接着,在重复执行刚才的动作,文件中的新的一行被读入,直到文件处理完毕。
h:把模式空间中的内容覆盖至保持空间中;
H:把模式空间中的内容追加至保持空间中;
g:从保持空间中取出数据覆盖至模式空间;
G:从保持空间取出内容追加至模式空间;
x:把模式空间中的内容与保持空间中的内容进行互换操作;
n:读取匹配到的行的下一行至模式空间;
N:追加匹配到的行的下一行至模式空间;
d:删除模式空间中的行;
D:删除多行模式空间中的所有行;
sed装B神器!!
sed '1!G;h;$!d' wyf.txt 逆向显示文件内容
sed '$!N;$!D' wyf.txt 取出文件最后两行
sed '$!d' wyf.txt 取出文件最后一行
sed 'G' wyf.txt 给文件每行后加一空白行
sed 'n;d' wyf.txt 显示奇数行
sed -n '1!G;h;$p' wyf.txt 效果自己试!!
例如:文件wyf.txt原内容为:
1
2
3
执行: sed '1!G;h;$!d' wyf.txt后,得到
3
2
1