当前位置: 首页 > GNU/Linux, Linux系统 > 正文

Linux运维利器: SED学习笔记

在项目部署或者是升级阶段经常需要写一下shell脚本做一些自动化的工作。所有python的fabric框架能做一些自动化部署的工作。但是开发效率较低,尤其在各种未知类型的配置文件修改方面。这个时候就轮到Unix 流编辑器sed上场了。

根据笔者在工作中遇到的常见问题以及搜索sed的相关资料,简单总结一下sed的基本使用方法,特整理一份sed学习笔记,以作日常备忘记录。当然,要发掘sed的潜力,则必须对“正则表达式”有足够的理解。正则表达式的资料可以看Mastering Regular Expressions》,笔者也总结了一份正则表达式的使用博文《正则表达式应用》,讲解了正则表达式的基本语法,可以作为参考。

 

一、sed基本语法

N命令  将下一行的内容纳入当成缓冲区做匹配;

a命令(append)和 i命令(insert),是用来添加行的;

c命令(compare)是替换匹配行;

d命令(delete)删除匹配行;

p命令(print)打印命令。

 

一、文本间隔

1.1 在每一行后面增加一空行:

1.2 将原来的所有空行删除并在每一行后面增加一空行,这样在输出的文本中每一行后面将有且只有一空行:

1.3 在每一行后面增加两行空行:

1.4 将第一个脚本所产生的所有空行删除(即删除所有偶数行):

1.5 在匹配式样“regex”的行之前插入一空行:

1.6 在匹配式样“regex”的行之后插入一空行:

1.7 在匹配式样“regex”的行之前和之后各插入一空行:

二、编 号

2.1 为文件中的每一行进行编号(简单的左对齐方式),这里使用了“制表符”(tab,见本文末尾关于’\t’的用法的描述)而不是空格来对齐边缘:

2.2 对文件中的所有行编号(行号在左,文字右端对齐):

2.3 对文件中的所有行编号,但只显示非空白行的行号:

2.4 计算行数 (模拟 “wc -l”):

三、文本转换和替代

3.1 将每一行前导的“空白字符”(空格,制表符)删除,使之左对齐:

3.2 将每一行拖尾的“空白字符”(空格,制表符)删除:

3.3 将每一行中的前导和拖尾的空白字符删除:

3.4 在每一行开头处插入5个空格(使全文向右移动5个字符的位置):

3.5 以79个字符为宽度,将所有文本右对齐(78个字符外加最后的一个空格):

3.6 在每一行中查找字串“foo”,并将找到的“foo”替换为“bar”:

3.7 只在行中出现字串“baz”的情况下将“foo”替换成“bar”:

3.8 将“foo”替换成“bar”,并且只在行中未出现字串“baz”的情况下替换:

3.9 不管是“scarlet”“ruby”还是“puce”,一律换成“red”:

3.10 倒置所有行,第一行成为最后一行,依次类推(模拟“tac”):

3.11 将行中的字符逆序排列,第一个字成为最后一字,……(模拟“rev”):

3.12 将每两行连接成一行(类似“paste”):

3.13 如果当前行以反斜杠“\”结束,则将下一行并到当前行末尾,并去掉原来行尾的反斜杠:

3.14 如果当前行以等号开头,将当前行并到上一行末尾,并以单个空格代替原来行头的“=”:

3.15 为数字字串增加逗号分隔符号,将“1234567”改为“1,234,567”:

3.16 在每5行后增加一空白行 (在第5,10,15,20,等行后增加一空白行):

四、选择性地显示特定行

4.1 显示文件中的x行:

4.2 显示包含“AAA”“BBB”或“CCC”的行:

4.3 显示指定的行:

五、选择性地删除特定行

5.1 删除文件中相邻的重复行(模拟“uniq”),只保留重复行中的第一行,其他行删除:

5.2 删除文件中的重复行,不管有无相邻:

5.3 删除除重复行外的所有行(模拟“uniq -d”):

5.4 删除文件中的x行:

5.5 删除匹配式样的行(pattern可以换成任何有效的正则表达式):

5.6 删除文件中的所有空行(与“grep ‘.’ ”效果相同):

5.7 只保留多个相邻空行的前两行:

5.8 删除文件顶部的所有空行:

5.9 删除文件尾部的所有空行:

5.10 删除每个段落的最后一行:

六、其他常见应用

6.1 从邮件头提取“Subject”(标题栏字段),并移除开头的“Subject:”字样:

6.2 在每一行开头加上一个尖括号和空格(引用信息):

6.3 移除大部分的HTML标签(包括跨行标签):

 

参考学习资料:

SED单行脚本快速参考: http://sed.sourceforge.net/sed1line_zh-CN.html

SED 简明教程: https://coolshell.cn/articles/9104.html



这篇博文由 s0nnet 于2018年08月17日发表在 GNU/Linux, Linux系统 分类下, 通告目前不可用,你可以至底部留下评论。
如无特别说明,独木の白帆发表的文章均为原创,欢迎大家转载,转载请注明: Linux运维利器: SED学习笔记 | 独木の白帆
关键字:

Linux运维利器: SED学习笔记:等您坐沙发呢!

发表评论

快捷键:Ctrl+Enter