目录
引言:在Linux/UNIX 系统中包含很多种类的文本处理器或文本编辑器,其中包括我们之前学习过的VIM 编辑器与grep 等。而 grep,sed,awk 更是Shell 编程中经常用到的文本处理工具, 被称之为Shell 编程三剑客
一、sed概念及工作原理
1、sed 工具概述
sed(Stream EDitor)是一个强大而简单的文本解析转换工具,可以读取文本,并根据指定的条件对文本内容进行编辑(删除、替换、添加、移动等),最后输出所有行或者仅输出处理的某些行。
sed也可以在无交互的情况下实现相当复杂的文本处理操作,被广泛应用于Shell脚本中,用以完成各种自动化处理任务。
sed 依赖于正则表达式
2、sed 的工作流程
主要包括读取、执行和显示三个过程。
读取:sed 从输入流(文件、管道、标准输入)中读取一行内容并存储到临时的缓冲区中(又称模式空间,pattern space)。
执行:默认情况下,所有的 sed 命令都在模式空间中顺序地执行,除非指定了行的地址,否则 sed 命令将会在所有的行上依次执行。
显示:发送修改后的内容到输出流。在发送数据后,模式空间将会被清空。
在所有的文件内容都被处理完成之前,上述过程将重复执行,直至所有内容被处理完。
注:默认情况下所有的sed命令都是在模式空间内执行的,因此输入的文件并不会发生任何变化,除非是用重定向存储输出
二、sed 命令常见用法
通常情况下调用 sed 命令有两种格式,如下所示。其中,“参数”是指操作的目标文件, 当存在多个操作对象时用,文件之间用逗号“,”分隔;而 scriptfile 表示脚本文件,需要用“-f” 选项指定,当脚本文件出现在目标文件之前时,表示通过指定的脚本文件来处理输入的目标文件。
1、sed 命令格式
sed [选项] '操作' 参数
常见的 sed 命令选项主要包含以下几种
-e | 表示用指定命令或脚本来处理输入的文本文件 |
-f | 表示用指定的脚本文件来处理输入的文本文件 |
-h | 或--help 显示帮助 |
-n | 表示显示处理后的结果 |
-i | 直接编辑文本文件 |
-i.bak | 备份文本文件 |
-r,-E | 使用扩展正则表达式 |
-s | 将多个文件视为独立文件,而不是单个连续的长文件流 |
sed命令的常用操作
“操作”用于指定对文件操作的动作行为,也就是 sed 的命令
a | 增加,在当前行下面增加一行指定内容 |
c | 替换,将选定行替换为指定内容 |
d | 删除,删除选定的行 |
i | 插入,在选定行上面插入一行指定内容 |
p | 打印,如果同时指定行,表示打印指定行;如果不指定行,则表示打印所有内容 |
s | 替换,替换指定字符 |
y | 字符转换 |
2、用法案例
以ceshi.txt文件内容为例
打印文本内容打印显示第4行打印显示第1行到第4行内容
输出文件内容所有奇数行
输出所有偶数行 输出第12行至文件尾之间的偶数行
显示第二行内容
/the/ 包含 显示包含the的行
打印显示第4行开始有the的行
打印包含the的行号
显示包含以PI开头或以The开头的行显示出以 数字0-9结尾的行
打印显示包含wood的行wood是整体
nl 打印出文件的行数
显示行号,并删除第4行
删除第1-5行,并显示行号
删除包含有the的行并显示行号
查看文件内容,并显示删除以a-z开头的行
删除空行并显示
删除以 . 结尾的行
3、替换符合条件的文本
在使用 sed 命令进行替换操作时需要用到 s(字符串替换)、c(整行/整块替换)、y
(字符转换)命令选项,常见的用法如下所示。
将每行中的第一个the替换成大写THE
将/etc/passwd下/bin/bash 替换成/sbin/nologin
打印文件内容,将第2行bin替换成ly 并将行尾的/named替换成ly
将第2行中的第2个l 替换成L
将文件内容里the 替换成THE g:全局替换
全局替换将o替换成空行
sed -i.bak 备份修改的文件
sed -i 修改文件内容,关闭增强功能
4、迁移符合条件的文本
在使用 sed 命令迁移符合条件的文本时,常用到以下参数
H | 复制到剪贴板 |
g G | 将剪贴板中的数据覆盖/追加至指定行 |
w | 保存为文件 |
r | 读取指定文件 |
a | 追加指定内容 |
l i | 忽略大小写 |
具体操作方法如下所示
将包含the的行复制剪贴到行尾
将第1行至第5行复制剪贴到第14行后
将包含the的行指定到a.txt文件中
将主机名添加到包含the的每行下
在第7行下追加指定内容为ly
在包含the的行下追加指定内容ly
在第3行下追加指定内容 \n:表示换行
5、使用脚本编辑文件
使用 sed 脚本将多个编辑指令存放到文件中(每行一条编辑指令)
将第1-6行复制剪贴到第16行后
通过“-f”选项来调用。例如执行以下命令即可将第 1~5 行内容转移至第 16 行后。
6、sed 直接操作文件示例
编写一个脚本,用来调整 vsftpd 服务配置,要求禁止匿名用户,但允许本地用户(也允许写入)。
三、总结
这篇博客主要讲述了sed工具,它是一个强大而简单的文本解析转换工具,可以读取文本,并根据指定的条件对文本内容进行编辑(删除、替换、添加、移动等),最后输出所有行或者仅输出处理的某些行。以及一些案例让我们更加熟练的使用sed工具。
原文链接:https://blog.csdn.net/weixin_56270746/article/details/124619183
此处评论已关闭