Shell编程三剑客之sed

sed工具

sed简介:
sed是一个强大而简单的文本解析转换工具,可以读取文本,并根据指定的条件对文本内容进行编辑(删除、替换、添加、移动等),最后输出所有行或者仅输出处理的某些行。sed 也可以在无交互的情况下实现相当复杂的文本处理操作,被广泛应用于 Shell 脚本中,用以完成各种自动化处理任务。
sed工作流程:
读取:sed 从输入流(文件、管道、标准输入)中读取一行内容并存储到临时的缓冲区中(又称模式空间,pattern space)。
执行:默认情况下,所有的 sed 命令都在模式空间中顺序地执行,除非指定了行的地址,否则 sed 命令将会在所有的行上依次行。
显示:发送修改后的内容到输出流。再发送数据后,模式空间将会被清空。
sed命令格式
sed [选项] ‘操作‘ 参数
常见的 sed 命令选项:
-e 或--expression=:表示用指定命令或者脚本来处理输入的文本文件。
-f 或--file=:表示用指定的脚本文件来处理输入的文本文件。
-h 或--help:显示帮助。
-n、--quiet 或 silent:表示仅显示处理后的结果。
-i:直接编辑文本文件。
常见的操作:
a:增加,在当前行下面增加一行指定内容。
c:替换,将选定行替换为指定内容。
d:删除,删除选定的行。
i:插入,在选定行上面插入一行指定内容。
p:打印,如果同时指定行,表示打印指定行;如果不指定行,则表示打印所有内容;如果有非打印字符,则以 ASCII 码输出。其通常与“-n”选项一起使用。
s:替换,替换指定字符。
y:字符转换。

sed命令用法示例:

1)、输出符合条件的文本(p )
sed -n ‘p‘ test1.txt //输出所有内容,等同于 cat test1.txt

sed -n ‘3,5p‘ test1.txt //输出 3~5 行

sed -n ‘p;n‘ test1.txt //输出所有奇数行,n 表示读入下一行资料

sed -n ‘n;p‘ test1.txt //输出所有偶数行,n 表示读入下一行资料

sed -n ‘1,5{n;p}‘ test1.txt //输出第 1~5 行之间的偶数行(第 2/4/6 行)

sed -n ‘/the/p‘ test.txt //输出包含the 的行

sed -n ‘4,/the/p‘ test.txt //输出从第 4 行至第一个包含 the 的行

sed -n ‘/the/=‘ test.txt //输出包含the 的行所在的行号,等号(=)用来输出行号

sed -n ‘/\<wood\>/p‘ test.txt //输出包含单词wood 的行,\<、\>代表单词边界

2)、删除符合条件的文本(d)
nl test1.txt | sed ‘3,5d‘ //删除第 3~5 行

nl test.txt |sed ‘/cross/d‘ //删除包含cross 的行

sed ‘/^[a-z]/d‘ test.txt //删除以小写字母开头的行

sed ‘/.$/d‘ test.txt //删除以"."结尾的行

3)替换符合条件的文本
sed ‘s/the/THE/‘ test1.txt //将每行中的第一个the 替换为 THE

sed ‘s/l/L/2‘ test1.txt //将每行中的第 3 个l 替换为L

sed ‘s/the/THE/g‘ test1.txt //将文件中的所有the 替换为THE

sed ‘s/^/#/‘ test1.txt //在每行行首插入#号

sed ‘/the/s/^/?/‘ test1.txt //在包含the 的每行行首插入?号

sed ‘s/$/EOF/‘ test1.txt //在每行行尾插入字符串EOF

4)迁移符合条件的文本
sed ‘/the/{H;d};$G‘ test1.txt //将包含the 的行迁移至文件末尾

sed ‘1,5{H;d};13G‘ test1.txt //将第 1~5 行内容转移至第13行后

sed ‘3aNew‘ test1.txt //在第 3 行后插入一个新行,内容为 New

sed ‘/the/aNew‘ test1.txt //在包含the 的每行后插入一个新行,内容为 New

sed ‘3aNew1\nNew2‘ test1.txt //在第 3 行后插入多行内容,中间的\n 表示换行

原文地址:https://blog.51cto.com/14449528/2441629

时间: 2024-07-31 19:16:20

Shell编程三剑客之sed的相关文章

Shell编程三剑客详解

在Linux/UNIX系统中包含很多文本处理器或文本编辑器,其中grep.sed和awk是shell编程中经常用到的文本处理工具,因此,被业内的人广泛的称之为"shell编程三剑客". grep命令工具 grep命令工具,在日常生活中,会经常用到,这里也就不多说了,如果有不明白的朋友,请参考博文:Shell脚本应用之正则表达式详解,里面详细介绍了grep命令的相关参数及使用, sed命令工具 sed是一个强大而简单的文本解析转换工具,可以读取文本,并根据指定的条件对文本内容进行编辑,最

shell高级编程三剑客之sed实践讲解

功能说明: sed stream editor(流编辑)增删改查  过滤,取行 sed --version查看sed版本 man sed 语法格式: sed    [options]    [sed-commands]     [input-file]           (sed语句) sed  选项                sed命令               输入文件 sed命令可以是多个或则是一个, [input-file] 输入文件可以是真实存在的文件也可以通过管道  可以是文

Shell编程三剑客之grep

正则表达式 正则表达式的定义:正则表达式又称正规表达式.常规表达式.在代码中常简写为 regex.regexp 或 RE.正则表达式是使用单个字符串来描述.匹配一系列符合某个句法规则的字符串,简单来说, 是一种匹配字符串的方法,通过一些特殊符号,实现快速查找.删除.替换某个特定字符串.基础正则表达式以httpd配置文件为例为了防止失误对httpd的配置文件造成损坏,首先我们先拷贝一份httpd配置文件到别处.1).查找特定字符可从httpd.txt文件中查找出特定字符"the" 所在位

Shell编程之正则表达式(二)

文本处理器 在 Linux/UNIX 系统中包含很多种文本处理器或文本编辑器,其中包括我们之前学习过的VIM 编辑器与 grep 等.而 grep.sed.awk 更是 shell 编程中经常用到的文本处理工具,被称之为 Shell 编程三剑客. sed 工具 sed(Stream EDitor)是一个强大而简单的文本解析转换工具,可以读取文本,并根据指定的条件对文本内容进行编辑(删除.替换.添加.移动等),最后输出所有行或者仅输出处理的某些行.sed 也可以在无交互的情况下实现相复杂的文本处理

shell编程(七)--- sed的用法

sed:称为流编辑器,也称为行编辑器. sed处理过程:sed读取源文件中的一行,并将其放在临时缓冲区中,这个缓冲区称为模式空间,使用相应的模式对模式空间进行处理,并将处理的结果显示到屏幕上,并不会影响源文件,处理结束后,将模式空间中的内容显示至屏幕. sed格式: sed [options] 'AddressCommand' file ... options: -n:静默模式,不显示模式空间中的内容,默认显示默认空间中的内容.常和p命令一起使用. -i:直接修改源文件的内容. -e 'Addr

SHELL编程四剑客练习--sed

SHELL编程四剑客: sed    awk     grep      find sed  可以将数据行进行替换.删除.新增.选取等特定工作 1.sed 如果不加任何参数,是不会去修改文件中的内容的.加 -i  参数会修改,如下图: 2.在文件行首加空格或其他字符,如下图: 行首   ^ 3.在行尾添加字符,如下图: 行尾   $ 4.在某行之后添加内容,如下图: 如果要在之前添加内容,把  a  改为  i   就OK了. 5.只显示其中某一行,如下图: 匹配关键字,"p"&quo

周期性任务计划,包管理,sed以及shell编程基础

周期性任务计划,包管理,sed以及shell编程基础 1.每12小时备份并压缩/etc/目录至/backup目录中,保存文件名称格式为,"etc-年-月-日-时-分.tar.gz"[[email protected] /]# crontab -e0 /12 /usr/bin/tar -zcf /data/backup/etc-$(date '+%Y-%m-%d--%H-%M').tar.gz /ect/*2.rpm包管理功能总结以及实例应用演示rpm是一个功能十分强大的软件包管理系统,

shell 脚本——第七节课 三剑客之sed语句

sed命令 Linux文本处理三剑客 之 sed sed stream EDite 作为行编辑器,对文本进行编辑(以行为单位进行编辑) 注意:sed编辑文件,却不改变原文件: sed的工作原理: 指定一个文本文件,依次读取文本文件中每行的内容,读取到模式空间中(PATTERN SPACE),在模式空间中进行文本匹配(正则表达式),对匹配后的内容进行修改(替换.删除.打印.修改.保存等) 用法: sed [OPTION]... {script-only-if-no-other-script} [i

精讲shell基础以及如何高效的学习shell编程

1.前言 1.1 为什么学习shell编程 Shell脚本语言是实现Linux/UNIX系统管理及自动化运维所必备的重要工具,Linux/UNIX系统的底层及基础应用软件的核心大部分涉及Shell脚本的内容.每一个合格的Linux系统管理员或运维工程师,都需要熟练的编写Shell脚本语言,并能够阅读系统及各类软件附带的Shell脚本内容.只有这样才能提升运维人员的工作效率,适应日益复杂的工作环境,减少不必要的重复工作,从而为个人的职场发展奠定较好的基础 1.2 学好Shell编程所需的基础知识