shell三剑客之sed命令使用详解

sed是一种流编辑器,它是文本处理中非常中的工具,能够完美的配合正则表达式使用,功能不同凡响。处理时,把当前处理的行存储在临时缓冲区中,称为“模式空间”(pattern space),接着用sed命令处理缓冲区中的内容,处理完成后,把缓冲区的内容送往屏幕。接着处理下一行,这样不断重复,直到文件末尾。文件内容并没有 改变,除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件;简化对文件的反复操作;编写转换程序等。

—sed的选项、命令、替换标记

命令格式


sed [options] ‘command‘ file(s)
sed [options] -f scriptfile file(s)

选项

-e<script>或--expression=<script>:以选项中的指定的script来处理输入的文本文件;
-f<script文件>或--file=<script文件>:以选项中指定的script文件来处理输入的文本文件;
-h或--help:显示帮助;
-n或--quiet或——silent:仅显示script处理后的结果;
-V或--version:显示版本信息。


sed命令


a\ 在当前行下面插入文本。
i\ 在当前行上面插入文本。
c\ 把选定的行改为新的文本。
d  删除,删除选择的行。
D  删除模板块的第一行。
s  替换指定字符
h  拷贝模板块的内容到内存中的缓冲区。
H  追加模板块的内容到内存中的缓冲区。
g  获得内存缓冲区的内容,并替代当前模板块中的文本。
G  获得内存缓冲区的内容,并追加到当前模板块文本的后面。
l  列表不能打印字符的清单。
n  读取下一个输入行,用下一个命令处理新的行而不是用第一个命令。
N  追加下一个输入行到模板块后面并在二者间嵌入一个新行,改变当前行号码。
p  打印模板块的行。P(大写) 打印模板块的第一行。
q  退出Sed。
b  lable 分支到脚本中带有标记的地方,如果分支不存在则分支到脚本的末尾。
r  file 从file中读行。
t  label if分支,从最后一行开始,条件一旦满足或者T,t命令,将导致分支到带有标号的命令处,或者到脚本的末尾。
T  label 错误分支,从最后一行开始,一旦发生错误或者T,t命令,将导致分支到带有标号的命令处,或者到脚本的末尾。
w  file 写并追加模板块到file末尾。  
W  file 写并追加模板块的第一行到file末尾。  
!  表示后面的命令对所有没有被选定的行发生作用。  
=  打印当前行号码。  
#  把注释扩展到下一个换行符以前。


sed替换标记


g  表示行内全面替换。  
p 表示打印行。  
w 表示把行写入一个文件。  
x 表示互换模板块中的文本和缓冲区中的文本。  
y 表示把一个字符翻译为另外的字符(但是不用于正则表达式
\1 子串匹配标记
& 已匹配字符串标记

sed元字符集


^ 匹配行开始,如:/^sed/匹配所有以sed开头的行。
$ 匹配行结束,如:/sed$/匹配所有以sed结尾的行。
. 匹配一个非换行符的任意字符,如:/s.d/匹配s后接一个任意字符,最后是d。
* 匹配0个或多个字符,如:/*sed/匹配所有模板是一个或多个空格后紧跟sed的行。
[] 匹配一个指定范围内的字符,如/[ss]ed/匹配sed和Sed。  
[^] 匹配一个不在指定范围内的字符,如:/[^A-RT-Z]ed/匹配不包含A-R和T-Z的一个字母开头,紧跟ed的行。
\(..\) 匹配子串,保存匹配的字符,如s/\(love\)able/\1rs,loveable被替换成lovers。
& 保存搜索字符用来替换其他字符,如s/love/**&**/,love这成**love**。
\< 匹配单词的开始,如:/\<love/匹配包含以love开头的单词的行。\> 匹配单词的结束,如/love\>/匹配包含以love结尾的单词的行。
x\{m\} 重复字符x,m次,如:/0\{5\}/匹配包含5个0的行。
x\{m,\} 重复字符x,至少m次,如:/0\{5,\}/匹配至少有5个0的行。
x\{m,n\} 重复字符x,至少m次,不多于n次,如:/0\{5,10\}/匹配5~10个0的行。

—sed用法实例

替换操作:s命令


# 替换文本中的字符串
$ sed ‘s/book/books/‘ files

# -n选项和p命令一起使用表示只打印那些发生替换的行
$ sed -n ‘s/book/books/‘p files

# 直接编辑文件选项-i,会匹配file文件中每一行的第一个book替换为books
$ sed -i ‘s/book/books/‘ files

全面替换标记g


# 使用后缀 /g 标记会替换每一行中的所有匹配
$ sed ‘s/book/books/g‘ files

# 当需要从每一行的第N处匹配开始替换时,可以使用 /Ng
$ sed -n ‘s/book/books/2g‘p files

定界符

# 之前命令中字符 / 在sed中作为定界符使用,也可以使用任意的定界符
$ sed ‘s#book#books#‘ files 
$ sed ‘s|book|books|‘ files
$ sed ‘s:book:books:‘ files 

# 定界符出现在样式内部时,需要进行转义
$ sed ‘s/\/user\/bin/#user#bin/‘ files

删除操作:d命令

# 删除空白行:
$ sed ‘/^$/d‘ files

# 删除文件的第2行:
$ sed ‘2d‘ files

# 删除文件的第2行到末尾所有行:
$ sed ‘2,$d‘ files

# 删除文件最后一行:
$ sed ‘$d‘ files

# 删除文件中所有开头是test的行:
$ sed ‘/^test/‘d files

已匹配字符串标记&

# 正则表达式 \w\+ 匹配每一个单词,使用 --&-- 替换它,& 对应于之前所匹配到的单词
# 分别运行看看效果有什么不一样
$ sed ‘s|AB|--&--|g‘ files
$ sed ‘s|\w|--&--|g‘ files
$ sed ‘s|\+|--&--|g‘ files
$ sed ‘s|\w\+|--&--|g‘ files

# 所有以book开头的行都会被替换成[自己+&符后面的字符串(包括空格)]
$ sed ‘s|^book|& Test|g‘ files

组合多个表达式

# 3条命令执行结果是对等的
$ sed ‘s/book/books/‘ files | sed ‘s/books/book/‘
$ sed ‘s/book/books/‘ | sed ‘s/books/book/‘ files
$ sed ‘s/book/books/;s/books/book/‘ files


引用


# sed表达式可以使用单引号来引用,但是如果表达式内部包含变量字符串,就需要使用双引号
$ TEST="Teh is Test ." 
$ sed "s/Test/$TEST/" files

选定行的范围 ,(逗号)


# 所有在模板books和Test所确定的范围内的行都被打印
$ sed -n ‘/books/,/Test/p‘ files

# 打印从第3行开始到第一个包含以Test开始的行之间的所有行
$ sed -n ‘3,/^Test/p‘ files

# 对于模板books和Test之间的行,每行的末尾用字符串LOOK BOOKS替换
$ sed ‘/books/,/Test/s/$/ LOOK BOOKS/‘ files

多点编辑:e命令

# 多点编辑:删除1~2行,并替换Test字符串为check
$ sed -e ‘1,2d‘ -e ‘s/Test/check/‘ files

从文件读入:r命令

# file里的内容被读进来,显示在与Test匹配的行后面,如果匹配多行,则file的内容将显示在所有匹配行的下面
$ sed ‘/Test/r file‘ files


写入文件:w命令


# 在files中所有包含Test的行都被写入file里
$ sed -n ‘/Test/w file‘ files

追加(行下):a\命令


# 将 The is a Test line 追加到 以test 开头的行后面
$ sed ‘/^Test/a\The is a Test line‘ files

在files文件第4行之前插入The is a Test line
$ sed ‘4a\The is a Test line‘ files


下一个:n命令


# 如果book被匹配,则移动到匹配行的下一行,替换这一行的Test,变为TEST,并打印该行,然后继续
$ sed ‘/book/{ n; s/Test/TEST/g; }‘ files

变形:y命令

# 把1~3行内所有book转变为大写. 注意:正则表达式元字符不能使用这个命令
$ sed ‘1,3y/book/BOOK/‘ files

退出:q命令

# 打印完第10行后,退出sed
$ sed ‘4q‘ files

待补充 ......

时间: 2024-10-16 00:38:17

shell三剑客之sed命令使用详解的相关文章

sed命令应用详解

sed应用详解 sed是文本处理处理工具"三大剑客"之一,它 是一种流编辑器,sed一次只处理一行内容.处理时,把当前处理的行存储在临时缓冲区中,称为"模式空间"(pattern space),接着用sed命令处理缓冲区中的内容,处理完成后,把缓冲区的内容送往屏幕.接着处理下一行,这样不断重复,直到文件末尾.sed不会修改原文件内容,除非你使用重定向存储输出.sed主要用来自动编辑一个或多个文件,简化对文件的反复操作,编写转换程序等. 用法:sed [OPTION]

Linux下的sed命令使用详解

sed是stream editor的简称,也就是流编辑器.它一次处理一行内容,处理时,把当前处理的行存储在临时缓冲区中,称为“模式空间”pattern space,接着用sed命令处理缓冲区中的内容,处理完成后,把缓冲区的内容送往屏幕.接着处理下一行,这样不断重复,直到文件末尾.文件内容并没有 改变,除非你使用重定向存储输出. 使用语法sed命令的使用规则是这样的: sed [option] 'command' input_file 其中option是可选的,常用的option有如下几种: -n

sed命令使用详解

[[email protected] ~]# sed [-nefr] [动作] 选项与参数:-n :使用安静(silent)模式.在一般 sed 的用法中,所有来自 STDIN 的数据一般都会被列出到终端上.但如果加上 -n 参数后,则只有经过sed 特殊处理的那一行(或者动作)才会被列出来.-e :直接在命令列模式上进行 sed 的动作编辑:-f :直接将 sed 的动作写在一个文件内, -f filename 则可以运行 filename 内的 sed 动作:-r :sed 的动作支持的是延

linux sed命令使用详解

1. Sed简介 sed 是一种在线编辑器,它一次处理一行内容.处理时,把当前处理的行存储在临时缓冲区中,称为"模式空间"(pattern space),接着用sed命令处理缓冲区中的内容,处理完成后,把缓冲区的内容送往屏幕.接着处理下一行,这样不断重复,直到文件末尾.文件内容并没有 改变,除非你使用重定向存储输出.Sed主要用来自动编辑一个或多个文件:简化对文件的反复操作:编写转换程序等.以下介绍的是Gnu版本的Sed 3.02. 2. 定址 可以通过定址来定位你所希望编辑的行,该地

Linux sed命令实例详解

简介 sed 是一种在线编辑器,它一次处理一行内容.处理时,把当前处理的行存储在临时缓冲区中,称为“模式空间”(pattern space),接着用sed命令处理缓冲区中的内容,处理完成后,把缓冲区的内容送往屏幕.接着处理下一行,这样不断重复,直到文件末尾.文件内容并没有 改变,除非你使用重定向存储输出.Sed主要用来自动编辑一个或多个文件:简化对文件的反复操作:编写转换程序等. sed使用参数 [[email protected] ~]# sed [-nefr] [动作] 选项与参数: -n

sed命令使用详解归纳

用法 sed [option] 'Address Command' yourfile e.g. sed -n '2,13p' lineuser #打印文件lineuser中第2~13行的内容,-n为option, 2,13为Address,p为Command Address与Command中间的空格也可以省略 sed处理过程 待处理的文件一行一行地被sed读入到模式空间(pattern space)中,根据匹配及相应的处理命令进行输出显示,默认下每个模式空间的内容都会输出 sed常用option

linux shell脚本学习xargs命令使用详解

作用是将参数列表转换成小块分段传递给其他命令,以避免参数列表过长的问题 xargs是给命令传递参数的一个过滤器,也是组合多个命令的一个工具.它把一个数据流分割为一些足够小的块,以方便过滤器和命令进行处理.通常情况下,xargs从管道或者stdin中读取数据,但是它也能够从文件的输出中读取数据.xargs的默认命令是echo,这意味着通过管道传递给xargs的输入将会包含换行和空白,不过通过xargs的处理,换行和空白将被空格取代. xargs 是一个强有力的命令,它能够捕获一个命令的输出,然后传

linux nc命令使用详解(转)

linux nc命令使用详解 功能说明:功能强大的网络工具 语 法:nc [-hlnruz][-g<网关...>][-G<指向器数目>][-i<延迟秒数>][-o<输出文件>][-p<通信端口>][-s<来源位址>][-v...][-w<超时秒数>][主机名称][通信端口...] 参 数: -g<网关> 设置路由器跃程通信网关,最丢哦可设置8个. -G<指向器数目> 设置来源路由指向器,其数值为4的

install 命令用法详解

install 命令用法详解 http://man.linuxde.net/install install命令的作用是安装或升级软件或备份数据,它的使用权限是所有用户.install命令和cp命令类似,都可以将文件/目录拷贝到指定的地点. 但是,install允许你控制目标文件的属性. install通常用于程序的makefile,使用它来将程序拷贝到目标(安装)目录  make install 语法 install [OPTION]... [-T] SOURCE DEST install [O