sed很强大的文本操作命令

sed对文本的处理很强大,并且sed非常小,参数少,容易掌握,他的操作方式根awk有点像。sed按顺序逐行读取文件。然后,它执行为 该行指定的所有操作,并在完成请求的修改之后的内容显示出来,也可以存放到文件中。完成了一行上的所有操作之后,它读取文件的下一行,然后重复该过程直到 它完成该文件。在这里要注意一点,源文件(默认地)保持不被修改。sed 默认读取整个文件并对其中的每一行进行修改。说白了就是一行一行的操作。我用sed主要就是用里面的替换功能,真的很强大。下面以实例,详细的说一下,先 从替换开始,最常用的。

一,测试文件test,讲awk时用的一样

sed -h
-n, --quiet, --silent    取消自动打印模式空间
 -e 脚本, --expression=脚本   添加“脚本”到程序的运行列表
 -f 脚本文件, --file=脚本文件  添加“脚本文件”到程序的运行列表
 --follow-symlinks    直接修改文件时跟随软链接
 -i[扩展名], --in-place[=扩展名]    直接修改文件(如果指定扩展名就备份文件)
 -l N, --line-length=N   指定“l”命令的换行期望长度
 --posix  关闭所有 GNU 扩展
 -r, --regexp-extended  在脚本中使用扩展正则表达式
 -s, --separate  将输入文件视为各个独立的文件而不是一个长的连续输入
 -u, --unbuffered  从输入文件读取最少的数据,更频繁的刷新输出
 --help     打印帮助并退出
 --version  输出版本信息并退出

//下面test文件的内容
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/bin/false
daemon:x:2:2:daemon:/sbin:/bin/false
mail:x:8:12:mail:/var/spool/mail:/bin/false
ftp:x:14:11:ftp:/home/ftp:/bin/false
&nobody:$:99:99:nobody:/:/bin/false
zhangy:x:1000:100:,,,:/home/zhangy:/bin/bash
http:x:33:33::/srv/http:/bin/false
dbus:x:81:81:System message bus:/:/bin/false
hal:x:82:82:HAL daemon:/:/bin/false
mysql:x:89:89::/var/lib/mysql:/bin/false
aaa:x:1001:1001::/home/aaa:/bin/bash
ba:x:1002:1002::/home/zhangy:/bin/bash
test:x:1003:1003::/home/test:/bin/bash
@zhangying:*:1004:1004::/home/test:/bin/bash
policykit:x:102:1005:Po

二,举例

1,替换功能

[[email protected] mytest]# sed ‘s/root/tankzhang/‘ test |grep tank
 tankzhang:x:0:0:root:/root:/bin/bash

上面的这个例子,把test文件中的root替换成tankzhang,只不过只替换一次及终止在这一行的操作,转到下一行

[[email protected] mytest]# sed ‘s/root/tankzhang/g‘ test |grep zhang
 tankzhang:x:0:0:tankzhang:/tankzhang:/bin/bash
 zhangy:x:1000:100:,,,:/home/zhangy:/bin/bash
 ba:x:1002:1002::/home/zhangy:/bin/bash
 @zhangying:*:1004:1004::/home/test:/bin/bash

上面这个例子,用tankzhang把文件test中的root全部替换掉,请注意 g 这个字母,global的缩写

[[email protected] mytest]# sed -n ‘s/root/tankzhang/p‘ test
 tankzhang:x:0:0:root:/root:/bin/bash

加了-n p后表示只打印那些发生替换的行(部分替换),上面的例子,我并没有加上grep

[[email protected] mytest]# sed -n ‘s/root/tankzhang/pg‘ test
 tankzhang:x:0:0:tankzhang:/tankzhang:/bin/bash

加了-n pg后表示只打印那些发生替换的行(全部替换),上面的例子,我并没有加上grep

[[email protected] mytest]# cat test | sed -ne ‘2,8s/^zhang/ying/gp‘
 yingy:x:1000:100:,,,:/home/zhangy:/bin/bash

在第二行,到第八行之间,替换以zhang开头的行,用ying来替换,并显示替换的行

[[email protected] mytest]# cat test | sed -n  ‘2,8s/^zhang/ying/gp;5,10s#dbus#goodbay#gp‘
 yingy:x:1000:100:,,,:/home/zhangy:/bin/bash
 goodbay:x:81:81:System message bus:/:/bin/false

当有多个命令要执行时,可以用分号来分开,并且分隔符可以自定义,默认是/。上面的例子意思是在第二行,到第八行之间,替换以zhang开头的行,用ying来替换,在5,到10间,用goodbay来替换dbus,并显示替换的行

[[email protected] mytest]# cat test | sed -ne ‘2,8s/zhang/ying/gp‘ -ne  ‘5,10s#dbus#goodbay#gp‘

yingy:x:1000:100:,,,:/home/yingy:/bin/bash
 goodbay:x:81:81:System message bus:/:/bin/false

这个例子根上面的那个例子一样,只不过有一点不同,那就是-e来充当了分号的作用,-e也能分割多个命令。

[[email protected] mytest]# sed -ne ‘2,8s/^\(zhangy\)/\1ing/gp‘ test
 zhangying:x:1000:100:,,,:/home/zhangy:/bin/bash

正则的用法,在sed里面用括号的话要加上\的,不然会报错的。

[[email protected] mytest]# sed -ne ‘2,15s/zhang/&ying/gp‘ test
 zhangyingy:x:1000:100:,,,:/home/zhangyingy:/bin/bash
 ba:x:1002:1002::/home/zhangyingy:/bin/bash
 @zhangyingying:*:1004:1004::/home/test:/bin/bash

&的用处是,在找到的字符串后加上&后面的字符串,zhang后都加上了ying

[[email protected] mytest]# sed -ne ‘/^zhang/,/Po/s/zhang/ying/gp‘ test
 yingy:x:1000:100:,,,:/home/yingy:/bin/bash
 ba:x:1002:1002::/home/yingy:/bin/bash
 @yingying:*:1004:1004::/home/test:/bin/bash

上面的这个例子是说,在以zhang开头的行开始,到匹配Po的行结束,在他们之间进行替换

[[email protected] mytest]$ sed  ‘/root/{n;s/bin/tank/}‘ test
 root:x:0:0:root:/root:/bin/bash
 tank:x:1:1:bin:/bin:/bin/false

n;这里的n是next的缩写,找到root的行后,将其下一行的中的bin换成tank

[[email protected] mytest]$ sed -e ‘1,2y/root/ROOT/‘ test
 ROOT:x:0:0:ROOT:/ROOT:/bin/bash
 bin:x:1:1:bin:/bin:/bin/false

y的作用是将匹配的字符换成大写,不过替换字符和被替换字符长度要一样

[[email protected] mytest]$ sed -e ‘/root/h‘ -e ‘$G‘ test

................................

.............................

ba:x:1002:1002::/home/zhangy:/bin/bash
 test:x:1003:1003::/home/test:/bin/bash
 @zhangying:*:1004:1004::/home/test:/bin/bash

root:x:0:0:root:/root:/bin/bash

这个例子中,h的作用是将找到的行,放到一个缓存区,G的作用是将缓存区中的内容放到最后一行。

[[email protected] mytest]$ sed -e ‘/root/h‘ -e ‘/zhangy/g‘ test
 root:x:0:0:root:/root:/bin/bash
 bin:x:1:1:bin:/bin:/bin/false
 daemon:x:2:2:daemon:/sbin:/bin/false
 mail:x:8:12:mail:/var/spool/mail:/bin/false
 ftp:x:14:11:ftp:/home/ftp:/bin/false
 &nobody:$:99:99:nobody:/:/bin/false
 root:x:0:0:root:/root:/bin/bash
 http:x:33:33::/srv/http:/bin/false
 dbus:x:81:81:System message bus:/:/bin/false
 hal:x:82:82:HAL daemon:/:/bin/false
 mysql:x:89:89::/var/lib/mysql:/bin/false
 aaa:x:1001:1001::/home/aaa:/bin/bash
 root:x:0:0:root:/root:/bin/bash
 test:x:1003:1003::/home/test:/bin/bash
 root:x:0:0:root:/root:/bin/bash

行替换,用匹配root的行,来替换匹配zhangy的行

[[email protected] mytest]$ sed -e ‘s/bin/tank/g;3q‘ test
 root:x:0:0:root:/root:/tank/bash
 tank:x:1:1:tank:/tank:/tank/false
 daemon:x:2:2:daemon:/stank:/tank/false

3q的意思是到第三行的时候,退出

[[email protected] mytest]# sed -ne ‘2,15s/zhangy.*[[:digit:]]/=======/gp‘  test
 =======:,,,:/home/zhangy:/bin/bash
 @=======::/home/test:/bin/bash

匹配数字别忘了中括号外面还有一个中括号。

[:alnum:] 字母数字 [a-z A-Z 0-9]
[:alpha:] 字母 [a-z A-Z]
[:blank:] 空格或制表键
[:cntrl:] 任何控制字符
[:digit:] 数字 [0-9]
[:graph:] 任何可视字符(无空格)
[:lower:] 小写 [a-z]
[:print:] 非控制字符
[:punct:] 标点字符
[:space:] 空格
[:upper:] 大写 [A-Z]
[:xdigit:] 十六进制数字 [0-9 a-f A-F]

二,删除

其实我觉得吧,删除其实根替换一样,都是找出来进行一下操作而已,这个过程会牵扯到一些規则而已。

[[email protected] test]$ sed -e ‘1,14d‘ test
 @zhangying:*:1004:1004::/home/test:/bin/bash
 policykit:x:102:1005:Po

删除1,14行

[[email protected] mytest]$ sed -e ‘4,$d‘ test
 root:x:0:0:root:/root:/bin/bash
 bin:x:1:1:bin:/bin:/bin/false
 daemon:x:2:2:daemon:/sbin:/bin/false

删除4以后的行,包括第4行,把$当成最大行数就行了。哈哈

[[email protected] mytest]$ sed -e ‘/\(false\|bash\)$/d‘ test
 policykit:x:102:1005:Po

删除包括false的行,或者包括bash的行,别忘了加\

[[email protected] mytest]$ sed -e ‘/root/,/^test/d‘ test
 @zhangying:*:1004:1004::/home/test:/bin/bash
 policykit:x:102:1005:Po

删除从匹配root的行,到匹配以test开头的行,中间的行

三,读取,追加,插入文件

[[email protected] mytest]$ sed -e ‘/^root/r test2‘ test
 root:x:0:0:root:/root:/bin/bash
 =============
 -------------
 +++++++++++++
 bin:x:1:1:bin:/bin:/bin/false
 daemon:x:2:2:daemon:/sbin:/bin/false

读取test2的内容,并将其写入到匹配行的下面

[[email protected] mytest]$ sed ‘/[[:digit:]]/w test2‘ test

将匹配数字的行,写入test2中

[[email protected] mytest]$ sed  ‘/root/a\\ ===aaaa====‘ test
 root:x:0:0:root:/root:/bin/bash
 ===aaaa====
 bin:x:1:1:bin:/bin:/bin/false

将要插入的东西,插入匹配行的下面,

[[email protected] mytest]$ sed ‘/^daemon/i\\=================‘ test
 root:x:0:0:root:/root:/bin/bash
 bin:x:1:1:bin:/bin:/bin/false
 =================
 daemon:x:2:2:daemon:/sbin:/bin/false
 mail:x:8:12:mail:/var/spool/mail:/bin/false

正好根a相反,将要插入的东西,插入到匹配行的上面

四,调用命令文件

[[email protected] mytest]$ sed  -f cmd test |awk ‘{print $0;}‘
 tank:x:0:0:tank:/tank:/tank/bash
 tank:x:1:1:tank:/tank:/tank/false
 ba:x:1002:1002::/home/zhangy:/tank/bash
 test:x:1003:1003::/home/test:/tank/bash
 @zhangying:*:1004:1004::/home/test:/tank/bash
时间: 2024-11-09 00:59:39

sed很强大的文本操作命令的相关文章

[Linux] Linux常用文本操作命令整理

简单的总结一下常用的一些实用的Linux文本操作命令,包括wc(统计).cut(切分).sort(排序).uniq(去重).grep(查找).sed(替换.插入.删除).awk(文本分析). 1.统计命令——wc 统计文件里面有多少单词,多少行,多少字符. 1.1 wc语法 # wc [-lwm] 选项与参数: -l :仅列出行: -w :仅列出多少字(英文单字): -m :多少字符: 1.2 wc使用 #wc /etc/passwd 40 45 1719 /etc/passwd 40是行数,4

推荐 15 款很棒的文本编辑器

本文中提及的文本编辑器软件,并非全部开源,仅供参考. 1. Notepad++: 这是 Windows 记事本一个最好的替换产品,主要特点包括: a. 自动完成b. 语法高亮c. 拖放特性d. 搜索e. 缩放 2. PSPad: PSPad 是一个Windows平台上免费的适合程序员使用的编辑器.它可以让你保持上一次编辑状态,这样在你下次打开编辑器的时候可以直接显示原来的文件.此外它还支持通过FTP进行远程编辑,支持多文件的比较等. a. 语法高亮b. 支持多文档编辑c. 内建 FTP 客户端d

CSS3很强大

[代码] 个人感觉很强大的CSS3特效旋转效果 <!DOCTYPE html><html><head> <meta charset="utf-8"> <title>transform-style的3D效果测试</title><style>*{font-size: 14px;color: #fff; padding:0; margin:0;}#container { position: relative;

.Net 其实很强大

在微软封闭的圈子时间长了,以为.Net就是整个软件世界.微软提供了外面开发所需要的一切.IDE, WorkFlow等.混久了总觉得.Net很弱,感觉外面的开源世界很强大. 其实.Net没我想象的那么弱.只是我们的项目没有和开源世界有很好的结合.用了开源项目会使你的项目开发进度快好多,性能也不错.下面说下我对.Net 开发的一些理解. 1. .Net是一个实现,它是软件开发的一个具体实现(就像一个Interface的.Net 实现,也可以有Java, Node.js实现). 2. 如何管理一个大型

(转)iOS被开发者遗忘在角落的NSException-其实它很强大

转载自 http://www.jianshu.com/p/05aad21e319e iOS被开发者遗忘在角落的NSException-其实它很强大 字数597 阅读968 评论4 喜欢28 NSException是什么? 最熟悉的陌生人,这是我对NSException的概述,为什么这么说呢?其实很多开发者接触到NSException的频率非常频繁,但很多人都不知道什么是NSException,不知道如何使用NSException.下面从一张截图开始讲起NSException. 崩溃截图.png

Aspose是一个很强大的控件,可以用来操作word,excel,ppt等文件

Aspose是一个很强大的控件,可以用来操作word,excel,ppt等文件,用这个控件来导入.导出数据非常方便.其中Aspose.Cells就是用来操作Excel的,功能有很多.我所用的是最基本的功能,读取Excel的数据并导入到Dataset或数据库中.读取Excel表格数据的代码如下: 首先要引入命名空间:using Aspose.Cells; Workbook workbook = new Workbook(); workbook.Open("C:\\test.xlsx");

android:分享 一个很强大的LOG开关---Log.isLoggable

1.API亮点: 此API可以实现不更换APK,在出问题的手机上就直接能抓到有效log,能提升不少工作效率. 2.API介绍 最近在解决短信问题时,看到一个很强大的LOG开关---Log.isLoggable 1. if (Log.isLoggable(LogTag.TRANSACTION, Log.VERBOSE)) { 2.     Log.v(TAG, "Creating TransactionService"); 3. } 进入framework中查看isLoggable方法的

js中的console很强大

今天闲来没事,瞎逛, 发现了淘宝首页的这个: 想起来之前在百度的 页面中也曾看到过.于是乎自己试一试. 于是便见识到了console对象其实很强大,用好它对调试真的有很大帮助. 代码: 1 <!DOCTYPE html> 2 <html lang="zh"> 3 <head> 4 <meta charset=utf-8> 5 <title>demo</title> 6 </head> 7 <bod

一种无奈所以另类的开发方式----SQL很强大!

好久没写点什么了... 多年前...... 前些时间,与一多年前在北京共事过的略带亲戚关系的同事闲聊了会. 在北京那时,他们的主要是用Delphi语言,数据库是MSSqlServer. 他没有大学学历,甚至好像高中学历都没有,成长过程比较励志,工厂流水线.理发师.卖东西神马的都干过!!! 他是公司的主程,负责某行业管理软件.呼叫中心等系统,最让我佩服的,是他对MSSqlServer的熟悉程度,对我而言,膜拜之也并不过分. =====================================