Linux命令----sed和awk

sed

-n :加上-n参数后，只有经过sed特殊处理的哪一行或者动作才会被列出来。

动作说明：[n1,n2[function]]

function :

a:新增，a的后面可以接字符串，而这些字符串会在新的一行出现（目前的下一行）

c:取代，c的后面可以接字符串，这些字符串可以取代 n1,n2 之间的行

d:删除，d后面通常不接任何东西;

i:插入，i后面可以接字符串，而这些字符串会出现在新的一行（目前的上一行）

p:列印，

s:取代，可以直接进行取代的工作，通常这个s的动作可以搭配正则表示法

[[email protected] ~]# nl passwd | sed  ‘2,5d‘     #删除文件2-5行

[[email protected] ~]# nl passwd | sed -n ‘2p‘    #显示文件第二行 加-n
     2     bin:x:1:1:bin:/bin:/sbin/nologin

[[email protected] ~]# nl passwd | sed  ‘2p‘        #不加-n 会显示全部文件

[[email protected] ~]# nl passwd | sed  ‘2a lulalaldemaxiya‘    #在第二行后面追加一行

[[email protected] ~]# nl passwd | sed  ‘2i lulalaldemaxiya‘     #在第二行前面追加一行

[[email protected] ~]# nl passwd | sed ‘2,5c No 2-5 number‘  #将第2-5行取代为No 2-5 number
1     root:x:0:0:root:/root:/bin/bash
No 2-5 number
6     sync:x:5:0:sync:/sbin:/bin/sync

[[email protected] ~]# nl passwd | sed -n ‘/root/p‘      #显示匹配到的行

数据的搜寻并替换

[[email protected] ~]# ifconfig | sed -n ‘2p‘|sed ‘s/^.*addr://‘|sed ‘s/ Bca.*//‘   #ifconfig只显示ip
192.168.3.139

多点编辑

[[email protected] ~]# nl /etc/passwd|sed -e ‘3,$d‘ -e ‘s/bash/blueshell/‘
     1     root:x:0:0:root:/root:/bin/blueshell
     2     bin:x:1:1:bin:/bin:/sbin/nologin
删除/etc/pass 第三行到末尾的数据，并把bash替换为blueshell
-e 表示多点编辑

[[email protected] ~]# last -n 5 |awk ‘{print $1}‘
root
reboot
root
reboot
root

awk工作流程是这样的，读入有‘\n’换行符分割的一条记录，然后将记录按指定的域分割符划分域，$0

则表示所有域，$1表示第一个域，$n表示第n个域。默认域分隔符是“空白键”或 “【tab】建”，所以$1

表示登录用户，$3表示登录用户ip

[[email protected] ~]# cat passwd | awk -F ‘:‘ ‘{print $1 "\t" $7}‘
root     /bin/bash
bin     /sbin/nologin
daemon     /sbin/nologin
adm     /sbin/nologin
lp     /sbin/nologin

-F 指定域分割符为‘;’  并输出  账户 和 账户对应的shell。

[[email protected] ~]# head -n 5 passwd | awk -F ‘:‘ ‘BEGIN{print "name,shell"} {print $1 "," $7} END{print "end,line"}‘

name,shell
root,/bin/bash
bin,/sbin/nologin
daemon,/sbin/nologin
adm,/sbin/nologin
lp,/sbin/nologin
end,line

[[email protected] ~]# awk -F : ‘{print "filename:",FILENAME",linenumber:"NR ",columns:"NF ",linecontent:" $0}‘ passwd

显示文件passwd 文件名FILENAME 已读的记录数（行数）NR    浏览记录的域的个数（列数）NF 显示完整的行内信息$0

[[email protected] ~]# head -n 5 passwd | awk -F : ‘{count++;print $1;} END{print "user count is ",count}‘
 

[[email protected] ~]# ls -l | awk ‘BEGIN{size=0;}{size=size+$5;} END{print "[end]size = ",size}‘

[[email protected]
 ~]# ls -l | awk ‘BEGIN{size =0;print "[start]size 
is",size}{if($5!=4096) {size=size+$5;}} END{print "[end]size 
is",size/1024/1024,"M"}‘

[[email protected] ~]# awk -F : ‘BEGIN{count=0;}{name[count]=$1;count++;};END{for(i=0;i<NR;i++) print i,name[i]}‘ passwd

去重  |sort(升序)| uniq -c |  sort -r (降序)