shell awk 的一些用法

#1、打印挂载目录的使用量,默认以空格为分割

df -Ph | awk ‘{ print $5,$6 }‘

#2、以空格、冒号、\t、分号为分割

awk -F ‘[ :\t;]‘ ‘{print $1}‘

#3、打印6.txt文件中的第3行至第5行,NR表示打印行,$0表示文本所有域

awk ‘NR==3,NR==5 {print}‘ 6.txt
awk ‘NR==3,NR==5 {print $0}‘ 6.txt

#打印6.txt文件中的第3行至第5行的第2列与第4列

awk ‘NR==3,NR==5 {print $2,$4}‘ 6.txt

#打印7.txt文件中,长度大于6的行号和内容

awk ‘length($0)>6 {print NR,$0}‘

#以冒号切割,打印第一列同时只显示前5行:

cat /etc/passwd|head -5|awk -F: ‘{print $1}‘
awk -F: ‘NR>=1&&NR<=5 {print $1}‘ /etc/passwd

#NR行号除以2余数为0则跳过该行,继续执行下一行,打印在屏幕:

awk ‘NR%2==0 {next} {print NR,$0}‘ 7.txt

#4、引用Shell变量,使用-v或者双引号+单引号即可:

awk -v STR=hello ‘{print STR,$NF}‘ 7.txt
STR="hello";echo| awk  ‘{print "‘${STR}‘";}‘

#5、指定文件jfedu.txt第一列的总和:

cat 7.txt |awk ‘{sum+=$1}END{print sum}‘
awk ‘{sum+=$1}END{print sum}‘ 7.txt

#6、添加自定义字符:

ifconfig  eth0|grep "Bcast"|awk ‘{print "ip_"$2}‘
awk -F: ‘{print "UserName:" $1 }‘ /etc/passwd

#7、格式化输出passwd内容,printf打印字符串,%格式化输出分隔符,s表示字符串类型,-12表示12个字符,-6表示6个字符:

awk -F:  ‘{printf "%-12s %-6s %-8s\n",$1,$2,$NF}‘  /etc/passwd

#OFS输出格式化\t:

netstat -an|awk ‘$6 ~ /LISTEN/&&NR>=1&&NR<=10 {print NR,$4,$5,$6}‘ OFS="\t"

#8、awk与if组合实战,判断数字比较

echo 3 2 1 | awk ‘{ if(($1>$2)||($1>$3)) { print $2} else {print $1} }‘

#9、awk与数组组合实战,统计passwd文件用户数

awk -F: ‘BEGIN {count=0;} {name[count] = $1;count++;}; END{for (i = 0; i < NR; i++) print i, name[i]}‘  /etc/passwd

#10、awk分析Nginx访问日志的状态码404、502等错误信息页面,统计次数大于20的IP地址。

awk ‘{if ($9~/502|499|500|503|404/) print $1,$9}‘ access.log|sort|uniq –c|sort –nr | awk ‘{if($1>20) print $2}‘

#11用/etc/shadow文件中的密文部分替换/etc/passwd中的"x"位置,生成新的/tmp/passwd文件。

awk ‘BEGIN{OFS=FS=":"} NR==FNR{a[$1]=$2}NR>FNR{$2=a[$1];print >>"/tmp/passwd"}‘ /etc/shadow /etc/passwd

#12、awk统计服务器状态连接数:

netstat -an | awk ‘/tcp/ {s[$NF]++} END {for(a in s) {print a,s[a]}}‘
netstat -an | awk ‘/tcp/ {print $NF}‘ | sort | uniq -c

#13、获取eth0的IP地址

ifconfig  eth0|grep "Bcast"|awk ‘{print $2}‘ | awk -F: ‘{print $2}‘

#14、在输出的开头和结尾添加输出

#在所有行添加列名name,shell,在最后一行添加"blue,/bin/nosh"

awk  -F ‘:‘  ‘BEGIN {print "name,shell"}  {print $1"---"$7} END {print "blue,/bin/nosh"}‘ /etc/passwd

#15、找出不允许登录的系统用户

awk -F : ‘/nologin/{print $1}‘ /etc/passwd

#16、找出root组的用户

awk -F: ‘$4 ==0 {print "The user of group root:" $1}‘ /etc/passwd
时间: 2024-10-30 07:24:12

shell awk 的一些用法的相关文章

2.3.1.shell awk 入门

awk:好用的数据处理工具 awk 也是一个非常棒的数据处理工具!sed 常常用于一整个行的处理, awk 则比较倾向于一行当中分成数个『栏位』(或者称为一个域,也就是一列)来处理.因此,awk 相当的适合处理小型的数据数据处理呢!awk 通常运行的模式是这样的: [[email protected] ~]# awk '条件类型1{动作1} 条件类型2{动作2} ...' filename awk 后面接两个单引号并加上大括号 {} 来配置想要对数据进行的处理动作. awk 可以处理后续接的文件

linux shell awk 语法

引用:http://blog.csdn.net/weekly123/article/details/1465675 inux shell awk 语法   Awk 是一种非常好的语言,同时有一个非常奇怪的名称.在本系列(共三篇文章)的第一篇文章中,Daniel Robbins 将使您迅速掌握 awk 编程技巧.随着本系列的进展,将讨论更高级的主题,最后将演示一个真正的高级 awk 演示程序.捍卫 awk在本系列文章中,我将使您成为精通 awk 的编码人员.我承认,awk 并没有一个非常好听且又非

(转)Shell中read的用法详解

Shell中read的用法详解 原文:http://blog.csdn.net/jerry_1126/article/details/77406500 read的常用用法如下: read -[pstnd] var1 var2 ... -p 提示语句-n 字符个数-s 屏蔽回显-t 等待时间-d 输入分界 [plain] view plain copy 01). read                           # 从标准输入读取一行并赋值给特定变量REPLY [email prote

awk的基本用法

awk: 文本处理三剑客:grep系,sed,awk 1. grep系:基于PATTERN进行文本过滤 grep:支持基本的正则表达式 egrep:支持基本的和扩展的正则表达式 fgrep:不支持正则表达式,纯文本 2.sed:流编辑器,逐行编辑器: 模式空间 保持空间 3. awk:报告生成器:格式化文档输出: 也是一种编程语言(有变量...) gawk:模式扫描和处理语言: 格式:gawk [ options ] 'program' file... program:[/PATTERN/]{A

SHELL STUDY....tr的用法

一般我们使用tr来做字符串的替换,或者删除指定的字符串 tr的语法如下: tr [OPTION]... SET1 [SET2] -c, -C, --complement first complement SET1 将非SET1中的字符替换为SET2 [[email protected] ~]$ echo "lubinsu" | tr -c "l" "A" lAAAAAAA -d, --delete delete characters in SET

使用shell+awk完成Hive查询结果格式化输出

好久不写,一方面是工作原因,有些东西没发直接发,另外的也是习惯给丢了,内因所致.今天是个好日子,走起! btw,实际上这种格式化输出应该不只限于某一种需求,差不多是通用的. 需求: --基本的:当前Hive查询结果存在数据与表头无法对其的情况,不便于监控人员直接查看,或者导出到excel中,需要提供一个脚本,将查询结果处理下,便于后续的查看或者操作. --额外的:A.每次查询出来的结果字段数.字段长度不固定:B.每个数据文件中可能包含不只一套查询结果,即存在多个schema. 想法: 对于基本需

shell变量的特殊用法

转载:http://blog.csdn.net/shmilyringpull/article/details/7631106 假设我们定义了一个变量为:file=/dir1/dir2/dir3/my.file.txt 可以用${ }分别替换得到不同的值:${file#*/}:删掉第一个 / 及其左边的字符串:dir1/dir2/dir3/my.file.txt${file##*/}:删掉最后一个 /  及其左边的字符串:my.file.txt${file#*.}:删掉第一个 .  及其左边的字符

shell中括号的特殊用法

shell中括号的特殊用法 Shell中的括号有其特殊的用法, 现总结如下:1. 符号$后的括号${a} 变量a的值, 在不引起歧义的情况下可以省略大括号.$(cmd) 命令替换, 结果为shell命令cmd的输出, 和`cmd`效果相同, 不过某些Shell版本不支持$()形式的命令替换, 如tcsh.$((exp)) 和`expr exp`效果相同, 计算数学表达式exp的数值, 其中exp只要符合C语言的运算规则即可, 甚至三目运算符和逻辑表达式都可以计算. a=1;b=2echo $[

awk 的一些用法

awk,我觉得是Linux里面处理文本最精妙的命令,它是一个行处理的命令,它最初级的用法是:给定一些简单的pattern,然后按照这个pattern 去搜索匹配的行.它的高级用法是用awk来编程,除了原来的匹配字符串这个功能之外,还可以做一些统计,替换,数学计算的功能, 甚至可以编写自定义的函数,甚是神奇. 1. AWK 初级用法 awk 'pattern' filename awk '{action}' filename awk 'pattern {action}' filename //找到