剑客起源于唐代传奇的中国武侠小说中，他们所使用的兵器剑的地位是至高无上的，一直也是兵器中的王者，符合了剑在中国古代社会的地位。今天给大家详细的总结一下linux系统下的利刃兵器：awk、sed、grep
三剑客介绍（grep、sed、awk）
老三：grep
是一种强大的文本搜索工具，它能使用正则表达式搜索文本，并把匹配的行打印出来
# grep 常用选项 -c #只输出匹配行的计数 -i #不区分大小写 -h #查询多文件时不显示文件名 -l #查询多文件时只输出包含匹配字符的文件名 -n #显示匹配行及行号 -s #不显示不存在或无匹配文本的错误信息 -v #显示不包含匹配文本的所有行 -E #支持扩展的正则表达式 -P #调用perl语法正则
老二：sed
对文本的处理很强大，增、删、改、查样样能做
# sed 常用选项 -r #在脚本中使用扩展正则表达式 -n #不打印所有行到标准输出 -i #直接修改文件
老大：awk（带头大哥）
可以理解为一门编程语言，可以自定义变量，有条件语句，有循环，有数组，有正则，有函数
# awk 常用变量 $n #当前记录的第n个字段，字段间由 FS分隔 $0 #完整的输入记录 FNR #同NR，但相对于当前文件 FS #字段分隔符（默认是任何空格） NF #当前记录中的字段数 NR #当前记录数 OFS #输出字段分隔符（默认值是一个空格） ORS #输出记录分隔符（默认值是一个换行符） # awk 常用字符串函数 sub #匹配记录中最大、最靠左边的子字符串的正则表达式，并用替换字符串替换这些字符串 gsub #整个文档中进行匹配 index #返回子字符串第一次被匹配的位置 substr #返回从位置1开始的子字符串，如果指定长度超过实际长度，就返回整个字符串 split #可按给定的分隔符把字符串分割为一个数组，默认按当前FS值进行分割 length #返回记录的字符数 toupper #可用于字符串大小间的转换，该功能只在gawk中有效 tolower #可用于字符串大小间的转换，该功能只在gawk中有效 # awk 常用函数 srand(x) #x是rand()函数的种子 int(x) #取整 rand() #产生一个大于等于0而小于1的随机数
案例使用（有很多种方法，今天我们这里只说三剑客的使用方法）
1.快速取出本机IP？
# grep ifconfig eth0|grep -Po ‘(?<=dr:)\S+‘
# sed ifconfig eth0|sed -rn ‘s#.*r:(.*) B.*#\1#gp‘
# awk ifconfig eth0|awk -F ‘[ :]+‘ ‘NR==2{print $4}‘
2.原始数据格式替换成新数据格式（grep自己无法实现该功能了）
原始数据：
17/Apr/2015:09:29:24 +0800
17/Apr/2015:09:30:26 +0800
17/Apr/2015:09:31:56 +0800
18/Apr/2015:09:34:12 +0800
18/Apr/2015:09:35:23 +0800
19/Apr/2015:09:23:34 +0800
19/Apr/2015:09:22:21 +0800
20/Apr/2015:09:45:22 +0800
期望结果：
2015-04-17 09:29:24+0800
2015-04-17 09:30:26+0800
2015-04-17 09:31:56+0800
2015-04-18 09:34:12+0800
2015-04-18 09:35:23+0800
2015-04-19 09:23:34+0800
2015-04-19 09:22:21+0800
2015-04-20 09:45:22+0800
# sed
sed -rn ‘s#Apr#04#g;s#^(.*)/(.*)/(....):(.*) (.*)#\3-\2-\1 \4\5#p;‘ test.log sed -rn ‘s#^(.{2})/(.{3})/(.{4}):(.{8}) (.{4})#\3-04-\1 \4\5#p;‘ test.log
# awk
awk -F ‘[/: ]+‘ ‘{sub(/Apr/,"04");printf("%s-%s-%s %s:%s:%s%s\n",$3,$2,$1,$4,$5,$6,$7)}‘ test.log awk ‘{sub(/Apr/,"04");split($0,array,"[/: ]") ;printf("%s-%s-%s %s:%s:%s%s\n",array[3],array[2],array[1],array[4],array[5],array[6],array[7])}‘ test.log
