一、grep、sed、awk称为:三剑客
三剑客听说是入门运维的小伙伴们是必备的技能,但广深小龙不是运维也大致学习了解一下。
但也有人说是四剑客,包括:find 当然我们也会一起了解下,如下图三剑客的价值犹如同sql的语法的重要性。
二、擅长过滤:grep
支持正则表达式,通常作为连接运行下一个命令。
格式:grep [-abcEFGhHilLnqrsvVwxy][-A<显示列数>][-B<显示列数>][-C<显示列数>][-d<进行动作>][-e<范本样式>][-f<范本文件>][--help][范本样式][文件或目录...]
参数:
- -a 以文本方式搜索
- -c 找到符合的行数的文件个数
- -i 忽略大小写
- -v 反向选择
- -h 查询多文件时不显示文件名
- -l 只输出包含匹配字符的文件名
- -s 不显示错误信息
- 等等
1、过滤配置文件的注释和空行:
[[email protected] ~]# grep -v "#" ~/hrun_django/httprunnermanger_web/HttpRunnerManager/settings.py|grep -v "^$"
2、使用正则匹配:
[[email protected] gsxl]# grep "[1-9]" t.txt vm.swappiness = 6661111 [[email protected] gsxl]#
我还是常用这种:杀掉进程:①ps -ef | grep mysql ②ps -aux | grep python|xargs kill -9
[[email protected] gsxl]# ps -ef | grep mysql root 2580 10112 0 12:53 pts/0 00:00:00 grep --color=auto mysql polkitd 13411 13395 0 Apr04 ? 00:06:01 mysqld root 23790 23603 0 Mar30 ? 00:00:00 /bin/sh /opt/zbox/run/mysql/mysqld_safe --defaults-file=/opt/zbox/etc/mysql/my.cnf 65534 24026 23790 0 Mar30 ? 00:00:01 /opt/zbox/run/mysql/mysqld --defaults-file=/opt/zbox/etc/mysql/my.cnf --basedir=/opt/zbox/run/mysql --datadir=/opt/zbox/data/mysql --plugin-dir=/opt/zbox/run/lib/mysql/plugin --user=nobody --log-error=/opt/zbox/logs/mysql_error.log --pid-file=/opt/zbox/tmp/mysql/mysqld.pid --socket=/opt/zbox/tmp/mysql/mysql.sock --port=3306 [[email protected] gsxl]#
三、增删查改:sed
格式:sed [-hnV][-e<script>][-f<script文件>][文本文件]
参数:
- -e<script>或--expression=<script> 以选项中指定的script来处理输入的文本文件。
- -f<script文件>或--file=<script文件> 以选项中指定的script文件来处理输入的文本文件。
- -h或--help 显示帮助。
- -n或--quiet或--silent 仅显示script处理后的结果。
- -V或--version 显示版本信息。
动作:
- a :新增, a 的后面可以接字串,而这些字串会在新的一行出现(目前的下一行)~
- c :取代, c 的后面可以接字串,这些字串可以取代 n1,n2 之间的行!
- d :删除,因为是删除啊,所以 d 后面通常不接任何咚咚;
- i :插入, i 的后面可以接字串,而这些字串会在新的一行出现(目前的上一行);
- p :打印,亦即将某个选择的数据印出。通常 p 会与参数 sed -n 一起运行~
- s :取代,可以直接进行取代的工作哩!通常这个 s 的动作可以搭配正规表示法!
1、替换文件内容:sed "s/替换内容/新内容/g" 文件名
[[email protected] gsxl]# cat t.txt vm.swappiness = 6661111 asd hello # 加上 -i 参数既不打印显示 [[email protected] gsxl]# sed "s/asd/gsxl/g" t.txt vm.swappiness = 6661111 gsxl hello
2、替换指定行内容:sed -i "2c\gsxl" t.txt
[[email protected] gsxl]# cat t.txt vm.swappiness = 6661111 asd hello [[email protected] gsxl]# sed -i "2c\gsxl" t.txt [[email protected] gsxl]# cat t.txt vm.swappiness = 6661111 gsxl hello
四、统计计算:awk
格式:akw ‘条件{动作}‘
简单打印此文件的全部内容:awk ‘{print $0}‘ /etc/passwd
[[email protected] gsxl]# awk ‘{print $0}‘ /etc/passwd root:x:0:0:root:/root:/bin/bash bin:x:1:1:bin:/bin:/sbin/nologin daemon:x:2:2:daemon:/sbin:/sbin/nologin adm:x:3:4:adm:/var/adm:/sbin/nologin lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin sync:x:5:0:sync:/sbin:/bin/sync shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown halt:x:7:0:halt:/sbin:/sbin/halt mail:x:8:12:mail:/var/spool/mail:/sbin/nologin operator:x:11:0:operator:/root:/sbin/nologin games:x:12:100:games:/usr/games:/sbin/nologin ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin nobody:x:99:99:Nobody:/:/sbin/nologin systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin dbus:x:81:81:System message bus:/:/sbin/nologin polkitd:x:999:998:User for polkitd:/:/sbin/nologin sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin postfix:x:89:89::/var/spool/postfix:/sbin/nologin chrony:x:998:996::/var/lib/chrony:/sbin/nologin ntp:x:38:38::/etc/ntp:/sbin/nologin tcpdump:x:72:72::/:/sbin/nologin nscd:x:28:28:NSCD Daemon:/:/sbin/nologin
常用AWK内置变量,当然还有运算符、函数等更多请自行了解,小龙能力有限只是了解一下。
变量 | 描述 |
---|---|
$n | 当前记录的第n个字段,字段间由FS分隔 |
$0 | 完整的输入记录 |
ARGC | 命令行参数的数目 |
ARGIND | 命令行中当前文件的位置(从0开始算) |
ARGV | 包含命令行参数的数组 |
CONVFMT | 数字转换格式(默认值为%.6g)ENVIRON环境变量关联数组 |
ERRNO | 最后一个系统错误的描述 |
FIELDWIDTHS | 字段宽度列表(用空格键分隔) |
FILENAME | 当前文件名 |
FNR | 各文件分别计数的行号 |
FS | 字段分隔符(默认是任何空格) |
IGNORECASE | 如果为真,则进行忽略大小写的匹配 |
NF | 一条记录的字段的数目 |
NR | 已经读出的记录数,就是行号,从1开始 |
OFMT | 数字的输出格式(默认值是%.6g) |
OFS | 输出记录分隔符(输出换行符),输出时用指定的符号代替换行符 |
ORS | 输出记录分隔符(默认值是一个换行符) |
RLENGTH | 由match函数所匹配的字符串的长度 |
RS | 记录分隔符(默认是一个换行符) |
RSTART | 由match函数所匹配的字符串的第一个位置 |
SUBSEP | 数组下标分隔符(默认值是/034) |
五、查找文件:find
格式:find path -option [ -print ] [ -exec -ok command ] {} \;
成为四剑客的:find 所以我们也应了解一下。查找可以使用通配符。
1、-type参数,文件类型:①文件:f ②目录:d
[[email protected] ~]# find ~/gsxl/ -name *.txt -type f /root/gsxl/t.txt
2、-mtime参数,查找匹配文件创建的前或后时间
[[email protected] ~]# find ~/gsxl/ -name *.txt -mtime -1 /root/gsxl/t.txt [[email protected] ~]# find ~/gsxl/ -name *.txt -mtime +30 [[email protected] ~]#
3、-size参数,字母是大写,1M以上的文件: +1M
[[email protected] ~]# find / -name *.txt -size +1M /usr/share/perl5/Unicode/Collate/allkeys.txt /usr/share/hwdata/oui.txt /usr/share/hwdata/iab.txt
4、-perm参数,查找文件权限为755
[[email protected] ~]# find / -name *.txt -perm 755 /usr/lib/firmware/ivtv-firmware-license-oemihvisv.txt /usr/lib/firmware/ivtv-firmware-license-end-user.txt [[email protected] ~]#
如何批量改文件权限,当然目录也可以type参数改为:d,就可以通过用find来批量改:
[[email protected] gsxl]# find ~/gsxl/ -type f -exec chmod -R 644 {} \; [[email protected] gsxl]# ll total 8 drwxr-xr-x 2 root root 4096 Apr 11 22:55 test -rw-r--r-- 1 root root 34 Apr 12 10:10 t.txt
当然以上四剑客还有很多用法,这只是其中一小小部分,更多使用请根据实际需求进行度娘一下,哈哈!
欢迎来大家QQ交流群一起学习:482713805 !!!
原文地址:https://www.cnblogs.com/gsxl/p/12684742.html