第10章 Shell编程(2)_字符截取命令

2. 字符截取命令

2.1 cut字段提取命令(grep提取行,cut提取列)

(1)cut命令:#cut [选项] 文件名

  选项: -f 列号:提取第几列;

      -d 分隔符:按照指定分隔符分割列,默认是制表符分隔

(2)应用举例

  //测试文件(student.txt)

ID	Name		gender		PHP		Linux		MySQL		Average
1	ZS		M		82		95		86		87.66
2	LS		F		74		96		87		85.66
3	WW		M		99		83		93		91.66

  ①#cut –f 2 student.txt  //提取第2列

  ②#cut –f 2,3 student.txt //提取第2、3列

  ③#cut –d ":" –f 1,3 /etc/password //用“:”分隔各列,提取第1、3列。

  ④批量删除普通用户:

    # cat /etc/passwd | grep /bin/bash | grep -v root | cut -d ":" -f 1 (注意,只有root和普通用户登录时才会执行/bin/bash脚本。grep –v root去除掉root用户,这时只剩普通用户,再通过cut提取出用户名)

(3)cut命令的局限:如果以空格分隔,则会遇到计算空格不便的问题(如,#df –h显示的信息是以空格分隔的,可使用awk命令解决)

2.2 printf命令

(1)格式化输出命令:printf ‘输出类型输出格式‘ 输出内容


输出类型


说明


%ns


输出字符串。n是数字指代输出几个字符


%ni


输出整数。n是数字指代输出几个数字


%m.nf


输出浮点数。m和n是数字,指代输出的整数位数和小数位数。如%8.2f代表共输出8位数,其中2位小数,6位是整数。


输出格式


说明


\a


输出警告声音


\b


输出退格键,也就是Backspace键


\f


清除屏幕


\n


换行


\r


回车,也就是Enter键


\t


水平Tab键


\v


垂直Tab键

(2)应用举例

  ①#printf ‘%s %s %s‘  1 2 3 4 5 6 //分为两组“1 2 3”,“4 5 6”,然后输出

  ②#printf ‘%s %s %s\n‘  1 2 3 4 5 6 //分为两组“1 2 3”,“4 5 6”,并换行输出

  ③#printf ‘%s‘ $(cat student.txt) //用cat系统命令查询student.txt的内容,并用printf显示出来。

  ④#printf ‘%s\t%s\t%s\t%s\t%s\t%s\t\n‘ $(cat student.txt) //带格式化输出

(3)在awk命令的输出中支持print和printf命令

  ①print: 会在每个输出之后自动加入一个换行符(Linux默认没有print命令,但awk命令自带一个print命令)

  ②printf:是标准格式输出命令,并不会自动加入换行符,如果需要换行,需要手工加入换行符。

2.3 awk命令

(1)awk命令简介

  ①awk是三个人名的缩写,他们是:Aho、(Peter)Weinberg和(Brain)Kernighan。正是这三个人创造了awk---一个优秀的样式扫描与处理工具。

  ②awk的功能是什么?与sed和grep很相似,awk是一种样式扫描与处理工具。但其功能却大大强于sed和grep。awk提供了极其强大的功能:它几乎可以完成grep和sed所能完成的全部工作,同时,它还可以可以进行样式装入、流控制、数学运算符、进程控制语句甚至于内置的变量和函数。它具备了一个完整的语言所应具有的几乎所有精美特性。实际上,awk的确拥有自己的语言:awk程序设计语言,awk的三位创建者已将它正式定义为:样式扫描和处理语言。

(2)命令格式:#awk ‘条件1{动作1} 条件2{动作2}…‘ 文件名


条件(Pattern)


说明


动作(action)


x>10


判断变量x是否大于10


格式化输出


x>=10


大于等于10


流程控制语句


▲一般使用关系表达式作为条件

【编程实验】awk命令

  ①#awk ‘{printf $2 "\t" $7 "\n"}‘ student.txt //显示student.txt第2、7列并以Tab键格式化输出

    Name    Average

    ZS      87.66

    LS      85.66

    WW      91.66

  ②# df -h | awk ‘{print $1 "\t" $5 "\t" $6}‘  //显示磁盘信息

    Filesystem      Use%    Mounted

    /dev/sda5       8%      /

    tmpfs   0%      /dev/shm

    /dev/sda1       16%     /boot

    /dev/sda2       1%      /home

    /dev/sdb1       1%      /disk1

    /dev/sdb5       1%      /disk5

  ③提取磁盘使用率

(3)BEGIN:在所有的命令执行之前,执行BEGIN后面的语句

  ①先显示提示信息,再显示命令结果

  # awk ‘BEGIN{printf "This is a transcript\n"}{printf $2 "\t" $6 "\n"}‘ student.txt

    This is a transcript

    Name    MySQL

    ZS      86

    LS      87

    WW      93

  ②以“:”为分隔符提取/etc/passwd的第1和第3字段

  #awk ‘BEGIN{FS=":"}{print $1 "\t" $3}‘ /etc/passwd

(4)END:在所有命令执行之后,执行END后面的语句

  ①# awk ‘END{printf "The End\n"}{printf $2 "\t" $7 "\n"}‘ student.txt

(5)FS内置变量:分隔符

(6)关系运算符:# cat student.txt | grep -v Name | awk ‘$7 >=87{printf $2 "\n"}‘

2.4 sed命令

(1)sed命令简介

  sed是一种几乎包括在所有UNIX平台(包括Linux)的轻量级流编辑器。sed主要是用来将数据进行选择、替换、删除、新增的命令。

(2)sed命令:#sed [选项] ‘[动作]‘ 文件名


选项


说明


-n


一般sed命令会把所有数据都输出到屏幕,如果加入此项,则只会经过sed命令处理的行输出到屏幕。


-e


允许对输入数据应用多条sed命令编辑


-i


用sed的修改结果直接修改读取数据的文件,而不是由屏幕输出。即修改结果会被写入文件。


动作


说明


a


追加,在当前行后添加一行或多行。添加多行时,除最后一行外,每行末尾需要用“\”代表数据未完结。


c


行替换,用c后面的字符串替换原数据行,替换多行时,除最后一行外,每行末尾需用“\”代表数据未完结


i


插入,在当前行前插入一行或多行。插入多行时,除最后一行外,每行末尾需要用“\”代表数据未完结。


d


删除,删除指定行


p


打印,输出指定的行


s


字串替换,用一个字符串替换另外一个字符串。格式为“行范围s/旧字符串/新字串/g”(和vim中的替换格式类似)

(3)行数据操作

  ①# sed -n ‘2p‘ student.txt //查看文件的第2行。注意,如果不加-n,除了显示第2行外,还会将原文件输出一遍

  ②# sed ‘2,4d‘ student.txt  //删除第2到第4行数据,但不影响文件本身

  ③# sed ‘2a hello‘ student.txt //在第2行后追加hello

  ④# sed ‘2i hello world‘ student.txt //在第2行前插入hello world

  ⑤# sed ‘2i hello \         //在第2行前插入两行:hello和world

    world‘ student.txt

  ⑥# sed ‘2c No such person‘ student.txt //将第2行数据替换为指定文本。

(4)字符串替换:#sed ‘s/旧字串/新字串/g‘ 文件名

  ①# sed ‘3s/74/99/g‘ student.txt  //在第3行中,把74换成99

  ②# sed -i ‘3s/74/99/g‘ student.txt  //sed操作的数据直接写入文件,不显示在屏幕上。

  ③# sed -e ‘s/ZS//g;s/LS//g‘ student.txt //同时把“ZS”和“LS”替换为空

时间: 2024-10-06 00:38:58

第10章 Shell编程(2)_字符截取命令的相关文章

第10章 Shell编程(1)_正则表达式

1. 基础的正则表达式 1.1 正则表达式与通配符 (1)正则表达式用来在文件中匹配符合条件的字符串,正则是包含匹配.grep.awk.sed等命令可以支持正则表达式. (2)通配符用来匹配符合条件的文件名,通配符是完全匹配.ls.find.cp这些命令不支持正则表达式,所以只能使用shell自己的通配符来进行匹配了. 1.2 基础正则表达式 元字符 作用 * 前一个字符匹配0次或任意多次(是前一个字符,这与bash的通配符不同) . 匹配除了换行符外任意一个字符 ^ 匹配行首.例如:^hell

10、shell编程+流程控制+分支嵌套

SHELL 编程 shell 是一个命令解释器,侦听用户指令.启动这些指令.将结果返回给用户(交互式的shell) shell 也是一种简单的程序设计语言.利用它可以编写一些系统脚本. 查看本机shell 信息: cat /etc/shells     --查看本支持的shell echo $SHELL --查看当前支持的shell shell 在执行命令时,各种命令的优先级: 别名 -> 关键字 -> 函数 -> 内置命令 -> 脚本 别名:命令的另一种形式,有些情况下可以简化命

第二章 Shell编程之变量

Shell编程之变量 一 Bash变量与变量分类 Bash是Linux中的标准Shell,因此经常称Bash为Shell. 1. 变量命名规则 变量名可以由字母.数字.下划线组成,但必须以字母与下划线开头: 变量名的长度不能超过255个字符: 变量名在有效范围必须唯一: 在Bash中,变量的默认类型都字符串型: 2. 变量按照存储类型分类 默认类型是字符串型. 字符串型,赋值时单双引号皆可: 整形: 浮点型: 日期型: 二 用户自定义变量 变量名与变量值都是用户自定义的,就是说可以由用户控制修改

第三章 shell编程之运算符

shell编程之运算符 一 shell变量的缺点 弱类型: 默认字符串型: 二 declare声明变量类型 格式:declare [+/-][选项] 变量名 -:给变量设定类型属性: +:取消变量的类型属性: -a:将变量声明为数组型:

shell编程中for/while循环命令

一.for命令 在shell编程中,有时我们需要重复执行一直命令直至达到某个特定的条件,bash shell中,提供了for命令,允许你创建一个遍历一系列值的循环,每次迭代都通过一个该系列中的值执行一组预定义的命令. for的基本格式: for var in list do commands done 在list中,你提供了迭代中要用的一系列值.在每个迭代中,变量var包含列表中的当前值,第一个迭代会适用列表中的第一个值,第二个迭代使用第二个值,以此类推,直至列表中的所有值都过一遍. 1.1读取

shell编程:定义简单标准命令集

shell是用户操作接口的意思,操作系统运行起来后都会给用户提供一个操作界面,这个界面就叫shell,用户可以通过shell来调用操作系统内部的复杂实现,而shell编程就是在shell层次上进行编程,如Linux中的脚本编程. shenll运行原理:由消息接收.解析.执行构成的死循环. 命令行shell:该死循环包含3个模块(命令接收.命令解析.命令执行),命令行有一个标准命令集,用户输入的命令若不是标准命令,则提示用户这不是一个合法命令行,然后重新回到命令行让用户输入下一个命令. 常见的sh

《跟阿铭学Linux》第10章 shell基础知识:课后习题与答案

1. 设置环境变量 HISTSIZE , 使其能够保存10000条命令历史. vim /etc/profile   把 HISTSIZE=1000 改为 HISTSIZE=10000 2. 为什么如果这样设置PS1 (PS1="[\[email protected]\h \W]\$ ")  显示的结果和我们预想的不一样,那要如何设置才能恢复原来默认的? 应该是 PS1='[\[email protected]\h \W]\$ ' 3. 想办法把当前目录下的文件的文件名中的小写字母全部替

第二章 shell编程基础

2.1.1 shell脚本的参数 常用参数 (1) *  以一个字符串显示所向脚本传递的参数,与位置变量不同,此参数可超过9个 (2) @ 从参数1开始,显示所有向脚本传递的参数,和上边的*相似,下面会介绍区别 (3) # 参数数量,不包含参数0 (4) $ 脚本运行的当前ID号 (5) ! 后台运行的最后一个ID号 (6) ? 显示最后命令的退出状态,0表示没有错误,其他任何值表明有错误 (7) - 显示shell使用的当前选项,与set命令功能相同 注:① * 和 @ 的区别在于,当加上双引

Shell编程之字符截取命令

AWK命令 awk '条件1(动作1)条件2(动作2)...' 文件名 条件(pattern)一般使用关系表达式作为条件x>10判断x是否大于10x>=10大于等于x<=10小于等于 动作(Action)-格式化输出-流程控制语句 awk使用示例:awk '{printf $1 "\t" $2 "\n"}' awk 'BEGIN{printf "test"}{printf $1}' //在输出语句前输出指定字符串 awk 'EN