shell 编程 之 小技巧

1 概述

本文将通过介绍shell脚本编程过程中常用的一些命令,来提高shell脚本编程的灵活性,以及高效实现编程结果

分别介绍了以下10个工具

shift,select,信号捕捉,数组,字符串处理,定义变量,eval,间接变量引用,mktemp,install

2 shift 控制循环

shift [n]

n 用于将参量列表list 左移指定次数,缺省为左移一次。

参量列表list 一旦被移动,最左端的那个参数就从列表中删除。while 循环遍历位置参量列表时,常用到shift

运行  ./Tshift.sh a b c d 可以看到每次循环$1的值都不一样,而且依次向左移动,参数的个数也不一样

脚本如下:

until  (($#==0));do
echo "\$1 is $1"
echo "var num \$# is $#"
shift
done

3 select循环与菜单

语法如下

select variable in list

do

循环体命令

done

select 循环主要用于创建菜单,按数字顺序排列的菜单项将显示在标准错误上,并显示PS3 提示符,等待用户输入

用户输入菜单列表中的某个数字,执行相应的命令

用户输入被保存在内置变量REPLY 中

select 是个无限循环,因此要记住用break 命令退出循环,或用exit 命令终止脚本。也可以按ctrl+c 退出循环

select 经常和case 联合使用

与for 循环类似,可以省略in list,此时使用位置参量

脚本如下

注意,如果把注释的#select menu in [email protected]这句话启用,就注释掉菜单那一句,并且执行的时候,要带上参数。

PS3="please input your choice: "
select menu in well job hello world bye;
#select menu in [email protected];
do
case $menu in
well)
echo "You have done well"
;;
job)
echo "Nice job"
;;
hello)
echo "hello world"
;;
world)
echo "work hard"
;;
bye)
echo "See U tomorrow"
break
;;
*)
echo "Please re-input"
;;
esac
done

4 信号捕捉

trap ‘触发指令‘ 信号:自定义进程收到系统发出的指定信号后,将执行触发指令,而不会执行原操作

trap ‘‘ 信号:忽略信号的操作

trap ‘-‘ 信号:恢复原信号的操作

trap -p:列出自定义信号操作

通过执行以下的脚本可以看出效果,ctrl + c 操作时sigint信号

SIGKILL 这个信号不能被捕捉,即-9捕捉不了

测试

当第一个循环的时候,执行kill -2 pid,此时是2信号被忽略,按ctrl+c,脚本不会结束

进入第二个循环前,已经恢复了2的默认信号

在第二个循环的时候,按ctrl+c,脚本结束运行,退出状态码是130.被中断退出。

在第三个循环的时候,自定义了2信号,按ctl+c 或者执行kill -2 pid会打印now catch int 2这句话,同时退出状态码是88

trap ‘‘ int
echo "pid is $$"
echo "now 1 diy trap signal"
trap -p
i=1
while [ $i -lt 5 ]
do
sleep 5
echo now i is $i
let i++
done
trap ‘-‘ int
echo "now 2 diy trap signal"
trap -p
j=1
while [ $j -lt 5 ];do
echo j is $j
let j++
sleep 2
done
trap "echo now catch int 2;exit 88" 2
echo "now 3 diy trap signal"
trap -p
m=1
while [ $m -lt 5 ];do
echo m is $m
let m++
sleep 3
done
echo now $0 done

5 数组

数组可以理解成多个变量的集合,当定义的变量含有多个元素,建议用数组,比较方便

变量:存储单个元素的内存空间

数组:存储多个元素的连续的内存空间,相当于多个变量的集合

数组名和索引

索引:编号从0开始,属于数值索引

注意:索引可支持使用自定义的格式,而不仅是数值格式,即为关联索引,bash4.0版本之后开始支持

bash的数组支持稀疏格式(索引不连续)

声明数组:

declare -a ARRAY_NAME

declare -A ARRAY_NAME

-a定义的是普通的数值,也叫下标数组,下标数组元素是通过数组下标(数组下标可以是算术表达式,其结果必须是一个整数)来访问的,但是这种访问方式在表达某些关联性很强的数据时会存在限制。

-A定义的是关联数组,使用任意的字符串作为下标(不必是整数)来访问数组元素,关联数组的下标和值称为键值对,它们是一一对应的关系。在关联数组中,键是唯一的,值可以不唯一。

shell 的关联数组和 shell 的下标数组在定义和使用上完全一样,只是在索引上有区别。

注意:两者不可相互转换,在使用关联数组之前,需要使用命令 declare -A array 进行显示声明。默认数组定义是-a

5.1 数组赋值

数组元素的赋值

注意,如果定义重复名称的数组,则原来数值的所有值都会被覆盖

只有一次只赋值一个元素,这个定义方式不会覆盖掉整个数组,其他三个方式都会覆盖所有的数组

(1) 一次只赋值一个元素,这个定义方式不会覆盖掉整个数组

ARRAY_NAME[INDEX]=VALUE

weekdays[0]="Sunday"

weekdays[4]="Thursday"

(2) 一次赋值全部元素

ARRAY_NAME=("VAL1" "VAL2" "VAL3" ...)

(3) 只赋值特定元素

ARRAY_NAME=([0]="VAL1" [3]="VAL2" ...)

(4) 交互式数组值对赋值

read -a ARRAY,然后输入参数,用空格隔开,数组定义完成后按enter结束对ARRAY数组的定义

5.2 引用数组

引用数组元素:

${ARRAY_NAME[INDEX]}

注意:省略[INDEX]表示引用下标为0的元素

引用数组所有元素:

${ARRAY_NAME[*]}

${ARRAY_NAME[@]}

数组的长度(数组中元素的个数):

${#ARRAY_NAME[*]}

${#ARRAY_NAME[@]}

删除数组中的某元素:导致稀疏格式

unset ARRAY[INDEX]

如unset sunny[2]

删除整个数组:

unset ARRAY

查看所有数组

显示所有普通数组:declare -a

显示所有关联数组:declare -A

5.3数组数据处理

引用数组中的元素:

数组切片:${ARRAY[@]:offset:number}

offset: 要跳过的元素个数

number: 要取出的元素个数

如: declare -a weekday=‘([0]="Sun" [1]="Mon" [2]="Tue" [3]="Wen" [4]="Thu")‘

echo $[weekday[@]:2:2]

结果是Tue Wen

取偏移量之后的所有元素${ARRAY[@]:offset}

向数组中追加元素:

ARRAY[${#ARRAY[*]}]=value

关联数组:

declare -A ARRAY_NAME ARRAY_NAME=([idx_name1]=‘val1‘ [idx_name2]=‘val2‘...)

5.4 例子

以下两个例子

ex1 找出10个99以内的随机数的最大值和最小值

ex2 计算/var/log/*.log下所有下标是偶数的文件的行数的总和

注意ex2 中

files=(/var/log/*.log)

直接给数组分配了值,用来通配符的写法

#ex1: to find max and min num in ten nums
declare -a rand
declare -i max=0
declare -i min=32767
for i in {0..9} ; do
    rand[$i]=$[$RANDOM%99]
    echo rand[$i]=${rand[$i]}
    [ ${rand[$i]} -gt $max ] && max=${rand[$i]}
    [ ${rand[$i]} -lt $min ] && min=${rand[$i]}
done
echo "MAX:$max min:$min"

#ex2:to sum the lines in /var/log/*.log which subscript is even num
declare -a files
files=(/var/log/*.log)
declare -i lines=0
for i in $(seq 0 $[${#files[*]}-1]);do
   if [ $[$i%2] -eq 0 ];then
       let lines+=$(wc -l ${files[$i]} | cut -d " "  -f1)
   fi
done

echo "total lines is $lines"

6 字符串处理

6.1 字符串切片

${var:offset}:返回字符串变量var中从第offset个字符后(不包括第offset个字符)的字符开始,到最后的部分,offset的取值在0 到${#var}-1 之间(bash4.2后,允许为负值)

${var:offset:number}:返回字符串变量var中从第offset个字符后(不包括第offset个字符)的字符开始,长度为number的部分

${var:  -length}:取字符串的最右侧几个字符,相当于取最右边

注意:冒号后必须有一空白字符

${var:offset:-length}:从最左侧跳过offset字符,一直向右取到距离最右侧lengh个字符之前的内容,相当于取中间

${var: -length:-offset}:先从最右侧向左取到length个字符开始,再向右取到距离最右侧offset个字符之间的内容,先截断一部分,再取截断后的前面部分

注意:-length前空格

6.2基于模式取子串

${var#*word}:其中word可以是指定的任意字符

功能:自左而右,查找var变量所存储的字符串中,第一次出现的word, 删除字符串开头至第一次出现word字符之间的所有字符

${var##*word}:同上,贪婪模式,不同的是,删除的是字符串开头至最后一次由word指定的字符之间的所有内容

示例:

file="var/log/messages“

${file#*/}: log/messages

${file##*/}: messages

${var%word*}:其中word可以是指定的任意字符;

功能:自右而左,查找var变量所存储的字符串中,第一次出现的word, 删除字符串最后一个字符向左至第一次出现word字符之间的所有字符;

file="/var/log/messages"

${file%/*}: /var/log

${var%%word*}:同上,只不过删除字符串最右侧的字符向左至最后一次出现word字符之间的所有字符;

示例:

url=http://www.magedu.com:80

${url##*:}80

${url%%:*}http

6.3查找替换

${var/pattern/substr}:查找var所表示的字符串中,第一次被pattern所匹配到的字符串,以substr替换之

${var//pattern/substr}: 查找var所表示的字符串中,所有能被pattern所匹配到的字符串,以substr替换之

${var/#pattern/substr}:查找var所表示的字符串中,行首被pattern所匹配到的字符串,以substr替换之

${var/%pattern/substr}:查找var所表示的字符串中,行尾被pattern所匹配到的字符串,以substr替换之

6.4查找并删除

${var/pattern}:删除var所表示的字符串中第一次被pattern所匹配到的字符串

${var//pattern}:删除var所表示的字符串中所有被pattern所匹配到的字符串

${var/#pattern}:删除var所表示的字符串中所有以pattern为行首所匹配到的字符串

${var/%pattern}:删除var所表示的字符串中所有以pattern为行尾所匹配到的字符串

6.5字符大小写转换

${var^^}:把var中的所有小写字母转换为大写

${var,,}:把var中的所有大写字母转换为小写

6.6变量赋值

变量赋值还有以下的写法

以- 减号为标准来看

-当旧变量没有赋值时,新变量为赋值的值

-当旧变量已经有赋值了,新变量就和就变量一样,包括旧变量赋值为空字符串

:-区别就在旧变量为空字符串,新的变量就是赋值的值

其他一样

以- 减号为标准来看

多了:冒号一般就是强制的赋值,作用于当旧变量已经赋予空字符串的时候

-当旧变量没有赋值时,新变量为赋值的值

-当旧变量已经有赋值了,新变量就和就变量一样,包括旧变量赋值为空字符串

:-区别就在旧变量为空字符串,新的变量就是赋值的值

其他一样

+加号特殊,刚好和-减号大概相反的功能

等号和减号差不多,但是,等号会把旧的变量在没有设定的情况下,会把旧的变量也一起赋值,同时,当旧变量是空字符的时候,新变量也是空字符,等号就是,当旧变量没赋值时,新变量为赋值的字段,当旧变量由赋值,等号就是新变量

:=就是旧变量没有赋值时或者空字符时,新旧变量都是赋值的值,但是旧变量由赋值,新变量为旧变量的值。旧变量不变

?比较特殊,会检测旧变量是否存在,旧变量没有赋值,即不存在,就输出错,旧变量已经有赋值,新变量就是旧变量的值,旧变量不变,

:?多了冒号,就是当旧变量也为空字符,也输出错误

7 定义变量类型

Shell变量一般是无类型的,但是bash Shell提供了declare和typeset两个命令用于指定变量的类型,两个命令是等价的

declare [选项] 变量名

-r 声明或显示只读变量

一旦被赋值为只读的变量,那么这个变量将不再被重新赋值或者声明,也不能被取消设置,必须退出当前shell重新登录才能取消变量的赋值或定义

-i将变量定义为整型数

-a 将变量定义为数组

-A 将变量定义为关联数组,下标可以不是数字

-f 显示已定义的所有函数名及其内容

-F 仅显示已定义的所有函数名

-x 声明或显示环境变量和函数

-l 声明变量为小写字母declare –l var=lower

这里会将var这个变量中原来是大写的字母全部转换成小写字母,小写字母不变,var实际被赋予的值不包含大写字母

-u 声明变量为大写字母declare –u var=UPPER

这里会将var这个变量中原来是小写的字母全部转换成大写字母,大写字母不变,var实际被赋予的值不包含小写字母

8 eval命令

eval命令将会首先扫描命令行进行所有的置换,然后再执行该命令。该命令适用于那些一次扫描无法实现其功能的变量.该命令对变量进行两次扫描

示例:

[[email protected]~]# CMD=whoami
[[email protected] ~]# echo $CMD
whoami
[[email protected] ~]# eval $CMD
root
[[email protected]~]# n=10
[[email protected]~]# echo {0..$n}
{0..10}
[[email protected]~]# eval echo {0..$n}
0 1 2 3 4 5 6 7 8 9 10

9 间接变量引用

如果第一个变量的值是第二个变量的名字,从第一个变量引用第二个变量的值就称为间接变量引用

variable1的值是variable2,而variable2又是变量名,variable2的值为value,间接变量引用是指通过variable1获得变量值value的行为

variable1=variable2
variable2=value
tempvar=$variable1

此时tempvar这个变量的值是variable2,但是要实现间接引用,使得tempvar的值通过variable1可以被赋值value,就是所谓的间接引用

bash Shell提供了两种格式实现间接变量引用

花括号里不能有$号,如果要引用花括号里的变量,就要用!感叹号

eval tempvar=\$$variable1
tempvar=${!variable1}

示例:

[[email protected] ~]# N=NAME
[[email protected] ~]# NAME=sunny
[[email protected] ~]# N1=${!N}
[[email protected] ~]# echo $N1
sunny
[[email protected] ~]# eval N2=\$$N
[[email protected] ~]# echo $N2
sunny

10 创建临时文件

mktemp命令:创建并显示临时文件,可避免冲突

mktemp[OPTION]... [TEMPLATE]

TEMPLATE: filename.XXX

X至少要出现三个,为大写的字母X

OPTION:

-d: 创建临时目录

-p DIR或--tmpdir=DIR:指明临时文件所存放目录位置

示例:

mktemp/tmp/test.XXX

tmpdir=`mktemp –d /tmp/testdir.XXX`

创建一个临时目录,同时把这个目录的名称赋值给tmpdir这个变量

mktemp --tmpdir=/testdir test.XXXXXX

11 安装复制文件

install命令的作用是安装或升级软件或备份数据,它的使用权限是所有用户。

install命令和cp命令类似,都可以将文件/目录拷贝到指定的地点。但是,install允许你控制目标文件的属性。

install在拷贝的同时制定新生成文件的属性,如制定rwx或者所属组或者所有者的属性

install通常用于程序的makefile,使用它来将程序拷贝到目标(安装)目录。

install命令:

install [OPTION]... [-T] SOURCE DEST 单文件

install [OPTION]... SOURCE... DIRECTORY

install [OPTION]... -t DIRECTORY SOURCE...

install [OPTION]... -d DIRECTORY...创建空目录

选项:

-m MODE,默认755

-o OWNER

-g GROUP

-d 创建新的目录

更多选项查看链接:http://man.linuxde.net/install

示例:

install -m 700 -o wang -g admins srcfile desfile
install –m 766 –d /testdir/installdir

12 总结

编写脚本的时候,可以借助以上10个工具在来提高编程的效率。

时间: 2024-10-13 04:40:16

shell 编程 之 小技巧的相关文章

Linux Shell 脚本的小技巧——不定期更新

本文旨在积累平时写 shell 脚本是遇到的小问题的解决方法.在这里不定期的更新,以便以后查阅.沿用. 一,在shell 脚本中定义默认值 1.   对默认变量直接赋值 read -p "input>>:" nub nub=${nub:-30} echo ${nub} 2.   对默认变量用可变值赋值 read -p "input>>:" nub nub=${nub:-$(date +%Y%m%d)} echo ${nub}

快速回顾C#基础(编程的小技巧)待完善

一.类型转换 二.可变参数 三.字符串 四.委托 五.构造函数 六.Lamba表达式 七.Linq 八.Entity Framework 1.程序的入口:Entities        文件后缀Context.cs 2.数据库的相关信息都在生成的一个与数据库表对应的类中      文件数据库名.tt中的表名(一般EF的名字和数据库的名字或者项目的名字相同后面加DB) 3.EF对数据库进行增删查改 增: TestEntities entities = new TestEntities(); Use

Linux Shell 编程实战技巧

目前,越来越多的企业应用会部署在 Linux 系统上的,而 Linux Shell 脚本可以极大地帮助我们完成这些应用的运维任务.这使得 Linux Shell 开发技能成为开发人员的一项重要的.有竞争力的技能.本文就笔者的实际开发经验,以 Korn Shell 为例分享了脚本开发中的常见问题及相关技巧. 避免定时任务脚本的常见问题 很多脚本在实际使用的时候往往是以定时任务的方式运行,而非手工运行.但是实现同样功能的脚本在这两种运行方式下可能遇到的问题不尽相同. 以定时任务方式运行的脚本往往会遇

hadoop编程小技巧(4)---全局key排序类TotalOrderPartitioner

Hadoop代码测试版本:Hadoop2.4 原理:在进行MR程序之前对输入数据进行随机提取样本,把样本排序,然后在MR的中间过程Partition的时候使用这个样本排序的值进行分组数据,这样就可以达到全局排序的目的了. 难点:如果使用Hadoop提供的方法来实现全局排序,那么要求Mapper的输入.输出的key不变才可以,因为在源码InputSampler中提供的随机抽取的数据是输入数据最原始的key,如下代码(line:225): for (int i = 0; i < splitsToSa

mysql写Shell小技巧

今天终于在表哥的帮助下解决了文件导入/出这个问题了.(很菜逼的一个问题),然后将最近看到的文章都自己测试了下,顺便奉上记录.1.Mysql数据库支持union的时候写文件小技巧: 采用常规的union写入,可以看到前面的字段占位数肯定也会被写入,替换成null也是一样的结果,这个对于写shell没啥大碍,但是如果用来写bat,mof,vbs等文件就会出问题了,那么怎么去掉这个只写入我们需要的内容呢?采用hex编码就好了. 将我们要写入的内容使用hex编码在分段写在每个字段位上,这样就可以只写入我

积累的VC编程小技巧之对话框

1.用鼠标移动基于对话框的无标题栏程序的简单方法 void CVCTestDlg::OnLButtonDown(UINT nFlags, CPoint point) {    //一句话解决问题     SendMessage(WM_SYSCOMMAND,0xF012,0);    CDialog::OnLButtonDown(nFlags, point);} 2.对话框消息映射 有对话框A,B从A中发消息给B然后B处理.准备工作,先定义消息,如下#define WM_B_NOTIFY WM_U

积累的VC编程小技巧之工具提示

1.用鼠标移动基于对话框的无标题栏程序的简单方法 void CVCTestDlg::OnLButtonDown(UINT nFlags, CPoint point) {    //一句话解决问题     SendMessage(WM_SYSCOMMAND,0xF012,0);    CDialog::OnLButtonDown(nFlags, point);} 2.对话框消息映射 有对话框A,B从A中发消息给B然后B处理.准备工作,先定义消息,如下#define WM_B_NOTIFY WM_U

积累的VC编程小技巧之树操作

1.如何在TreeList中加图标? [问题提出]  请问treeview控件和treectrl控件的用法有何不同呢?向如何imagelist控件中加图象呀?  [解决方法]  1)    HICON hicon[8];    m_imageList.Create(16,16,0,8,8);    hicon[0]=AfxGetApp()->LoadIcon(IDI_ICON0);    hicon[1]=AfxGetApp()->LoadIcon(IDI_ICON1);    hicon[2

积累的VC编程小技巧之图标、光标及位图

1.图标透明 (1).Windows中的图标其实是有两个图像组成的,其中一个用于与它要显示的位置的图像做"AND"操作,另一个作"XOR"操作. 透明:用"白色"AND,用"黑色"XOR反色:用"白色"AND,用"白色"XOR正常色:用"黑色"AND,用正常颜色XOR.(2). WIN9X中好像是对像素的操作实现透明的WIN2K中就有API直接实现透明了!WIN2K中