Shell 脚本常用命令

时间:2023-12-11 08:21:08

Shell脚本是Linux开发工作中常用的工具,但是我一直没有找到一个适合自己的简明扼要的HandBook。在工作过程中整理了一下,贴在这里已备查看。

1           Shell中的特殊符号

1.1           $  美元符号。用来表示变量的值。如变量NAME的值为Mike,则使用$NAME就可以得到“Mike”这个值。

1.2          #  井号。除了做为超级用户的提示符之外,还可以在脚本中做为注释的开头字母,每一行语句中,从#号开始的部分就不执行了。

1.3           “”  双引号。shell不会将一对双引号之间的文本中的大多数特殊字符进行解释,如#不再是注释的开头,它只表示一个井号“#”。但$仍然保持特殊含义。(在双引号中的$加变量名,即:$PARAM_NAME,依然会转换成变量的值。)

1.3.1     双引号对于某些特殊符号是不起作用的, 例如:”,$,\,`(反引号)

1.3.2     双引号和单引号不能嵌套。即:echo ‘””’  输出””,  echo “’’” 输出’’

1.4           ‘’  单引号。shell不会将一对单引号之间的任何字符做特殊解释。(在双引号中的$加变量名,即:$PARAM_NAME,不会转换成变量的值。)

1.4.1     echo “$HOME”    (结果:/home/xiongguoan)

1.5          ``  倒引号。命令替换。在倒引号内部的shell命令首先被执行,其结果输出代替用倒引号括起来的文本,不过特殊字符会被shell解释。

1.5.1     echo ‘$HOME’    (结果:$HOME)

1.6          \  斜杠。用来去掉在shell解释中字符的特殊含义。在文本中,跟在\后面的一个字符不会被shell特殊解释,但其余的不受影响。

1.7          []中括号, 主要是用来测试条件的,通常放在if语句的后面。 (不过还是不太明白),但是中括号本身不会在测试语句执行后消失。

1.7.1     echo [$HOME]   (结果:出现错误)

1.7.2     echo [$HOME ]   (结果:[/home/xiongguoan ]) (注意:HOME后面有空格哦。)

1.7.3     echo [$HOME –eq ‘/xiong’]  (结果:[/home/xiongguoan –eq /xiong])

1.8          {}大括号,主要是和$符号配合,作为字符串连接来使用

1.8.1     echo ${HOME}ismydir   (结果:/home/xiongguoanismydir)

2           预定义的变量

2.1          特殊变量

$      shell变量名的开始,如$var

|      管道,将标准输出转到下一个命令的标准输入

$#     记录传递给Shell的自变量个数

#      注释开始

&      在后台执行一个进程

?     匹配一个字符

*      匹配0到多个字符(与DOS不同,可在文件名中间使用,并且含.)

$-     使用set及执行时传递给shell的标志位

$!     最后一个子进程的进程号

$?     取最近一次命令执行后的退出状态(返回码)

$*     传递给shell script的参数

$@     所有参数,个别的用双引号括起来

$0     当前shell的名字

$n     (n:1-) 位置参数

$$     进程标识号(Process Identifier Number, PID)

>      输出重定向

<      输入重定向

>>      输出重定向(追加方式)

[]     列出字符变化范围,如[a-z]

2.2          代值变量

* 任意字符串

? 一个任意字符

[abc] a, b, c三者中之一

[a-n] 从a到n的任一字符

2.3          特殊字符的表达

\b 退回  
\c 打印一行时没有换行符 这个我们经常会用到  
\f 换页  
\r 回车  
\t 制表  
\v 垂直制表  
\\ 反斜线本身 

2.4          其他字符

2.4.1     分号

; 表示一行结束

2.4.2     圆括号

() 表示在新的子shell中执行括号内的命令(这样可以不改变当前shell的状态。)

但是圆括号在单/双引号内失去作用,只作为普通字符。

2.4.3     花括号

2.4.3.1    分割命令的用法

与圆括号相似,但是:1. 花括号内的命令在当前shell中执行;2.花括号必须作为命令的第一个字符出现。

2.4.3.2    引用变量的用法

在$后面,表示变量名的开始和结束

2.4.4     方括号

相当与test命令,用来执行测试条件,通常用在需要判断条件的语句后面,例如:if,while等等。

3           设置变量

3.1          格式:VARNAME=value (i.e. PARAM=’hello’)

3.2          注意:

3.2.1     等号的前后不能有空格

3.2.2     如果变量的值是一个命令的执行结果,请加上反引号(`)。

4           引用变量

4.1          $VARNAME

4.1.1     e.i.  echo $HOME   (结果:/home/xiongguoan)

4.2          变量默认值

4.2.1     在引用一个变量的时候可以设定默认值。如果在此之前,该变量已经设定了值,则此默认值无效。如果此时变量没有被设定值,则使用此默认值(但是没有改变此变量的值)。

4.2.2     echo Hello ${UNAME:-there}     #其中there是UNAME的默认值

4.2.3     其他关于默认值与判读变量的方法:

利用大括号表示变量替换

表示形式

说明

${VARIABLE}

基本变量替换。大括号限定变量名的开始和结束

${VARIABLE:-DEFAULT}

如果VARIABLE没有值,则这种表示形式返回DEFAULT的值

${VARIABLE:=DEFAULT}

如果VARIABLE没有值,则这种表达形式返回DEFAULT的值。另外,如果VARIABLE没有设置,则把DEFAULT的值赋予它

${VARIABLE:+VALUE}

如果VARIABLE被设置,则这种表示形式返回VALUE;否则,返回一个空串

${# VARIABLE}

这种表示形式返回VARIABLE值的长度,除非VARIABLE是* 或者@在为*或者@的特殊情况下,则返回$@所表示的元素的个数。要记住,$ @保存传给该脚本的参数清单

${VARIABLE:?MESSAGE}

如果VARIABLE没有值,则这种表示形式返回MESSAGE的值。Shell也显示出VARIABLE的名字,所以这种形式对捕获得错误很有用

4.2.4     注意:

4.2.4.1    使用${VALIABLE:?MESSAGE},如果发现此变量此时没有值,则脚本停止运行并显示行号和变量名称。 主要用于调试。

4.2.4.2

5           位置变量

5.1          使用$1,$2,$3…$9,${10},${11}…来代表输入的参数。其中$0代表被执行的命令或者脚本的名字。$1,$2…代表输入的第1,2…个参数

5.2          例子:

# cat count.sh#!/bin/sh

A=$1             # 将位置$1的数值读入,并赋给变量A

B=$2             # 将位置$2的数值读入,并赋给变量B

C=$[$A+$B]       # 将变量A与B的值相加,将结果赋给C

echo $C          # 显示C的数值

结果:

# ./count.sh  3  6

9

# ./count.sh 34  28

62

5.3          $@和$*代表参数的列表,$#代表参数的数量 (不知道$@和$*之间的差别)

6           运算符和优先级

Shell运算符和它们的优先级顺序

级别

运算符

说明

13

-, +

单目负、单目正

12

!, ~

逻辑非、按位取反或补码

11

* , / , %

乘、除、取模

10

+, -

加、减

9

<< , >>

按位左移、按位右移

8

< =, > =,  < , >

小于或等于、大于或等于、小于、大于

7

= = , ! =

等于、不等于

6

&

按位与

5

^

按位异或

4

|

按位或

3

&&

逻辑与

2

| |

逻辑或

1

=, + =, - =, * =, /=, % =, & =, ^ =, | =, << =, >> =

赋值、运算且赋值

7           source / export / let / unset

7.1          source

7.1.1     正常情况下,脚本中执行的参数设置只能影响到shell脚本本身的执行环境,不能影响到调用此shell的脚本。

7.1.2     使用source命令执行脚本,可以让脚本影响到父shell的环境(即调用此shell的当前shell)。

7.1.3     例如:source env.sh

7.2          export

7.2.1     在bash下,使用export建立环境变量后,会影响到子shell脚本和当前shell的环境变量

7.3          unset

7.3.1     删除环境变量

7.3.2     i.e.

#export newval=1

#echo $newval

1

#unset newval

#echo $newval

(ß此处为空行,newval已经被删除)

7.4          let

7.4.1     在bash中只用此命令可以建立一个临时的变量,此变量不会影响到子shell

8            逻辑判断

8.1          if

8.1.1     单格式与嵌套

if 条件表达式  
then #当条件为真时执行以下语句  
命令列表  
else #为假时执行以下语句  
命令列表  
fi

 

if 语句也可以嵌套使用

if 条件表达式1  
then  
if 条件表达式2  
then  
命令列表  
else  
if 条件表达式3  
then  
命令列表  
else  
命令列表  
fi  
fi  
else  
命令列表  
fi 

8.1.2     多分支格式

if test -f "$1"  
then  
lpr $1  
elif test -d "$1" #elif 同else if  
then  
(cd $1;lpr $1)  
else  
echo "$1不是文件或目录"  
fi

8.2          case

8.2.1     格式

case $newval in

1)          #这里是可能值1

echo 1

;;      #表示第一个分支结束

2)           #这里是可能值 2

echo 2

;;      #第二个分支结束

*)      #表示其他可能值,必须在最后,否则他后面的语句无法执行

echo unkown

esac    #case 语句结束

8.2.2

8.3          while /until

8.3.1     格式

while 表达式

do

命令列表

done

8.3.2     例如:

Sum=0  
i=0  
while true #true是系统的关键词 表示真  
do  
i=`expr $i + 1`  
Sum=`expr $Sum + $i`  
if [ $i = "100" ]  
then  
break;  
fi  
done  
echo $i $Sum  
最后这个程序显示的是 100 5050 

 

下面将这个程序再改动一下

Sum=0  
i=0  
while [ $i != "100" ]  
do  
i=`expr $i + 1`  
Sum=`expr $Sum + $i`  
done  
echo $i $Sum

改动后的程序运算结果和上面是一样 但程序比上面的要简练

在这个循环中还可以以until做为测试条件 它正好与while测试的条件相反,也就是当条件为假时将继续执行循环体内的语句,否则就退出循环体,下面还用这个例子.

Sum=0  
i=0  
until [ $i = "100" ]  
do  
i=`expr $i + 1`  
Sum=`expr $Sum + $i`  
done  
echo $i $Sum  
当i不等于100时循环 就是当条件为假时循环,否则就退出,而第一个例子是当i不等于100  
时循环,也就是测试条件为真时循环. 

8.4          for

8.4.1     枚举用法

8.4.1.1    格式

for 变量 in 名字列表  
do  
命令列表  
done 

 

8.4.1.2    格式

for n in {1..10}

do

echo $n

done

 

for letter in a b c d e;

do

echo $letter

done

 

 

8.4.2     文件用法

8.4.2.1    格式

for file in *

do

echo $file

done

8.4.2.2    例子

for File in a1 a2 a3 a4 a5  
do  
diff aa/$File bb/$File  
done 

 

8.4.3     累加格式

for (( i=1;$i<10;i++))

do

echo $i

done

for(( i=1;$i<10;i=$[$i+1’ ])

do

echo $i

done

8.4.4

8.5          其他循环控制语句

break 命令不执行当前循环体内break下面的语句从当前循环退出.  
continue 命令是程序在本循体内忽略下面的语句,从循环头开始执行.

 

8.6          逻辑判断的表达

一、判断文件的属性

格式:-操作符 filename  
-e 文件存在返回1, 否则返回0  
-r 文件可读返回1,否则返回0  
-w 文件可写返回1,否则返回0  
-x 文件可执行返回1,否则返回0  
-o 文件属于用户本人返回1, 否则返回0  
-z 文件长度为0返回1, 否则返回0.  
-f 文件为普通文件返回1, 否则返回0  
-d 文件为目录文件时返回1, 否则返回0

二、测试字符串  
字符串1 = 字符串2 当两个字串相等时为真  
字符串1 != 字符串2 当两个字串不等时为真  
-n 字符串      当字符串的长度大于0时为真  
-z 字符串      当字符串的长度为0时为真  
字符串       当串字符串为非空时为真

三、测试两个整数关系  
数字1 -eq 数字2     两数相等为真  
数字1 -ne 数字2     两数不等为真  
数字1 -gt 数字2     数字1大于数字2为真  
数字1 -ge 数字2     数字1大于等于数字2为真  
数字1 -lt 数字2     数字1小于数字2为真  
数字1 -le 数字2     数字1小于等于数字2为真

四、逻辑测试  
-a         与  
-o        或  
!        非 

9           shell中的表达式

9.1          shell 输出重定向

9.1.1     管道  |

就管道符前的命令的输出作为管道符后的命令的输入。

ls | grep ‘.txt’

将ls的输出作为grep 的输入。 grep从输入中找出所有包含.txt的行。

9.1.2     输出  >

将右尖括号前的命令的输入重定向到尖括号后的文件中。

例如:

ls *.sh > list.txt

将当前目录下所有末尾名为sh的文件的列表写入到list.txt

9.1.3     输入 <

将左箭头后面的文件作为左箭头前的命令的输入。

例如:

grep “a” < test.sh

将test.sh中找到所有包含a的行

9.1.4     错误输出重定向

默认bash有3个标准输入输出设备。

0 标准输入

1 标准输出

2错误输出

如果执行脚本的时候发生错误,会输出到2上。

要想就将错误的输出也输出在标准输出上,需要重定向。

例如:

./test.sh > a.log 2>&1

后面2>&1就是将标准错误的输出重定向到标准输出上。

9.2          tee

9.2.1     将此命令的输入分叉,一支输出到屏幕一支可以重定向到其他位置。

例如: ./test.sh | tee >a.txt 2>&1

运行test.sh,通过tee输出到a.txt,同时屏幕上可以看到输出。并且将错误输出重定向到标准输出( 2>&1 )

9.3          cpio

9.3.1     文件或目录打包

9.3.1.1    含子目录打包

  find . -name '*.sh' | cpio -o > shell.cpio

  将当前目录及其子目录下的sh文件打包成一个文件库为shell.cpio。 

9.3.1.2    不含子目录的打包

ls *.sh | cpio -o > shell.cpio

  将当前目录下的sh文件(不含子目录)打包成一个文件库为shell.cpio。 

9.3.2      压缩

文件打包完成后,即可用Unix中的compress命令(/usr/bin下)压缩打包文件。对一般的文本文件,压缩率较高,可达81%。

例如:compress shell.cpio则将文件库压缩为shell.cpio.Z(自动添加.Z并删除shell.cpio )。 

9.3.3      解压

uncompress shell.cpio.Z则自动还原为shell.cpio。 

9.3.4      解包展开

将按原目录结构解包展开到当前所在目录下。若以相对路径打包的,当解包展开时,也是以相对路径存放展开的文件数据;若以绝对路径打包的,当解包展开时,也是以绝对路径存放展开的文件数据。因此注意若为相对路径,应先进入相应的目录下再展开。 

 cd /u1

 cpio –id < shell.cpio 解压到当期目录。 

 cpio –iud < shell.cpio则文件若存在将被覆盖,即强制覆盖。 

 cpio –id < shell.cpio env.sh 解压缩env.sh

9.3.5      显示包内的文件

  cpio –it < shell.cpio  

9.4          exec

9.4.1     将此命令后的参数作为命令在当前的shell中执行,当前的shell或者脚本不在执行。

例如: exec ls

当前进程替换为ls,执行结束后就退出了。

例如:在a.sh 中包含

exec b.sh 则当a.sh 执行到此句后,被b.sh替换,a.sh中此句后的语句不会再被执行。

9.5          fork

9.5.1     将此命令的参数,新建一个进程来执行

例如:在a.sh 中包含

fork b.sh 则当a.sh 执行到此句后,被b.sh替换,a.sh中此句后的语句继续执行。b.sh在新的进程中同时执行。

9.6          expr

9.6.1     expr argument operator argument

9.6.2     一般用于整数的运算。 例如:

#set newval=1

#echo $newval

1

#set newval=`expr $newval + 1`

#echo $newval

2

#set newval=$newval+1

#echo $newval

2+1

9.7          test

9.7.1     测试,通常用在需要判断的语句后面,例如:if,while,等等。

9.7.2     很多时候可以和中括号[]互换,我不知道区别是什么。

9.7.3     例子:

i=1

if test”$ i” == “1”

then

echo true

else

echo false

fi

9.8          exit

退出当前的shell,执行结果可以在shell中用$?查看

例如:exit 2

9.9          read

从标准输入读取数据。

例: 
$ read var1 var2 var3 
Hello my friends 
$ echo $var1 $var2 $var3 
Hello my friends 
$ echo $var1 
Hello

9.10       shift

9.10.1 每次调用的时候,将参数列表中的第一个参数去掉。这样可以循环得到第一个参数。

9.10.2 例子

#cat t.sh

sum=0

until [ $# -eq 0 ]

do

echo $*

sum=`expr $sum + $1`

shift

done

echo result is: $sum

#./t.sh 1 2 3

1 2 3

2 3

3

10       附件一:例子脚本

10.1        脚本1

10.2

11       附件二:Linux 易被遗漏的命令解析

11.1       grep

11.1.1 grep ‘string’ filename

11.1.1.1e.i.: grep ‘list’ mytxt.txt 在mytxt.txt中寻找包含list字符串的所有行

11.1.2 “-v” : 相反的。 即不包含字符串。

11.1.2.1e.i.: grep –v ‘list’ mytxt.txt

11.1.3 cat mytxt | grep ‘list’

将cat mytxt作为源, 从中查找包含list字符串的行

11.2       find

11.2.1 -atime n : 指查找系统中最后n*24小时访问的文件;

11.2.2 -ctime n : 指查找系统中最后n*24小时被改变状态的文件;

11.2.3 -mtime n : 指查找系统中最后n*24小时被修改的文件。

11.2.4 在当前目录下(包含子目录),查找所有txt文件并找出含有字符串"bin"的行
find ./ -name "*.txt" -exec grep "bin" {} \;

11.2.5 在当前目录下(包含子目录),删除所有txt文件
find ./ -name "*.txt" -exec rm {} \;

11.3       du

11.3.1 显示文件的大小

11.3.2 i.e.

#du *.txt

1230   myfile1.txt

456    myfile2.txt

11.4       awk

11.4.1 提取输入中的某个参数

11.4.2 i.e. 提取输入中每一行的第一个参数

#echo `du *.txt | awk ‘{print $1}’`

1230 456

提取子字符串

#echo `du *.bin | awk '{print substr($1,2,3)}'`

11.5       前后台运行

11.5.1 将某个程序在后台启动起来,只需要在命令的最后加上 & 符号。

例如: ./test.sh &

11.5.2 将当前正在运行的程序切换到后台

11.5.2.1当按下^z的时候,当前的应用程序就会切换到后台,但是此时的状态是停止的状态。

11.5.2.2使用jobs命令可以看到当前在后台运行的程序的列表。

例如:jobs

[1]+ stopped top

[2]+stopped find | grep *.txt > a.log

11.5.2.3使用bg命令可以将某个后台程序继续运行。

#bg %2

#jobs

[1]+ stopped top

[2]+ Running find | grep *.txt > a.log

11.5.3 将后台运行的程序切回到前台

#fg %2

将find 命令切回到前台

11.6       shell的执行选项

-n 测试shell script语法结构,只读取shell script但不执行 
-x 进入跟踪方式,显示所执行的每一条命令,用于调度 
-a Tag all variables for export 
-c "string" 从strings中读取命令 
-e 非交互方式 
-f 关闭shell文件名产生功能 
-h locate and remember functions as defind 
-i 交互方式 
-k 从环境变量中读取命令的参数 
-r 限制方式 
-s 从标准输入读取命令 
-t 执行命令后退出(shell exits) 
-u 在替换中如使用未定义变量为错误 
-v verbose,显示shell输入行

11.7       alias

建立别名

alias dir ls

11.8        xargs

执行本命令的第一个参数,并将xargs的输入作为被执行命令的参数

例如:

find . -name '*.c' | xargs cat

将本目录及其子目录下所有的C文件使用cat命令显示其内容。

 

12       附件三:Bash中影响环境变量的命令

Shell有若干以变量为工作对象的命令,其中有些命令似乎重复了。例如,可以用declare、export和typeset命令来创建全局(或转出)的变量。typeset命令是declare的同义词。

Declare 命令

语法:

declare [options] [name [= value]]

摘要:

用于显示或设置变量。

declare命令使用四个选项:

-f   只显示函数名

-r   创建只读变量。只读变量不能被赋予新值或取消设置,除非使用declare或者typeset命令

-x   创建转出(exported)变量

-i   创建整数变量。如果我们想给一个整数变量赋予文本值,实际上是赋予0使用+ 代替-,可以颠倒选项的含义。

如果没有使用参数,则declare显示当前已定义变量和函数的列表。让我们关注一下-r选项:

$ declare  –r  title=" paradise Lost"

$ title = " Xenogenesis"

bash: title: read-only variable

$ declare title= " Xenogenesis"

$ echo $title

Xecogenesis

$ typeset title = " The Longing Ring”

$ echo $title

The Longing Ring

这个示例表明,只有declare或typeset命令可以修改只读变量的值。

export命令

语法:

export [options] [name [= value]]

摘要:

用于创建传给子Shell的变量。

export命令使用四个选项:

--   表明选项结束。所有后续参数都是实参

-f   表明在“名-值”对中的名字是函数名

-n   把全局变量转换成局部变量。换句话说,命名的变量不再传给子Shell

-p   显示全局变量列表

如果没有用参数,则假定是一个-p参数,并且显示出全局变量的列表:

$ export

declare –x ENV = "/home/medined/ . bashrc"

declare –x HISTFILESIZE = "1000"

declare –xi numPages = "314"

declare –xr title = "The Longing Ring"

declare –xri numChapters = "32"

这种显示的一个有趣的特性是,它告诉我们哪些变量只能是整数、是只读的,或者二者皆可。

let命令

语法:

let expression

摘要:

用于求整数表达式的值。

let命令计算整数表达式的值。它通常用来增加计数器变量的值,如例5-9所示。

例5-9 let——使用let命令

# ! /bin/bash

count=1

for element in $@

do

echo " $element is element $count"

let count+=1

done

下面是这个脚本运行结果示例:

$ chmod + x let

$ . /let one two three

one is element 1

two is element 2

three is element 3

注意:如果我们习惯在表达式中使用空格,那么要用双引号把表达式括起来,如:

let "count + =1"

否则会导致语句错误。

local 命令

语法:

local [name [= value]]

摘要:

用于创建不能传给子Shell的变量。这个命令仅在过程内部有效。

简单说来,local命令创建的变量不能被子Shell存取。因此,只能在函数内部使用local命令。我们可以在命令行或脚本中使用“变量=值”这种形式的赋值命令。如果使用local时不带实参,那么当前已定义的局部变量列表就送往标准输出显示。

readonly命令

语法:

readonly [options] [name[ = value]]

摘要:

用于显示或者设置只读变量。

Readonly命令使用两个选项:

--    表明选项结束。所有后续参数都是实参

-f    创建只读函数

如果没有用参数,则readonly显示当前已定义的只读变量和函数的列表。

set命令

语法:

set [--abefhkmnptuvxidCHP] [-o option] [name [= value]]

摘要:

用于设置或者重置各种Shell选项。

set 命令可实现很多不同的功能——并非其中所有的功能都与变量有关。由于本节的其他命令重复了通过set命令可用的那些变量选项,所以这里对set命令不做详细说明。

shift命令

语法

shift [n]

摘要:

用于移动位置变量。

shift命令调整位置变量,使$3的值赋予$2,而$2的值赋予$1。当执行shift命令时,这种波动作用影响到所定义的各个位置变量。往往使用shift命令来检查过程参数的特定值——如为选项设置标志变量时。

typeset命令

语法:

typeset [options] [name [= value]]

摘要:

用于显示或者设置变量。

typeset 命令是declare命令的同义词。

unset命令

语法:

unset [options] name [name …]

摘要:

用于取消变量定义。

unset命令使用两个选项:

--  表明选项结束,所有后续参数都是实参

-f  创建只读函数

unset命令从Shell环境中删除指定的变量和函数。注意,不能取消对PATH、IFS、PPID、PS1、PS2、UID和EUID的设置。如果我们取消RANDOM、SECONDS、LINENO或HISTCMD等变量的设置,它们就失去特有属性。