Shell 脚本常用命令

Shell脚本是Linux开发工作中常用的工具，但是我一直没有找到一个适合自己的简明扼要的HandBook。在工作过程中整理了一下，贴在这里已备查看。

1 Shell中的特殊符号

1.1 $ 美元符号。用来表示变量的值。如变量NAME的值为Mike，则使用$NAME就可以得到“Mike”这个值。

1.2 # 井号。除了做为超级用户的提示符之外，还可以在脚本中做为注释的开头字母，每一行语句中，从#号开始的部分就不执行了。

1.3 “” 双引号。shell不会将一对双引号之间的文本中的大多数特殊字符进行解释，如#不再是注释的开头，它只表示一个井号“#”。但$仍然保持特殊含义。（在双引号中的$加变量名，即：$PARAM_NAME，依然会转换成变量的值。）

1.3.1 双引号对于某些特殊符号是不起作用的， 例如：”,$,\,`(反引号)

1.3.2 双引号和单引号不能嵌套。即：echo ‘””’ 输出””, echo “’’” 输出’’

1.4 ‘’ 单引号。shell不会将一对单引号之间的任何字符做特殊解释。（在双引号中的$加变量名，即：$PARAM_NAME，不会转换成变量的值。）

1.4.1 echo “$HOME” (结果：/home/xiongguoan)

1.5 `` 倒引号。命令替换。在倒引号内部的shell命令首先被执行，其结果输出代替用倒引号括起来的文本，不过特殊字符会被shell解释。

1.5.1 echo ‘$HOME’ (结果:$HOME)

1.6 \ 斜杠。用来去掉在shell解释中字符的特殊含义。在文本中，跟在\后面的一个字符不会被shell特殊解释，但其余的不受影响。

1.7 []中括号， 主要是用来测试条件的，通常放在if语句的后面。 （不过还是不太明白）,但是中括号本身不会在测试语句执行后消失。

1.7.1 echo [$HOME] (结果：出现错误)

1.7.2 echo [$HOME ] (结果：[/home/xiongguoan ]) (注意：HOME后面有空格哦。)

1.7.3 echo [$HOME –eq ‘/xiong’] (结果：[/home/xiongguoan –eq /xiong])

1.8 {}大括号，主要是和$符号配合，作为字符串连接来使用

1.8.1 echo ${HOME}ismydir （结果：/home/xiongguoanismydir）

2 预定义的变量

2.1 特殊变量

$ shell变量名的开始，如$var
| 管道，将标准输出转到下一个命令的标准输入
$# 记录传递给Shell的自变量个数
# 注释开始
& 在后台执行一个进程
？ 匹配一个字符
* 匹配0到多个字符(与DOS不同，可在文件名中间使用，并且含.)
$- 使用set及执行时传递给shell的标志位
$! 最后一个子进程的进程号
$? 取最近一次命令执行后的退出状态(返回码)
$* 传递给shell script的参数
$@ 所有参数，个别的用双引号括起来
$0 当前shell的名字
$n (n:1-) 位置参数
$$ 进程标识号(Process Identifier Number, PID)
> 输出重定向
< 输入重定向
>> 输出重定向（追加方式）
[] 列出字符变化范围，如[a-z]

2.2 代值变量

* 任意字符串

? 一个任意字符

[abc] a, b, c三者中之一

[a-n] 从a到n的任一字符

2.3 特殊字符的表达

\b 退回

\c 打印一行时没有换行符 这个我们经常会用到

\f 换页

\r 回车

\t 制表

\v 垂直制表

\\ 反斜线本身

2.4 其他字符

2.4.1 分号

; 表示一行结束

2.4.2 圆括号

() 表示在新的子shell中执行括号内的命令（这样可以不改变当前shell的状态。）

但是圆括号在单/双引号内失去作用，只作为普通字符。

2.4.3 花括号

2.4.3.1 分割命令的用法

与圆括号相似，但是：1. 花括号内的命令在当前shell中执行；2.花括号必须作为命令的第一个字符出现。

2.4.3.2 引用变量的用法

在$后面，表示变量名的开始和结束

2.4.4 方括号

相当与test命令，用来执行测试条件，通常用在需要判断条件的语句后面，例如：if,while等等。

3 设置变量

3.1 格式：VARNAME=value （i.e. PARAM=’hello’）

3.2 注意：

3.2.1 等号的前后不能有空格

3.2.2 如果变量的值是一个命令的执行结果，请加上反引号（`）。

4 引用变量

4.1 $VARNAME

4.1.1 e.i. echo $HOME （结果：/home/xiongguoan）

4.2 变量默认值

4.2.1 在引用一个变量的时候可以设定默认值。如果在此之前，该变量已经设定了值，则此默认值无效。如果此时变量没有被设定值，则使用此默认值（但是没有改变此变量的值）。

4.2.2 echo Hello ${UNAME:-there} #其中there是UNAME的默认值

4.2.3 其他关于默认值与判读变量的方法：

利用大括号表示变量替换

表示形式	说明
${VARIABLE}	基本变量替换。大括号限定变量名的开始和结束
${VARIABLE:-DEFAULT}	如果VARIABLE没有值，则这种表示形式返回DEFAULT的值
${VARIABLE:=DEFAULT}	如果VARIABLE没有值，则这种表达形式返回DEFAULT的值。另外，如果VARIABLE没有设置，则把DEFAULT的值赋予它
${VARIABLE:+VALUE}	如果VARIABLE被设置，则这种表示形式返回VALUE；否则，返回一个空串
${# VARIABLE}	这种表示形式返回VARIABLE值的长度，除非VARIABLE是* 或者@在为*或者@的特殊情况下，则返回$@所表示的元素的个数。要记住，$ @保存传给该脚本的参数清单
${VARIABLE:?MESSAGE}	如果VARIABLE没有值，则这种表示形式返回MESSAGE的值。Shell也显示出VARIABLE的名字，所以这种形式对捕获得错误很有用

4.2.4 注意：

4.2.4.1 使用${VALIABLE:?MESSAGE},如果发现此变量此时没有值，则脚本停止运行并显示行号和变量名称。 主要用于调试。

4.2.4.2

5 位置变量

5.1 使用$1,$2,$3…$9,${10},${11}…来代表输入的参数。其中$0代表被执行的命令或者脚本的名字。$1,$2…代表输入的第1,2…个参数

5.2 例子：

# cat count.sh#!/bin/sh

A=$1 # 将位置$1的数值读入，并赋给变量A

B=$2 # 将位置$2的数值读入，并赋给变量B

C=$[$A+$B] # 将变量A与B的值相加，将结果赋给C

echo $C # 显示C的数值

结果：

# ./count.sh 3 6

9

# ./count.sh 34 28

62

5.3 $@和$*代表参数的列表，$#代表参数的数量 （不知道$@和$*之间的差别）

6 运算符和优先级

Shell运算符和它们的优先级顺序

级别	运算符	说明
13	-, +	单目负、单目正
12	!, ~	逻辑非、按位取反或补码
11	* , / , %	乘、除、取模
10	+, -	加、减
9	<< , >>	按位左移、按位右移
8	< =, > =, < , >	小于或等于、大于或等于、小于、大于
7	= = , ! =	等于、不等于
6	&	按位与
5	^	按位异或
4	|	按位或
3	&&	逻辑与
2	| |	逻辑或
1	=, + =, - =, * =, /=, % =, & =, ^ =, | =, << =, >> =	赋值、运算且赋值

7 source / export / let / unset

7.1 source

7.1.1 正常情况下，脚本中执行的参数设置只能影响到shell脚本本身的执行环境，不能影响到调用此shell的脚本。

7.1.2 使用source命令执行脚本，可以让脚本影响到父shell的环境（即调用此shell的当前shell）。

7.1.3 例如：source env.sh

7.2 export

7.2.1 在bash下，使用export建立环境变量后，会影响到子shell脚本和当前shell的环境变量

7.3 unset

7.3.1 删除环境变量

7.3.2 i.e.

#export newval=1

#echo $newval

1

#unset newval

#echo $newval

(ß此处为空行,newval已经被删除)

7.4 let

7.4.1 在bash中只用此命令可以建立一个临时的变量，此变量不会影响到子shell

8 逻辑判断

8.1 if

8.1.1 单格式与嵌套

if 条件表达式

then #当条件为真时执行以下语句

命令列表

else #为假时执行以下语句

命令列表

fi

if　语句也可以嵌套使用

if 条件表达式1

then

if 条件表达式2

then

命令列表

else

if 条件表达式3

then

命令列表

else

命令列表

fi

fi

else

命令列表

fi

8.1.2 多分支格式

if test -f "$1"

then

lpr $1

elif test -d "$1" #elif　同else if

then

(cd $1;lpr $1)

else

echo "$1不是文件或目录"

fi

8.2 case

8.2.1 格式

case $newval in

1) #这里是可能值1

echo 1

;; #表示第一个分支结束

2) #这里是可能值 2

echo 2

;; #第二个分支结束

*) #表示其他可能值，必须在最后，否则他后面的语句无法执行

echo unkown

esac #case 语句结束

8.2.2

8.3 while /until

8.3.1 格式

while 表达式

do

命令列表

done

8.3.2 例如：

Sum=0

i=0

while true #true是系统的关键词 表示真

do

i=`expr $i + 1`

Sum=`expr $Sum + $i`

if [ $i = "100" ]

then

break;

fi

done

echo $i $Sum

最后这个程序显示的是 100 5050

下面将这个程序再改动一下

Sum=0

i=0

while [ $i != "100" ]

do

i=`expr $i + 1`

Sum=`expr $Sum + $i`

done

echo $i $Sum

改动后的程序运算结果和上面是一样 但程序比上面的要简练

在这个循环中还可以以until做为测试条件 它正好与while测试的条件相反,也就是当条件为假时将继续执行循环体内的语句,否则就退出循环体,下面还用这个例子.

Sum=0

i=0

until [ $i = "100" ]

do

i=`expr $i + 1`

Sum=`expr $Sum + $i`

done

echo $i $Sum

当i不等于100时循环 就是当条件为假时循环,否则就退出,而第一个例子是当i不等于100

时循环,也就是测试条件为真时循环.

8.4 for

8.4.1 枚举用法

8.4.1.1 格式

for 变量 in 名字列表

do

命令列表

done

8.4.1.2 格式

for n in {1..10}

do

echo $n

done

for letter in a b c d e;

do

echo $letter

done

8.4.2 文件用法

8.4.2.1 格式

for file in *

do

echo $file

done

8.4.2.2 例子

for File in a1 a2 a3 a4 a5

do

diff aa/$File bb/$File

done

8.4.3 累加格式

for (( i=1;$i<10;i++))

do

echo $i

done

for(( i=1;$i<10;i=$[$i+1’ ])

do

echo $i

done

8.4.4

8.5 其他循环控制语句

break 命令不执行当前循环体内break下面的语句从当前循环退出.

continue 命令是程序在本循体内忽略下面的语句,从循环头开始执行.

8.6 逻辑判断的表达

一、判断文件的属性

格式：-操作符 filename

-e 文件存在返回1， 否则返回0

-r 文件可读返回1,否则返回0

-w 文件可写返回1,否则返回0

-x 文件可执行返回1,否则返回0

-o 文件属于用户本人返回1, 否则返回0

-z 文件长度为0返回1, 否则返回0.

-f 文件为普通文件返回1, 否则返回0

-d 文件为目录文件时返回1, 否则返回0

二、测试字符串

字符串1 = 字符串2　当两个字串相等时为真

字符串1 != 字符串2 当两个字串不等时为真

-n 字符串　 　　　 当字符串的长度大于0时为真

-z 字符串　　　　　 当字符串的长度为0时为真

字符串　　　　　　 当串字符串为非空时为真

三、测试两个整数关系

数字1 -eq 数字2　　　　 两数相等为真

数字1 -ne 数字2　　　　 两数不等为真

数字1 -gt 数字2　　　　 数字1大于数字2为真

数字1 -ge 数字2 　　　 数字1大于等于数字2为真

数字1 -lt 数字2　　　　 数字1小于数字2为真

数字1 -le 数字2　　　　 数字1小于等于数字2为真

四、逻辑测试

-a 　 　　　　　 与

-o　　　　　　　 或

!　　　　　　　　非

9 shell中的表达式

9.1 shell 输出重定向

9.1.1 管道 |

就管道符前的命令的输出作为管道符后的命令的输入。

ls | grep ‘.txt’

将ls的输出作为grep 的输入。 grep从输入中找出所有包含.txt的行。

9.1.2 输出 >

将右尖括号前的命令的输入重定向到尖括号后的文件中。

例如：

ls *.sh > list.txt

将当前目录下所有末尾名为sh的文件的列表写入到list.txt

9.1.3 输入 <

将左箭头后面的文件作为左箭头前的命令的输入。

例如：

grep “a” < test.sh

将test.sh中找到所有包含a的行

9.1.4 错误输出重定向

默认bash有3个标准输入输出设备。

0 标准输入

1 标准输出

2错误输出

如果执行脚本的时候发生错误，会输出到2上。

要想就将错误的输出也输出在标准输出上，需要重定向。

例如：

./test.sh > a.log 2>&1

后面2>&1就是将标准错误的输出重定向到标准输出上。

9.2 tee

9.2.1 将此命令的输入分叉，一支输出到屏幕一支可以重定向到其他位置。

例如： ./test.sh | tee >a.txt 2>&1

运行test.sh，通过tee输出到a.txt，同时屏幕上可以看到输出。并且将错误输出重定向到标准输出( 2>&1 )

9.3 cpio

9.3.1 文件或目录打包

9.3.1.1 含子目录打包

　　find . -name '*.sh' | cpio -o > shell.cpio

　　将当前目录及其子目录下的sh文件打包成一个文件库为shell.cpio。　

9.3.1.2 不含子目录的打包

ls *.sh | cpio -o > shell.cpio

　　将当前目录下的sh文件(不含子目录)打包成一个文件库为shell.cpio。　

9.3.2 　压缩

文件打包完成后,即可用Unix中的compress命令（/usr/bin下）压缩打包文件。对一般的文本文件,压缩率较高,可达81％。

例如：compress shell.cpio则将文件库压缩为shell.cpio.Z（自动添加.Z并删除shell.cpio ）。　

9.3.3 　解压

uncompress shell.cpio.Z则自动还原为shell.cpio。　

9.3.4 　解包展开

将按原目录结构解包展开到当前所在目录下。若以相对路径打包的,当解包展开时,也是以相对路径存放展开的文件数据;若以绝对路径打包的,当解包展开时,也是以绝对路径存放展开的文件数据。因此注意若为相对路径,应先进入相应的目录下再展开。　

　cd /u1

　cpio –id < shell.cpio 解压到当期目录。　

　cpio –iud < shell.cpio则文件若存在将被覆盖,即强制覆盖。　

　cpio –id < shell.cpio env.sh 解压缩env.sh

9.3.5 　显示包内的文件

　　cpio –it < shell.cpio 　

9.4 exec

9.4.1 将此命令后的参数作为命令在当前的shell中执行，当前的shell或者脚本不在执行。

例如： exec ls

当前进程替换为ls,执行结束后就退出了。

例如：在a.sh 中包含

exec b.sh 则当a.sh 执行到此句后，被b.sh替换，a.sh中此句后的语句不会再被执行。

9.5 fork

9.5.1 将此命令的参数，新建一个进程来执行

例如：在a.sh 中包含

fork b.sh 则当a.sh 执行到此句后，被b.sh替换，a.sh中此句后的语句继续执行。b.sh在新的进程中同时执行。

9.6 expr

9.6.1 expr argument operator argument

9.6.2 一般用于整数的运算。 例如：

#set newval=1

#echo $newval

1

#set newval=`expr $newval + 1`

#echo $newval

2

#set newval=$newval+1

#echo $newval

2+1

9.7 test

9.7.1 测试，通常用在需要判断的语句后面，例如：if,while,等等。

9.7.2 很多时候可以和中括号[]互换，我不知道区别是什么。

9.7.3 例子：

i=1

if test”$ i” == “1”

then

echo true

else

echo false

fi

9.8 exit

退出当前的shell，执行结果可以在shell中用$?查看

例如：exit 2

9.9 read

从标准输入读取数据。

例：

$ read var1 var2 var3

Hello my friends

$ echo $var1 $var2 $var3

Hello my friends

$ echo $var1

Hello

9.10 shift

9.10.1 每次调用的时候，将参数列表中的第一个参数去掉。这样可以循环得到第一个参数。

9.10.2 例子

#cat t.sh

sum=0

until [ $# -eq 0 ]

do

echo $*

sum=`expr $sum + $1`

shift

done

echo result is: $sum

#./t.sh 1 2 3

1 2 3

2 3

3

10 附件一：例子脚本

10.1 脚本1

10.2

11 附件二：Linux 易被遗漏的命令解析

11.1 grep

11.1.1 grep ‘string’ filename

11.1.1.1e.i.: grep ‘list’ mytxt.txt 在mytxt.txt中寻找包含list字符串的所有行

11.1.2 “-v” : 相反的。 即不包含字符串。

11.1.2.1e.i.: grep –v ‘list’ mytxt.txt

11.1.3 cat mytxt | grep ‘list’

将cat mytxt作为源， 从中查找包含list字符串的行

11.2 find

11.2.1 -atime n ： 指查找系统中最后n*24小时访问的文件；

11.2.2 -ctime n ： 指查找系统中最后n*24小时被改变状态的文件；

11.2.3 -mtime n ： 指查找系统中最后n*24小时被修改的文件。

11.2.4 在当前目录下(包含子目录)，查找所有txt文件并找出含有字符串"bin"的行

find ./ -name "*.txt" -exec grep "bin" {} \;

11.2.5 在当前目录下(包含子目录)，删除所有txt文件

find ./ -name "*.txt" -exec rm {} \;

11.3 du

11.3.1 显示文件的大小

11.3.2 i.e.

#du *.txt

1230 myfile1.txt

456 myfile2.txt

11.4 awk

11.4.1 提取输入中的某个参数

11.4.2 i.e. 提取输入中每一行的第一个参数

#echo `du *.txt | awk ‘{print $1}’`

1230 456

提取子字符串

#echo `du *.bin | awk '{print substr($1,2,3)}'`

11.5 前后台运行

11.5.1 将某个程序在后台启动起来，只需要在命令的最后加上 & 符号。

例如： ./test.sh &

11.5.2 将当前正在运行的程序切换到后台

11.5.2.1当按下^z的时候，当前的应用程序就会切换到后台，但是此时的状态是停止的状态。

11.5.2.2使用jobs命令可以看到当前在后台运行的程序的列表。

例如：jobs

[1]+ stopped top

[2]+stopped find | grep *.txt > a.log

11.5.2.3使用bg命令可以将某个后台程序继续运行。

#bg %2

#jobs

[1]+ stopped top

[2]+ Running find | grep *.txt > a.log

11.5.3 将后台运行的程序切回到前台

#fg %2

将find 命令切回到前台

11.6 shell的执行选项

-n 测试shell script语法结构，只读取shell script但不执行

-x 进入跟踪方式，显示所执行的每一条命令，用于调度

-a Tag all variables for export

-c "string" 从strings中读取命令

-e 非交互方式

-f 关闭shell文件名产生功能

-h locate and remember functions as defind

-i 交互方式

-k 从环境变量中读取命令的参数

-r 限制方式

-s 从标准输入读取命令

-t 执行命令后退出(shell exits)

-u 在替换中如使用未定义变量为错误

-v verbose,显示shell输入行

11.7 alias

建立别名

alias dir ls

11.8 xargs

执行本命令的第一个参数，并将xargs的输入作为被执行命令的参数

例如：

find . -name '*.c' | xargs cat

将本目录及其子目录下所有的C文件使用cat命令显示其内容。

12 附件三：Bash中影响环境变量的命令

Shell有若干以变量为工作对象的命令，其中有些命令似乎重复了。例如，可以用declare、export和typeset命令来创建全局（或转出）的变量。typeset命令是declare的同义词。

Declare 命令

语法：
declare [options] [name [= value]]

摘要：
用于显示或设置变量。
declare命令使用四个选项：
-f 只显示函数名
-r 创建只读变量。只读变量不能被赋予新值或取消设置，除非使用declare或者typeset命令
-x 创建转出（exported）变量
-i 创建整数变量。如果我们想给一个整数变量赋予文本值，实际上是赋予0使用+ 代替-，可以颠倒选项的含义。

如果没有使用参数，则declare显示当前已定义变量和函数的列表。让我们关注一下-r选项：

$ declare –r title=" paradise Lost"
$ title = " Xenogenesis"
bash: title: read-only variable
$ declare title= " Xenogenesis"
$ echo $title
Xecogenesis
$ typeset title = " The Longing Ring”
$ echo $title
The Longing Ring

这个示例表明，只有declare或typeset命令可以修改只读变量的值。

export命令

语法：
export [options] [name [= value]]
摘要：
用于创建传给子Shell的变量。
export命令使用四个选项：
-- 表明选项结束。所有后续参数都是实参
-f 表明在“名-值”对中的名字是函数名
-n 把全局变量转换成局部变量。换句话说，命名的变量不再传给子Shell
-p 显示全局变量列表

如果没有用参数，则假定是一个-p参数，并且显示出全局变量的列表：

$ export
declare –x ENV = "/home/medined/ . bashrc"
declare –x HISTFILESIZE = "1000"
…
declare –xi numPages = "314"
declare –xr title = "The Longing Ring"
declare –xri numChapters = "32"

这种显示的一个有趣的特性是，它告诉我们哪些变量只能是整数、是只读的，或者二者皆可。

let命令

语法：
let expression
摘要：
用于求整数表达式的值。

let命令计算整数表达式的值。它通常用来增加计数器变量的值，如例5-9所示。

例5-9 let——使用let命令
# ! /bin/bash
count=1
for element in $@
do
echo " $element is element $count"
let count+=1
done

下面是这个脚本运行结果示例：
$ chmod + x let
$ . /let one two three
one is element 1
two is element 2
three is element 3

注意：如果我们习惯在表达式中使用空格，那么要用双引号把表达式括起来，如：
let "count + =1"
否则会导致语句错误。

local 命令

语法：
local [name [= value]]
摘要：
用于创建不能传给子Shell的变量。这个命令仅在过程内部有效。

简单说来，local命令创建的变量不能被子Shell存取。因此，只能在函数内部使用local命令。我们可以在命令行或脚本中使用“变量=值”这种形式的赋值命令。如果使用local时不带实参，那么当前已定义的局部变量列表就送往标准输出显示。

readonly命令

语法：
readonly [options] [name[ = value]]
摘要：
用于显示或者设置只读变量。
Readonly命令使用两个选项：
-- 表明选项结束。所有后续参数都是实参
-f 创建只读函数

如果没有用参数，则readonly显示当前已定义的只读变量和函数的列表。

set命令

语法：
set [--abefhkmnptuvxidCHP] [-o option] [name [= value]]
摘要：
用于设置或者重置各种Shell选项。

set 命令可实现很多不同的功能——并非其中所有的功能都与变量有关。由于本节的其他命令重复了通过set命令可用的那些变量选项，所以这里对set命令不做详细说明。

shift命令

语法
shift

摘要：
用于移动位置变量。

shift命令调整位置变量，使$3的值赋予$2，而$2的值赋予$1。当执行shift命令时，这种波动作用影响到所定义的各个位置变量。往往使用shift命令来检查过程参数的特定值——如为选项设置标志变量时。

typeset命令

语法：
typeset [options] [name [= value]]
摘要：
用于显示或者设置变量。

typeset 命令是declare命令的同义词。

unset命令

语法：
unset [options] name [name …]
摘要：
用于取消变量定义。
unset命令使用两个选项：
-- 表明选项结束，所有后续参数都是实参
-f 创建只读函数

unset命令从Shell环境中删除指定的变量和函数。注意，不能取消对PATH、IFS、PPID、PS1、PS2、UID和EUID的设置。如果我们取消RANDOM、SECONDS、LINENO或HISTCMD等变量的设置，它们就失去特有属性。