shell编程速查手册

分类：Bash作者：佚名

Shell编程速查手册

https://blog.atime.me/note/shell-scripting-summary.html

总结一下日常Shell脚本里常用的知识，忘记时方便查阅。

常见的shell

常见的Linux发行版里，默认的shell一般是dash(sh)或bash，不同的shell对脚本的支持也各不相同。若无特殊说明，以下shell知识都是基于Ubuntu 14.04 x86_64系统上的bash 4.3。

Shell编程书籍

只看过Advanced Bash-Scripting Guide，简称ABS。感觉这本电子书内容详尽，例子很多，作者维护地也很积极。

以下只总结一些关键知识点。

变量

变量赋值

赋值操作符左右不能有空白字符。

a=1024# 清空变量a=unset a# 变量清空后，在做计算时为0let "b = 100 / (a + 2)"echo $b# 50

${} $() $(())

${ls}和$ls一样，都是取变量ls的值，$(ls)则表示执行命令ls。

$(( e ))则返回表达式e的值，见下文的算术操作。

假设当前目录下有两个文件fileA和fileB，下同。

ls=1024echo $ls# 1024echo ${ls}# 1024echo $(ls)# fileA fileBecho `ls`# fileA fileBecho $(( 1 + 2 ))# 3

间接引用

以上变量赋值称为直接引用，例如

a="b"echo ${a}# b

间接引用其实就是获取变量的值的值，在上面的例子里就是变量b的值，可以使用${!a}来获取。

a="b"b=2echo ${!a}# 2

弱引用 vs 强引用

双引号和单引号的区别。

a=1024echo "$a"# 1024$ echo '$a'# $a

双引号还能在echo的时候保留变量里的换行符。

a=`ls -1`echo $a# 输出里的换行符变成了空格# fileA fileBecho "$a"# fileA# fileB

特殊变量

见特殊变量。

true和false

true和false命令的作用就类似c语言里的true和false关键字。

数组

bash支持一维数组

a=(1 2 3 4 55)echo ${a[0]}# 1echo ${a[4]}# 5echo ${a[100]}## 获取全部数组元素echo ${a[*]}# 1 2 3 4 5echo ${a[@]}# 1 2 3 4 5# 获取长度echo ${#a[4]}# 2echo ${#a[*]}# 5echo ${#a[@]}# 5

需要注意的几点

  • 数组越界不返回（null）

  • ${arr[*]}和${arr[@]}返回全部元素

  • ${#arr[N]}返回对应元素(或全部元素)的字符串长度

算术操作

简单的整数计算可以通过bash内置的let,(())来实现，详细文档可参考Shell Arithmetic。

(( a = (1 + 101) / 3 ))let "a = (1 + 101) / 3"

复杂的数学计算或浮点数计算可以使用bc工具，见下文。

字符串操作

需要注意的是，shell是弱类型的。

注: str=string,pat=pattern,rep=replacement

  • 字符串替换:${str/pat/rep}，${s//pat/rep},${s/#pat/rep},${s/%pat/rep}

    a="hello world"b=${a/world/Tom}echo $b# hello Tom# 全部替换a="aaaa"echo ${a//a/b}# bbbb# 只替换头部a="123456"echo ${a/#123/ABC}# ABC456echo ${a/#456/ABC}# 123456# 只替换尾部a="123456"echo ${a/%123/ABC}# 123456echo ${a/%456/ABC}# 123ABC

  • 获取字符串长度:${#str}

    a="hello world"echo ${#a}# 11

  • 提取字串:${str:position:length}

    a="123456"echo ${a:1:3}# 234

  • 删除字串

    例子

    a="Good morning,Tom"echo ${a#G* }# morning,Tomecho ${a##G* }# Tomecho ${a%o*m}# Good morning,Techo ${a%%o*m}# G

    这里的pattern仅支持有限的正则表达式操作，见模式匹配。

    • ${s#pat}: 从开头删除最短的匹配

    • ${s##pat}: 从开头删除最长的匹配

    • ${s%pat}: 从结尾删除最短的匹配

    • ${s%%pat}: 从结尾删除最长的匹配

条件表达式

常用于if和while语句中，退出状态为0则表示true，不为0表示false。也可单独使用。

[ vs [[

bash支持[内置命令(非/usr/bin/[1)和[[关键字来构造条件表达式，[和test内置命令的效果是一样的；[[构造的表达式类似c语言，相对更直观一些，支持的操作符也更多一些。

[支持的比较操作符

  • 数字比较

    • -eq: 相等(equal)，[ $a -eq $b ]

    • -ne: 不相等(not equal)

    • -gt: 大于(greater than)

    • -lt: 小于(less than)

    • -ge: 大于等于(greater than or equal to)

    • -le: 小于等于(less than or equal to)

  • 字符串比较，进行字符串比较的时候尽量带上引号

    • =: 相等，[[ "$a" = "$b" ]]，注意等号两边必须保留空格。

    • ==: 相等， 在[和[[中表现不同2

    • !=: 不相等

    • <: 小于，按字典序比较

    • >: 大于，按字典序比较

    • -z: 字符串是null("")，即长度为0

    • -n: 字符串不是null，此时必须将变量"引"起来：[ -n "$str" ]

  • 常用的文件比较，所有的文件操作符见ABS7.2. File test operators

  • 其他

    • !: 逻辑非

    • -a: 逻辑与，类似于c语言的&，每个后续的表达式都要比较

    • -o: 逻辑或，类似于c语言的|，每个后续的表达式都要比较

[[支持的比较操作符

  • 所有[中支持的操作符

  • 扩展的数字比较

    • <: 小于

    • >: 大于

    • <=: 小于等于

    • >=: 大于等于

  • 其他扩展

    • &&: 逻辑与，类似于c语言的&&，遇到true便退出，不再比较后续的表达式

    • ||: 逻辑或，类似于c语言的||，遇到false便退出，不再比较后续的表达式

操作符优先级

不要依赖优先级，依赖括号()

下面由高到低列出常见的操作符的优先级，全面的优先级表见ABS8.4. Operator Precedence。

  1. ++--自增和自减

  2. !逻辑非

  3. **乘方

  4. */%乘除和取模

  5. +-加减

  6. -z-n一元字符串比较操作符

  7. -e-f-x等一元文件比较操作符

  8. <-lt<=>等二元数字/字符串比较操作符

  9. -nt-ot等二元文件比较操作符

  10. -a&&逻辑与

  11. -o||逻辑或

  12. =赋值操作符

变量的真假

  • 未初始化，被赋值为null或被unset的变量在条件表达式里都是假。

    a=a2="" # 也是nullb=1; unset bif [ ! $a ]; then echo "a is false"; fi# a is falseif [ ! $a2 ]; then echo "a2 is false"; fi# a2 is falseif [ ! $b ]; then echo "b is false"; fi# b is falseif [ ! $c ]; then echo "c is false"; fi# c is false

  • 其他正常初始化的变量都是真

    a=1b=0c=-1d="false"if [ $a ]; then echo "a is true"; fi# a is trueif [ $b ]; then echo "b is true"; fi# b is trueif [ $c ]; then echo "c is true"; fi# c is trueif [ $d ]; then echo "d is true"; fi# d is true

命令列表里的与和或

除了在条件表达式中，bash还支持在条件命令列表里使用&&和||，作用类似c语言里的&&和||。

  • &&: 仅当前一条命令的退出状态为0(true)时才执行下一条命令。

  • ||: 仅当前一条命令的退出状态不为0(false)时才执行下一条命令。

例如

true && echo hello# hello[ 1 -eq 1 ] && echo hello# hellofalse || echo hello# hello

控制语句

if语句

if [condition]; then
  commands...
elif [condition2]; then
  commands...
else
  commands...
fi

  • elif和else都可省略。

  • 支持多个if语句嵌套。

case语句

case的候选项可以使用bash的正则表达式，比如用*来实现c语言里default的功能。

case "$var" in

"$value1")
  commands...
  ;;

"$value2")
  commands...
  ;;

esac

以下代码取自ABS

while [ $# -gt 0 ]; do  # Until you run out of parameters . . .  case "$1" in
    -d|--debug)      DEBUG=1      ;;
    -c|--conf)      CONFFILE="$2"      shift      if [ ! -f $CONFFILE ]; then        echo "Error: Supplied file doesn't exist!"        exit $E_CONFFILE   # File not found error.      fi      ;;  esac  shift    # Check next set of parameters.done

for循环

for arg in [list]
do
  commands...
done

例如

for i in $(seq 5); do  echo $idone

for循环的输出可以pipe到其他命令，例如

for f in $(ls); do  echo $fdone | egrep "\.txt$"

while循环

while [condition]; do
  commands...
done

例如，从标准输入读10次并输出，breakcontinue和c语言里是一样的效果。

i=0limit=10while read value; do  echo $value  let i++  if [ $i -eq $limit ]; then    break  fidone

还可以在条件表达式里使用(())，例如

(( i = 0 ))(( limit = 10 ))while (( i < limit )); do  echo $i  (( i++ ))done# 0# 1# ...# 9

until循环

类似while循环，区别是当条件为false时执行，当条件为true时停止。

until [condition is true]; do
  commands...
done

函数

# 定义
function_name() {
  commands...
}

# 调用
function_name arg1 arg2 ... argN

在函数里用local定义的变量只能在函数体内使用。

函数参数

  • 函数体内，使用位置参数$1,$2等来依此获取传入的参数。

  • 在函数体内使用shift命令对函数的参数也有效。

  • 使用$#来获取参数的个数。

函数返回值

  • 可以使用return来终止函数并返回数据。

  • 如果没有return语句，默认使用最后一条命令的退出状态来当作返回值。

  • 可以使用$?来获取函数的返回值。

  • 函数体内输入到标准输出的数据可以赋值给变量。

例子

一个比较脑惨的例子

show_params() {  while [ "$#" -ne 0 ]; do    echo $1    shift  done  return 0}nums=$(show_params 1 2 3)if [ "$?" -eq 0 ]; then  echo "show_params function succeeded:" $numselse  echo "show_params function Failed"fi# show_params function succeeded: 1 2 3

其他技巧

搜索子字符串

检查一个字符串$source是否包含某个字串$target，最方便的方法是

if [[ ${source} == *${target}* ]]; then
  ...
fi

其他工具

未完成

expr

字符串操作

seq

bc

sed

awk

参考资料

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 dio@foxmail.com 举报，一经查实，本站将立刻删除。

相关推荐

openwrt临时封禁ip
用的openwrt路由器，家里宽带申请了动态公网ip，为了方便把2280端口映射到公网，发现经常被暴力破解，自己写了个临时封禁ip功能的脚本，实现5分钟内同一个ip登录密码错误10次就封禁这个ip5分钟，并且进行邮件通知使用步骤openwrt为19.07.03版本，其他版本没有测试过安装bashmsmtpopkg
使用bash脚本并行运行多个程序
#!/bin/bashcommand1&command2&wait从Shell脚本并行运行多个程序–杨河老李(kviccn.github.io)
三步将Mac系统默认PHP版本切换为MAMP等扩展环境中的PHP版本
1.先查出MAMP下面集成的PHP版本cd/Applications/MAMP/bin/phpls-ls 2.编辑修改.bash_profile文件（没有.bash_profile文件的情况下回自动创建）sudovim~/.bash_profile在文件的最后输入以下信息，然后保存退出exportPATH="/Applications/MAMP/bin/php/php7.2.20/b
ubuntu16.04中文乱码问题解决
1、先输入locale-a，查看一下现在已安装的语言2、若不存在如zh_CN之类的语言包，进行中文语言包装:apt-getinstalllanguage-pack-zh-hans3、安装好后我们可以进行临时修改：然后添加中文支持: locale-genzh_CN.UTF-8临时修改> export LC_ALL='zh_CN.utf8'> locale永久
Bash Perl Tcl syntax diff
BashPerlTclsyntaxdiff1.进制数表示Languagebinaryoctalhexadecimalbash2#[0~1]0[0~7]0x[0~f]or0X[0~f]perl0b[0~1]0[0~7]0x[0~f]tcl0b[0~1]0o[0~7]0x[0~f]bashdifferentbaserepresntationreference2.StringlengthLanguageStr
k8s命令补全方法
正常安装了k8s后，使用kubect工具后接的命令不能直接tab补全命令补全方法：yum-yinstallbash-completionsource/usr/share/bash-completion/bash_completionsource<(kubectlcompletionbash)echo"source<(kubectlcompletionbash)">>~/.bashrc 
linux应用重启脚本
参考这里启动jar包shell脚本修改过来的#!/bin/bash#默认应用名称defaultAppName='./gadmin'appName=''if[[$1&&$1!=0]]thenappName=$1elseappName=$defaultAppNamefiecho">>>>>>本次重启的应用：$appName<
SHELL训练营--day19_shell练习36-40
#一个数字的行#!/bin/bashwhilereadlinedon=`echo$line|sed's/[^0-9]//g'|wc-L`if[$n-eq1]thenecho$linefidone<1.txt#日志切割归档#!/bin/bashcd/data/logslog=1.logmv_log(){[-f$1]&&mv$1$2
SHELL训练营--day23_shell练习56-60
#文件增加内容#!/bin/bashn=0cat1.txt|whilereadlinedon=[$n+1]if[$n-eq5]thenecho$lineecho-e"#Thisisatestfile.\n#Testinsertlineintothisfile."elseecho$linefidone#备份/etc目录#
linux 用户异常shell-》ksh
# su - oraclesu: /usr/bin/ksh: No such file or directory根据报错信息：显示无法找到文件 /usr/bin/ksh果然没有该文件，但是发现存在文件/bin/ksh,于是创建了一个软连接，可以规避问题，可以成功切换到用户下，但无法执行系统自带命令。$. .bash_profile-ksh: .: .b
Linux常用命令——history
history显示历史指令记录内容,下达历史纪录中的指令主要的使用方法如果你想禁用history，可以将HISTSIZE设置为0：#exportHISTSIZE=0使用HISTIGNORE忽略历史中的特定命令下面的例子，将忽略pwd、ls、ls-ltr等命令：#exportHISTIGNORE=”pwd:ls:ls-ltr:”使用HIS
bash基础特性及基础命令
一.命令历史  1.history环境变量：    HISTSIZE:输出的命令历史条数,如history的记录数    HISTFILESIZE:~/.bash_history保存的命令历史记录数    HISTFILLE:历史记录的文件路径    HISTCONTROL:     ignorespace:忽略以空格开头的命令
Linux下几种反弹Shell方法的总结与理解
之前在网上看到很多师傅们总结的linux反弹shell的一些方法，为了更熟练的去运用这些技术，于是自己花精力查了很多资料去理解这些命令的含义，将研究的成果记录在这里，所谓的反弹shell，指的是我们在自己的机器上开启监听，然后在被攻击者的机器上发送连接请求去连接我们的机器，将被攻击者的she
Bash命令行 bash &&gt; &gt;&
BashOne-LinersExplained,PartI:Workingwithfileshttps://catonmat.net/bash-one-liners-explained-part-oneBashOne-LinersExplained,PartII:Workingwithstringshttps://catonmat.net/bash-one-liners-explained-part-twoBashOne-LinersExplained,PartII
Shell基础知识三
Shell中变量的作用域：在当前Shell会话中使用，全局变量。在函数内部使用，局部变量。可以在其他Shell会话中使用，环境变量。局部变量：默认情况下函数内的变量也是全局变量#!/bin/bashfunctionfunc(){a=99}funcecho$a输出>>99为了让全局变量变成局部变量
Linux shell Bash的基本功能3 多命令与管道符
1、多命令顺序执行；  命令1；命令2  多个命令顺序执行，命令之间没有任何逻辑联系&&  命令1&&命令2  逻辑与，当命令1正确执行，才会执行命令2||  命令1||命令2  逻辑或，当命令1执行不正确，才会执行命令2例如：ls;date;cd/home/lsx;pwd;who ddif=输入文件of=输
Shebang(#!)[转]
原博文使用Linux或者unix系统的同学可能都对#!这个符号并不陌生，但是你真的了解它吗？首先，这个符号（#!）的名称，叫做"Shebang"或者"Sha-bang"。Linux执行文件时发现这个格式，会把！后的内容提取出来拼接在脚本文件或路径之前，当作实际执行的命令。 Shebang这个符号通常在Unix系统的脚本
Linux shell Bash的基本功能1
1、历史命令history[选项][历史命令保存文件]选项：-c：  清空历史命令-w：  把缓存中的历史命令写入历史命令保存文件 ~/.bash_historyvim/etc/profile中的Histsize可改存储历史命令数量历史命令的调用使用上、下箭头调用以前的历史命令使用“！n”重复执行第n条历史
Linux 变量的使用
目录1.Shell脚本规范2.Shell脚本执行3.Shell脚本变量3.1环境变量3.1.1自定义环境变量3.1.2显示与取消环境变量3.1.3环境变量初始化与对应文件的生效顺序3.2普通变量3.2.1定义本地变量3.2.2shell调用变量3.2.3grep调用变量3.2.4awk调用变量3.3
whoami,who,w命令详解
   http://www.voidcn.com/blog/wszzdanm/article/p-6145895.html命令功能：显示登录用户的信息命令格式：常用选项：举例：w显示已经登录的用户及正在进行的操作[root@localhost~]#w 11:22:01up4days,21:22, 3users, loadaverage:0.00,0.00,0.00USER  
pythonJavaScriptjavaHTMLPHPreactjsC#AndroidCSSNode.jssqlrpython-3.xMysqLjQueryc++pandasFlutterangularIOSdjangolinuxswifttypescript路由器JSON路由器设置无线路由器h3c华三华三路由器设置华三路由器电脑软件教程arraysdocker软件图文教程Cvue.jslaravelspring-boot