命令中/bin/sh -c 的必要性
$ sudo echo “hahah” >> test.csv
报错：-bash: test.asc: Permission denied
这是因为重定向符号 “>” 和 “>>” 也是 bash 的命令。 sudo 只是让 echo 命令具有了 root 权限，但是没有让 “>” 和 “>>” 命令也具有 root 权限，所以 bash 会认为这两个命令都没有像 test.csv文件写入信息的权限。
解决这一问题的途径有两种。
方法1：
利用 “sh -c” 命令让 bash 将一个字串作为完整的命令来执行，这样就可以将 sudo 的影响范围扩展到整条命令：
$ sudo /bin/sh -c 'echo “hahah” >> test.asc'
方法2：
利用管道和 tee 命令从标准输入中读入信息并将其写入标准输出或文件中：
$ echo “hahah” | sudo tee -a test.asc
注意，tee 命令的 “-a” 选项的作用等同于 “>>” 命令，如果去除该选项，那么 tee 命令的作用就等同于 “>” 命令
Shell $0、$?、$!、$$、$*、$#、$@等用法
$$ Shell本身的PID（ProcessID，即脚本运行的当前进程ID号）
$! Shell最后运行的后台Process的PID(后台运行的最后一个进程的[进程ID]
$? 最后运行的命令的结束代码（返回值）即执行上一个指令的返回值 (显示最后命令的退出状态。0表示没有错误，其他任何值表明有错误)
$$ 显示shell使用的当前选项，与set命令功能相同
$* 所有参数列表。如"$*“用「”」括起来的情况、以"$1 $2 … $n"的形式输出所有参数，此选项参数可超过9个。
$@ 所有参数列表。如"$@“用「”」括起来的情况、以"$1" “2 " … " 2" … "2"…"n” 的形式输出所有参数。
$* 跟$@类似，但是可以当作数组用
$# 添加到Shell的参数个数
$0 Shell本身的文件名
$1～$n 添加到Shell的各参数值。$1是第1参数、$2是第2参数
符号 使用
； 一般情况我们输出完一个命令需要按一个回车，如果你想在一行执行多个命令，中间可以用；号分割 cd /home ; ls
* 表示任意字符（正则）
? 任一个字符
[abc] 列表项之一
[^abc] 对于列表取非 也可以使用范围 [a-z] [0-9] [A-Z](所有字符和数字)
{} 循环列表时用 touch_{1,2,3}时就会建立touch_1,touch_2,touch_3循环出这三个文件，也会用 echo ${ab}c
~ home目录cd ~ （普通通话进入的是/home目录下用户自己的家目录）
$ 提取变量值
`` $() 命令替换touch `date +%F_\`date +%T\`` touch $(date +%F_$(date +%T))
$[] 整数计算 echo $[2+3] - * / % 浮点数用 echo "scale=3; 10/3" | bc -l (bc用于计算的)
\ 转义后面的字符串 echo \\ 输出\ 转义特殊字符，为防止被SHELL解释bash中的特殊字符
"" '' 带空格串 将空格视为串的一部分 echo "abc xyz" echo 'abc xyz'
`` 命令替换 取命令的执行结果
$() 同上，但它弥补了``的嵌套缺陷
@ 无特殊含义
# 注释（一般编程都需要加注释，让其他团队队员对自己写的程序功能了解）
$ 变量取值
$() 命令替换
${} 变量名的范围
% 杀后台经常jobs号，取模运算(大家对取模应该并不陌生)
^ 取非 和 ！雷同
& 用进程后台处理， &&用于逻辑与
* 匹配任意字符串；计算乘法
() 子进程执行
- 减号，区间，cd - 回到上层目录，杀掉当前jobs
_ （下划线）无特殊含义
+ 加号； 杀掉当前jobs（进程）
= 赋值
| 管道，|| 逻辑或
\ 转义 当一些特殊符号如$是一个变量需要转义才不被bash解析
{} 命令列表 {ls;cd /;}
[] 字符通配符，[]也是用于测试命令
： 空命令 真值
； 命令结束符
"" 软引 '' 硬引
< 输入重定向
> 输出重定向
>& 合并2和1输出
, 枚举分隔符
. 当前目录
/ 目录分隔符
? 单个字符
回车 命令执行
shell获取脚本所在的绝对位置
script_abs=$(readlink -f "$0")
script_dir=$(dirname $script_abs)
script_dir 就是这个脚本的绝对路径，至于为什么，大家可去搜索readlink及dirname的用法，最关键的就是readlink的使用，它解决了使用软链接的情况下的定位不准的问题， -f (或者 -m) 也不能少。
shell获取当前文件夹路径和文件夹名字
dir_path=$(pwd)
dir_name="${dir_path##*/}"
echo $dir_path
echo $dir_name
#当前脚本绝对路径
script_abs=$(readlink -f "$0")
#当前脚本所在目录
script_dir=$(dirname ${script_abs})
#当前脚本所在目录的上层目录
script_dir_updir=$(dirname ${script_dir})
Shell basename命令
（1）basename /usr/bin/sort 输出 sort
（2）basename include/stdio.h .h 输出 stdio
shell退出前执行动作|shell对ctrl+c等信号反应
trap "do something" sigspec：收到sigspec指定的信号时，do some thing后，继续执行后续命令。
trap "echo 123" EXIT #在shell退出前执行trap设置的命令 "echo 123"
trap "echo 123" RETURN #在函数返回时，或者.和source执行其他脚本返回时，执行
trap "echo 123" DEBUG #在任何命令执行前执行"echo 123"
- EXIT：在shell退出前执行trap设置的命令，也可以指定为0
- RETURN：在函数返回时，或者
.和source执行其他脚本返回时，执行trap设置的命令
- DEBUG：在任何命令执行前执行trap设置的命令，但对于函数仅在函数的第一条命令前执行一次
trap的格式如下，功能就是设置信号处理行为
trap [-lp] [[arg] sigspec ...]
arg可以是shell命令或者自定义函数sigspec可以是以下的一个或多个-
- 定义在<signal.h>中的信号名或者数值。信号名的大小写不敏感，SIG这个前缀也是可选的。以下的命令的效果都是一样的
trap "echo 123" SIGINT
trap "echo 123" INT
trap "echo 123" 2
trap "echo 123" int
trap "echo 123" Inttrap -l：列出所有信号的数值和名字，类似于kill -l
[root@localhost ~]# trap -l
1) SIGHUP 2) SIGINT 3) SIGQUIT 4) SIGILL 5) SIGTRAP
6) SIGABRT 7) SIGBUS 8) SIGFPE 9) SIGKILL 10) SIGUSR1
11) SIGSEGV 12) SIGUSR2 13) SIGPIPE 14) SIGALRM 15) SIGTERM
16) SIGSTKFLT 17) SIGCHLD 18) SIGCONT 19) SIGSTOP 20) SIGTSTP
21) SIGTTIN 22) SIGTTOU 23) SIGURG 24) SIGXCPU 25) SIGXFSZ
26) SIGVTALRM 27) SIGPROF 28) SIGWINCH 29) SIGIO 30) SIGPWR
31) SIGSYS 34) SIGRTMIN 35) SIGRTMIN+1 36) SIGRTMIN+2 37) SIGRTMIN+3
38) SIGRTMIN+4 39) SIGRTMIN+5 40) SIGRTMIN+6 41) SIGRTMIN+7 42) SIGRTMIN+8
43) SIGRTMIN+9 44) SIGRTMIN+10 45) SIGRTMIN+11 46) SIGRTMIN+12 47) SIGRTMIN+13
48) SIGRTMIN+14 49) SIGRTMIN+15 50) SIGRTMAX-14 51) SIGRTMAX-13 52) SIGRTMAX-12
53) SIGRTMAX-11 54) SIGRTMAX-10 55) SIGRTMAX-9 56) SIGRTMAX-8 57) SIGRTMAX-7
58) SIGRTMAX-6 59) SIGRTMAX-5 60) SIGRTMAX-4 61) SIGRTMAX-3 62) SIGRTMAX-2
63) SIGRTMAX-1 64) SIGRTMAX
trap -p：列出通过trap设置的信号处理命令。
[root@localhost ~]# trap "echo INT" INT
[root@localhost ~]# trap -p INT
trap -- 'echo INT' SIGINT
想少用\ 那你就用-r
想少用\ 那你就用-r 就不用给(进行转义
空格和格式
先了解下bash中什么时候该用空格，什么时候不该用。
1. 等号赋值两边不能有空格
2. 命令与选项之间需要空格
3. 管道两边空格可有可无
我们来看看常见的问题
1. 赋值时等号两边或者只有左边多了空格
|
1
2
3
4
5
6
7
8
9
10
11
12
|
igi@gentoo ~ $ var1 = testbash : var1: command not foundigi@gentoo ~ $ echo ${var1:?error}bash : var1: errorigi@gentoo ~ $ echo ${var1?error}bash : var1: errorigi@gentoo ~ $ var2 = testbash : var2: command not foundigi@gentoo ~ $ echo ${var2:?error}bash : var2: errorigi@gentoo ~ $ echo ${var2?error}bash : var2: error |
这里我用了bash的变量扩展，${var1:?error}当var1为unset或null(未定义或空)时, 报指定错误; ${var1?error}当var1为unset时，报指定错误。从执行结果来看，如果等号左边有空格，则变量名当成命令执行，结果报command not found，变量没有被赋值
2. 赋值时等号左边没有空格，右边有空格(这种情况有点特别，你会发现两种情况)
|
1
2
3
|
igi@gentoo ~ $ var= testigi@gentoo ~ $ var= nocmdbash : nocmd: command not found |
同样是等号右边有空格，第一条命令没报错，而第二条报错了。
这是因为shell中有这么一种执行命令的方式: var=string command
命令command将得到变量var的值(至于在命令执行后，变量var的值是否保留下来，bash4中没有保留，但我在dash中发现时保留下来的，不同的shell对这个的处理不同), 由于test是个命令，而nocmd不是，所以报了command not found.
|
1
2
3
|
igi@gentoo ~ $ var=newtest eval echo \$varnewtestigi@gentoo ~ $ echo $var |
注意: 这里我使用了eval, 是想避免在第一次解析时$var被替换成空字符串, 不然就会出现下面的情况(下面是错误的测试方法，在echo还没执行时，$var已经被替换成空字符串)
igi@gentoo ~ $ var=newtest echo $var
igi@gentoo ~ $ echo $var
到这里，相信大家都明白了吧， 对于等号赋值，左右两边不可以有空格，虽然右边有空格不一定报错，但那绝对不是你想要的结果。
3. 命令和选项之间必须有空格
这个似乎大家都明白，为何我还这么罗嗦呢？说到这里，不得不提一下一个非常特别的命令: [ 命令(你没看错，是[ ), 也就是test命令(当然bash中，这是个内置命令，但在这里不影响
我们的理解)。或许你会觉得[命令眼熟，没错，我保证你见过它，来看看下面的例子
|
1
2
3
4
5
|
igi@gentoo ~ $ if [ "abc" = "abc" ]; then echo ‘they are the same'; fithey are the sameigi@gentoo ~ $ type -a [[ is a shell builtin[ is /usr/bin/ [ |
想起来了吧？[命令经常用到if判断中，当然也有人喜欢这么写
|
1
2
3
4
5
|
igi@gentoo ~ $ [ "abc" = "cba" ] || echo ‘they are not the same'they are not the sameigi@gentoo ~ $ type -a [[ is a shell builtin[ is /usr/bin/ [ |
[ 命令正名叫test命令，它们两者几乎一样，为什么不是完全一样？来看看这个
|
1
2
3
4
5
6
|
igi@gentoo ~ $ [ "abc" = "cba"bash : [: missing `]‘igi@gentoo ~ $ [ "abc" = "cba" ]igi@gentoo ~ $ test "abc" = "cba" ]bash : test : too many argumentsigi@gentoo ~ $ test "abc" = "cba" |
清晰了吧，用[命令时，你必须给它个尾巴], 用test命令时，就不能加个尾巴。尾巴］是[最后一个参数，不可缺少的参数, 代表[命令的结束
扯了这么多，那到底这个和空格有毛关系？说这些，是先让大家明白: [在shell中是个命令，它左右必须有空格！]是[的最后不可缺少的参数，它两边也需要空格(虽然有些命令的参数能连一起，例如ps, 但［命令不行，它的参数之间必须有空格)。让我们看看关于[常见的错误
a. if 与 [ 之间缺少空格
|
1
2
3
4
5
6
7
8
|
igi@gentoo ~ $ if [ "$HOME" = "/home/igi" ]; then echo 'equal' ; fibash : syntax error near unexpected token ` then 'igi@gentoo ~ $ if [ "$HOME" = "/home/igi" ]; then echo 'equal' ; fibash : syntax error near unexpected token ` then 'igi@gentoo ~ $ if [ "$HOME" = "/home/igi" ]; then echo 'equal' ; fibash : syntax error near unexpected token ` then 'igi@gentoo ~ $ if [ "$HOME" = "/home/igi" ]; then echo 'equal' ; fibash : syntax error near unexpected token ` then ' |
语法分析错误，很明显，if[ 对于bash来说，不知道是什么鬼东西
b. [与后面的参数之间缺少空格
|
1
2
3
4
|
igi@gentoo ~ $ if [ "$HOME" = "/home/igi" ]; then echo 'equal' ; fibash : [ /home/igi : No such file or directoryigi@gentoo ~ $ if [ "$HOME" = "/home/igi" ]; then echo 'equal' ; fibash : [ /home/igi : No such file or directory |
["$HOME" 对于bash来说，也不知道是什么鬼东西
c. [ ] 之间的参数之间缺少空格
|
1
2
3
4
|
igi@gentoo ~ $ if [ "abc" = "abc" ]; then echo 'equal' ; fiequaligi@gentoo ~ $ if [ "abc" = "cba" ]; then echo 'equal' ; fiequal |
第一条命令似乎是对的(实际上是正巧而已)，看看第二条命令"abc" 和 "cba"明显不同，但却判断为相同。这是因为参数之间缺少了空格，被[命令认为内部是个值而已。看看下面的命令，你就会释然
|
1
2
3
4
5
6
|
igi@gentoo ~ $ if [ 0 ]; then echo 'equal' ; fiequaligi@gentoo ~ $ if [ "1" ]; then echo 'equal' ; fiequaligi@gentoo ~ $ if [ "" ]; then echo 'equal' ; fiigi@gentoo ~ $ if [ ]; then echo 'equal' ; fi |
在[ ] 内部，如果只有一个值(那些因为缺少了空格而连一起的也算)，不是空字符串就为真。所以在[ ] 之间的参数，也要两边有空格，而不能堆一起
d. 参数和尾巴]之间缺少空格
这个就不罗嗦了，尾巴]也是[命令的参数，如同上面所讲，参数之间必须有空格
扯了这么多[命令与空格的事，但有些时候，缺了空格却能正确运行, 当然这只是你好运, 一起来看看
|
1
2
3
4
5
|
igi@gentoo ~ $ var= ' abc'igi@gentoo ~ $ if [$var = "abc" ]; then echo 'equal' ; fiequaligi@gentoo ~ $ if [ "$var" = "abc" ]; then echo 'equal' ; fibash : [ abc: command not found |
之前Bash引号那点事提到过，双引号包围起来的是一个整体，而没双引号的时候，字符串前后的空格或制表符都被切开。如果恰巧你遇到了或者你故意要丢弃字符串前后的空格或制表符，那也不是不可能, 但非常不建议你这么写，你的代码将是非常脆弱的。
或者你该加的空格都加了，但还是报错，这也可能和缺少双引号有关。这样的情况很普遍，最后再看看
|
1
2
3
4
5
6
7
8
9
|
igi@gentoo ~ $ var= ''igi@gentoo ~ $ if [ "$var" = "abc" ]; then echo 'equal' ; fiigi@gentoo ~ $ if [ $var = "abc" ]; then echo 'equal' ; fibash : [: =: unary operator expectedigi@gentoo ~ $ dvar= 'a b c'igi@gentoo ~ $ if [ $dvar = "a b c" ]; then echo 'equal' ; fibash : [: too many argumentsigi@gentoo ~ $ if [ "$dvar" = "a b c" ]; then echo 'equal' ; fiequal |
我再罗嗦一次，不要轻易省略双引号。很清楚了吧？如果你还不明白，
请读读Bash引号那点事
最后，对于管道两边可有可无的空格，就不扯淡了，因为没遇到有人对此有疑惑.
#this file compiled with GBK （chinese）
#----------------------------------------------shell 脚本的一些方法说明-------------------
1、.fun文件：在里面定义一些函数，在.sh 脚本中 用 “." 加载后，直接调用里面的函数，如 .db.fun， 可以带参数,函数中的 $1 、$2 ……表示接受的第一个，第二个……参数，
如： create_station_db 20, create_station_db 函数内的$1 就是接收参数20的。
脚本中用到的语法方法：
1、加载统一配置的文件
GLOBAL_CFG_FILE= `find ./ |grep global_config.txt` ：将global_config.txt的路径赋值给GLOBAL_CFG_FILE，注意“`”符号不是单引号
. {GLOBAL_CFG_FILE} #load cfg file ：加载global_config.txt
2、${} 和$()
${NAME} 和$NAME 都是引用替换变量NAME替换的内容，但是${}更好的限定了替换的范围 不然${AB}C 用 $ABC 就容易产生歧义
$(find ./ |grep global_config.txt) 和 `find ./ |grep global_config.txt` 一样的效果，都是执行命令，但是%（）在有些shell下不支持
3、sed -i '/#Begin/,/#End/d'
sed -i '/#Begin/,/#End/d' 就是将#Begin到#End之间内容，包括#Begin和#End都删除
#add '-----here is the content---' to CONF_DIR behind the "[mysql]"
#use command 'sed' to add A behind "pattern" :sed 's/pattern/&A/' filename
用命令'sed'在filename文件内匹配的字符"pattern"后面添加内容A
#!/bin/ash
CONF_DIR="/etc/my.cnf"
sed -i 's/\[mysqld\]/&\n \
wait_timeout=2073600\n \
interactive_timeout=2073600\n \
bulk_insert_buffer_size=16M\n \
max_allowed_packet=16M\n/' /etc/my.cnf
在某行的前一行或后一行添加内容
#匹配行前加
sed -i '/allow /iallow www.' the.conf.file
#匹配行前后
sed -i '/allow /aallow www.' the.conf.file
而在书写的时候为便与区分，往往会在i和a前面加一个反加一个反斜扛 。代码就变成了：
sed -i '/2222222222/a\3333333333' test.txt
sed -i '/2222222222/i\3333333333' test.txt
这就就可以很方便的看出要在某一行前或某一行后加入什么内容 。
4、shell中的if else 语句
注意if 、elif和"[" 之间要有空格
if [ ${SERVER_NAME} == ${HOPE_CLOUD_SERVER_NAME}]; then
cd center_collector
./center_collector &
cd ..elif [ ${SERVER_NAME} == ${HOPE_VIEW_SERVER_NAME}; then
cd station_collector
./station_collector &
cd ..else
fi
#检查是否有某程序在运行
ProcExist=`ps -af|grep "manager_server"|grep -v "grep"` #匹配含manager_server的行，match *manager_server*if [ -n "$ProcExist" ];then #因为里面的程序依赖manager_server所以manager_server启动成功后再启动其他
else
fi
#修改文件名称
rename 'cloud_' '' *
将当前目录下文件名前的“cloud_” 去掉
判断123.txt文件中是否含有单词fail
#!/bin/bash
if cat /test/123.txt | grep fail>/dev/null
then
echo ""
else
echo "yes"
fi
函数返回值的接收
方法1:
function_name arg1 arg2 ...
ret=$?
function test()
{
return 21
}
#调用test函数
test
#得到返回结果
ret=$?
echo "ret:${ret}"
方法2:
ret=`function_name arg1 arg2 ...`
or
ret=$(function_name arg1 arg2 ...)
注意：不是引号。
例如：
function test()
{
echo 23
}
#调用test函数，并得到返回结果
ret=`test`
echo "ret:${ret}"如果函数比较复杂，最好还是用方法1吧，主要是方法2 ret=$(function_name arg1 arg2 ...)的function_name函数内的echo不会打印到屏幕，不方便调试。
单引号‘ ,双引号“
linux中单引号‘ ,双引号“, 反引号 ` `, $, $(), ${}与变量_linux单引号中引用变量_
单引号''剥夺了所有字符的特殊含义，单引号''内就变成了单纯的字符，。
双引号""则对于双引号""内的参数替换($)和命令替换(``)是个例外。
比如说 n=3
echo '$n'
结果就是$n
改成双引号 echo "$n"，结果就是3
shell 书写规范
变量的时候最好加上双引号
var="*.sh"
模拟main
#!/usr/bin/env bash
func1(){
#do sth
}
func2(){
#do sth
}
main(){
func1
func2
}
main "$@" 当前脚本的路径
script_dir=$(cd $(dirname $0) && pwd)
script_dir=$(dirname $(readlink -f $0 )) #尽量使用[[ ]]来代替[ ]
#5.会使用trap捕获信号，并在接受到终止信号时执行一些收尾工作
#6.使用mktemp生成临时文件或文件夹
#10.不要处理ls后的数据(比如ls -l | awk '{ print $8 }')， # ls的结果非常不确定，并且平台有关
静态检查工具
shellcheck的工具，开源在github上，有8K多的star
多行注释
多行注释，使用冒号“:”配合here document可实现多行注释，例如：
:<<BLOCK
……注释内容
BLOCK
