一、shell概述
shell是一个命令行解释器,他接收应用程序/用户命令,然后调用操作系统内核完成相应操作。
shell是一个功能强大的编程语言,具有易编写、易调试灵活性强等特点
二、shell解析器
Linux提供的shell解析器有:
1 [root@H__D temp]# cat /etc/shells 2 /bin/sh 3 /bin/bash 4 /usr/bin/sh 5 /usr/bin/bash
bash和sh的关系:
1 [root@H__D temp]# ll /bin/ | grep bash 2 -rwxr-xr-x 1 root root 964600 Aug 8 2019 bash 3 lrwxrwxrwx 1 root root 10 Apr 5 2020 bashbug -> bashbug-64 4 -rwxr-xr-x 1 root root 6964 Aug 8 2019 bashbug-64 5 lrwxrwxrwx 1 root root 4 Apr 5 2020 sh -> bash
? Centos默认的解析器为bash
1 [root@H__D temp]# echo $SHELL 2 /bin/bash
三、shell脚本入门
格式:? 开头必须以 #!/bin/bash 开头
编写简单实例:
1 [root@hadoop101 tmp]# vim hello.sh 2 3 #!/bin/bash 4 5 echo "Hello World!"
赋予执行权限:
1 [root@hadoop101 tmp]# chmod +x hello.sh
执行结果为:
1 [root@hadoop101 tmp]# ./hello.sh 2 Hello World! 3 [root@hadoop101 tmp]# sh hello.sh 4 Hello World!
脚本的常用执行方式为:
1.采用bash 或 sh+脚本的相对路径或绝对路径 (不用赋予脚本 +x 的权限)
1 [root@hadoop101 tmp]# bash hello.sh 2 Hello World! 3 [root@hadoop101 tmp]# bash /opt/module/tmp/hello.sh 4 Hello World! 5 [root@hadoop101 tmp]# sh hello.sh 6 Hello World! 7 [root@hadoop101 tmp]# sh /opt/module/tmp/hello.sh 8 Hello World!
? 2.采用输入脚本的绝对路径或者相对路径执行脚本(必须赋予可执行权限 +x)
1 [root@hadoop101 tmp]# chmod +x hello.sh
1 [root@hadoop101 tmp]# ./hello.sh 2 Hello World! 3 [root@hadoop101 tmp]# /opt/module/tmp/hello.sh 4 Hello World!
上述两种方式的区别:
第一种执行方式,其本质是bash解析器帮你执行脚本,所以脚本不需要可执行权限
第二种方式,本质是自己执行,需要执行权限才可执行
四、变量
系统预设变量
1、常用的系统变量 ? $HOME $PWD $SHELL $USER等
2、显示当前shell中所有变量: set (由于太多就不在展示)
自定义变量
1.语法
? 1>. 定义变量: 变量=值
? 2>. 撤销变量: unset 变量
? 3>. 声明静态变量: readonly变量,注意:不能unset
2.变量定义规则
? 1>.变量名称可以有字母、数字、下划线组成,但是不能以数字开头,环境变量建议使用全大写英文
? 2>.等号两侧不能有空格
? 3>.在bash中,变量默认都是字符串类型 ,无法直接进行数值运算
? 4>.变量的值如果有空格,需要使用双引号或者单引号括起来
1 # 定义变量A 2 [root@hadoop101 tmp]# A=5 3 [root@hadoop101 tmp]# echo $A 4 5 5 # 给变量A重新赋值 6 [root@hadoop101 tmp]# A=8 7 [root@hadoop101 tmp]# echo $A 8 8 9 # 撤销变量A 10 [root@hadoop101 tmp]# unset A 11 [root@hadoop101 tmp]# echo $A 12 # 定义静态变量 13 [root@hadoop101 tmp]# readonly B=2 14 [root@hadoop101 tmp]# echo $B 15 2 16 # 验证给静态变量改值(readonly变量不能修改) 17 [root@hadoop101 tmp]# B=33 18 -bash: B: 只读变量 19 # 验证直接使用运算符号 (不能直接运算) 20 [root@hadoop101 tmp]# C=1+2 21 [root@hadoop101 tmp]# echo $C 22 1+2 23 24 25 # 当命名的变量值有空格时,不能直接写,需要使用单引号或者双引号括起来 26 [root@hadoop101 tmp]# D=Hello world 27 -bash: world: 未找到命令 28 [root@hadoop101 tmp]# D="Hello world" 29 [root@hadoop101 tmp]# echo $D 30 Hello world 31 32 #可以使用export将变量提升为全局变量 可供其他Shell程序使用 33 export D 34 # 做完上述操作之后,变量D 就成了全局变量,在其他脚本里面也可以执行
3.特殊变量
$n 基本语法:
? $n (功能描述:n为数字,$0代表脚本名称,$1-$9 代表第一个到第九个参数,十以内的参数,十以上的参数需要用大括号包住,例 ${10} )
? $#基本语法:
? $# (功能描述: 获取所有参数的个数,常用语循环中)
? $ $@ 基本语法*:
? **? ? ? ( 功 能 描 述 : 这 个 变 量 代 表 命 令 行 中 所 有 参 数 , *** (功能描述:这个变量代表命令行中所有参数,???(功能描述:这个变量代表命令行中所有参数,*把所有参数看成一个整体)
? **@ ? ? ( 功 能 描 述 : 这 个 变 量 也 代 表 命 令 行 中 所 有 的 参 数 , 不 过 @** (功能描述:这个变量也代表命令行中所有的参数,不过@??(功能描述:这个变量也代表命令行中所有的参数,不过@把所有参数分开对待)
$?基本语法
? $? (功能描述:表示最后一次执行的命令的执行结果成功与否,如果变量值为0表示执行正确,如果非0表示上次执行的出现了问题 )
1 [root@H__D temp]# cat parameter.sh 2 #!/bin/bash 3 4 echo "$0 $1 $2 $3" 5 6 echo $# 7 8 echo $* 9 10 echo $@ 11 [root@H__D temp]# sh parameter.sh a b c d 12 parameter.sh a b c 13 4 14 a b c d 15 a b c d 16 [root@H__D temp]#
五、运算符
(1)“$((运算式))”或“$[运算式]”
(2)expr + , - , \*, /, % 加,减,乘,除,取余 , 注意:expr运算符间要有空格
1 [root@H__D temp]# echo $[(2+3)*4] 2 20 3 4 [root@H__D temp]# expr `expr 2 + 3` \* 4 5 20
六、条件判断
? [ condition ] (注意condition前后要有空格)
常用判断条件:
? 1.两个整数之间的比较
= 字符串比较
-lt 小于(less than) -le 小于等于 (less equals)
-gt 大于(greater than) -eq 等于(eqauls)
-ge 大于等于(greater then) -ne 不等于(Not equals)
? 2.按照文件权限进行判断
-r 有读的权限(read) **-w ** 有写的权限(write)
-x 有执行权限
? 3.按照文件类型进行判断
-f 文件存在并且是一个常规文件
-e 文件存在(existence) -d 文件存在并是一个目录(directory)
? 实例操作
1 # 判断1是否大于2 2 [root@hadoop101 tmp]# [ 1 -gt 2 ] 3 [root@hadoop101 tmp]# echo $? 4 1 5 # 判断hello.sh是否具有可写权限 6 [root@hadoop101 tmp]# [ -w hello.sh ] 7 [root@hadoop101 tmp]# echo $? 8 0 9 # 判断制定的文件是否存在 10 [root@hadoop101 tmp]# [ -e /opt/module/tmp/hello.sh ] 11 [root@hadoop101 tmp]# echo $? 12 0
4.多条件判断
&& 表示前一条命令执行成功时,才执行后一条
|| 表示上一条命令执行失败后,才执行下一条命令
七、流程控制
1. if 判断
1 if [ 条件表达式 ] 2 3 then 4 5 ? 程序 6 7 fi
或者
1 if [ 条件表达式 ] 2 3 ? then 4 5 ? 程序 6 7 ? elif [ 条件判断式 ] 8 then 9 ? 程序 10 else 11 程序 12 13 fi
注意事项:
? 1.if后要有空格
? 2.[ 条件表达式 ] ,中括号和条件表达式之间 必须有空格
实例操作:
1 #!/bin/bash 2 if [ $# -lt 1 ] 3 then 4 echo "请输入参数!" 5 exit 6 fi 7 if [ $1 -lt 2 ] 8 then 9 echo "$1 小于2" 10 else 11 echo "$1 大于2" 12 fi
执行结果:
1 [root@hadoop101 tmp]# ./testif.sh 1 2 1 小于2 3 [root@hadoop101 tmp]# ./testif.sh 4 4 4 大于2
2.case语句
格式:
1 case $变量名 in 2 ?"值1" ) 3 ? 如果变量值等于1,则执行程序1 4 ?;; 5 ?"值2" ) 6 ? 如果变量值等于2,则执行程序2 7 ?;; 8 ?*) 9 ? 如果变量的值都不是以上的值,则执行此程序 10 ?;; 11 esac
1.case行尾必须为单词 in, 每一个模式匹配必须以有括号“(”结束
? 2.双 ;; 号表示命令序列结束,相当于java中的break
? 3.最后的 “)” 表示默认模式,相当于java中的default
案例操作:
1 #!/bin/bash 2 if [ $# -lt 1 ] 3 then 4 echo "请输入参数!" 5 exit 6 fi 7 case $1 in 8 "1") 9 echo "输入的值等于1" 10 ;; 11 "2") 12 echo "输入的值等于2" 13 ;; 14 "3") 15 echo "输入的值等于3" 16 ;; 17 *) 18 echo "输入的值为其他!" 19 ;; 20 esac
执行结果为:
1 [root@hadoop101 tmp]# ./testcase.sh 3 2 输入的值等于3 3 [root@hadoop101 tmp]# ./testcase.sh 1 4 输入的值等于1 5 [root@hadoop101 tmp]# ./testcase.sh 2 6 输入的值等于2 7 [root@hadoop101 tmp]# ./testcase.sh 5 8 输入的值为其他!
3.for循环
基本语法一:
1 for((初始值;循环控制条件;变量变化)) 2 ?do 3 ? 程序 4 ?done
案例驱动:1到100的和
1 #!/bin/bash 2 sum=0 3 for ((a=1;a<101;a++)) 4 do 5 sum=$[ $sum+$a ] 6 done 7 echo $sum
测试结果
1 [root@hadoop101 tmp]# ./testForOne.sh 2 5050
基本语法二:
1 for 变量 in 值1,值2,值3... 2 ?do 3 ? 程序 4 ?done
案例驱动:打印1到5的值
1 #!/bin/bash 2 for i in 1 2 3 4 5 3 do 4 echo $i 5 done
执行结果:
1 [root@hadoop101 tmp]# ./testForTwo.sh 2 1 3 2 4 3 5 4 6 5
$* 和 $@ 的区别:
都表示传递给函数和脚本的所有参数,不被双引号“”包含时,都是以$1 $2 $3 $4 的形式输出参数
当被“”包括时,”$*“会将所有参数作为一个整体,当一个整体输出“$1 $2 $3 $4”
? “$@” 会将各个参数分开,是以 “$1” “$2” “$3” “$4” 的形式输出所有参数
4.while循环
语法格式:
1 while [ 条件表达式 ] 2 ?do 3 ? 程序 4 ?done
案例驱动:(1到100的和)
1 #!/bin/bash 2 sum=0 3 i=1 4 while [ $i -lt 101 ] 5 do 6 sum=$[ $sum+$i ] 7 i=$[ $i+1 ] 8 done 9 echo $sum
执行结果:
1 root@hadoop101 tmp]# ./testWhile.sh 2 5050
八、read读取控制台输入
? 1.基本语法
? read(选项)(参数)
? 选项:
? -p:指定读取值时的提示符
? -t:指定读取值时等待的时间(秒)
? 参数
? 变量:指定读取值的变量名
案例驱动:
1 #!/bin/bash 2 read -t 7 -p "请在七秒内输入你的姓名:" NAME 3 echo $NAME
执行结果:
1 [root@hadoop101 tmp]# ./testRead.sh 2 请在七秒内输入你的姓名:VmPerson 3 VmPerson
九、函数
常见系统函数
basename:
基本语法:
basename [string / pathname] [suffix] (功能描述:basename命令会删掉所有的前缀包括最后一个(‘/’)字符,然后将字符串显示出来。
? 选项:
suffix为后缀,如果suffix被指定了,basename会将pathname或string中的suffix去掉。
1 [root@hadoop101 tmp]# basename /opt/module/tmp/testWhile.sh 2 testWhile.sh 3 [root@hadoop101 tmp]# basename /opt/module/tmp/testWhile.sh .sh 4 testWhile
dirname:
? dirname 文件绝对路径 (功能描述:从给定的包含绝对路径的文件名中去除文件名(非目录的部分),然后返回剩下的路径(目录的部分))
1 [root@hadoop101 tmp]# dirname /opt/module/tmp/testWhile.sh 2 /opt/module/tmp
自定义函数
语法构造:
1 [ function ] funname[()] 2 { 3 Action; 4 [return int;] 5 } 6 funname
注意事项:
? 1.必须在调用之前先声明函数,shell脚本是逐行运行,不像其他语言一样先编译
? 2.函数返回值,只能通过$?系统变量获得,可以加显示return返回,不加,则以最后一条运行结果作为返回值,return后跟数值(0-255)
? 案例驱动:(自定义求和函数)
1 [root@H__D temp2]# cat sum.sh 2 #!/bin/bash 3 4 # 声明 5 function sum() 6 { 7 s=0 8 s=$[ $1 + $2 ] 9 echo $s 10 return $s 11 } 12 13 # 读取输入参数 14 read -p "input your paratemer1: " P1 15 read -p "input your paratemer2: " P2 16 17 # 调用执行 18 sum P1 P2 19 20 [root@H__D temp2]# sh sum.sh 21 input your paratemer1: 2 22 input your paratemer2: 3 23 5 24 [root@H__D temp2]# echo $? 25 5 26 [root@H__D temp2]#
十shell工具
cut
cut的工作就是“剪”,具体的说就是在文件中负责剪切数据用的。cut 命令从文件的每一行剪切字节、字符和字段并将这些字节、字符和字段输出
? 基本语法:
? cut [选项参数] filename
? 默认分隔符为制表符号
? 项参数说明
选项参数 | 功能 |
---|---|
-f | 列号,提取第几列 (如果是多列以,间隔) |
-d | 分隔符,按照指定分隔符分割列 |
-c | 指定具体的字符 |
案例驱动:
1 # 按照空格切割,取第一列 2 [root@hadoop101 tmp]# cut -d " " -f 1 cut.txt 3 dingding 4 honghong 5 yanyan 6 didi 7 #使用cut切ip 8 [root@hadoop101 tmp]# ifconfig ens33 | grep "inet" |cut -d: -f 2 | cut -d" " -f10 9 192.168.1.101
sed
? sed是一种流编辑器,它一次处理一行内容。处理时,把当前处理的行存储在临时缓冲区中,称为“模式空间”,接着用sed命令处理缓冲区中的内容,处理完成后,把缓冲区的内容送往屏幕。接着处理下一行,这样不断重复,直到文件末尾。文件内容并没有改变,除非你使用重定向存储输出
基本语法:
? sed [选项参数] ‘command’ filename
选项参数说明
选项参数 | 功能 |
---|---|
-e | 直接在指令列模式上进行sed的动作编辑。 |
-i | 直接编辑文件 |
3**)命令功能描述**
命令 | 功能描述 |
---|---|
a | 新增,a的后面可以接字串,在下一行出现 |
d | 删除 |
s | 查找并替换 |
awk
一个强大的文本分析工具,把文件逐行的读入,以空格为默认分隔符将每行切片,切开的部分再进行分析处理.
基本用法
awk [选项参数] ‘pattern1{action1} pattern2{action2}…’ filename
pattern:表示AWK在数据中查找的内容,就是匹配模式
action:在找到匹配内容时所执行的一系列命令
选项参数说明
选项参数 | 功能 |
---|---|
-F | 指定输入文件折分隔符 |
-v | 赋值一个用户定义变量 |
变量 | 说明 |
---|---|
FILENAME | 文件名 |
NR | 已读的记录数 |
NF | 浏览记录的域的个数(切割后,列的个数) |
案例驱动:
1 #passwd文件 以root开头的打印第七列 2 [root@hadoop101 tmp]# awk -F: ‘/^root/{print $7}‘ passwd 3 /bin/bash 4 # 统计passwd文件名,每行的行号,每行的列数 5 [root@hadoop101 tmp]# awk -F: ‘{print "filename:" FILENAME ", linenumber:" NR ",columns:" NF}‘ passwd 6 filename:passwd, linenumber:1,columns:7 7 filename:passwd, linenumber:2,columns:7 8 filename:passwd, linenumber:3,columns:7 9 filename:passwd, linenumber:4,columns:7 10 filename:passwd, linenumber:5,columns:7 11 filename:passwd, linenumber:6,columns:7 12 filename:passwd, linenumber:7,columns:7 13 filename:passwd, linenumber:8,columns:7 14 filename:passwd, linenumber:9,columns:7 15 filename:passwd, linenumber:10,columns:7 16 filename:passwd, linenumber:11,columns:7 17 filename:passwd, linenumber:12,columns:7 18 filename:passwd, linenumber:13,columns:7 19 filename:passwd, linenumber:14,columns:7 20 filename:passwd, linenumber:15,columns:7 21 filename:passwd, linenumber:16,columns:7 22 filename:passwd, linenumber:17,columns:7 23 filename:passwd, linenumber:18,columns:7 24 filename:passwd, linenumber:19,columns:7 25 filename:passwd, linenumber:20,columns:7 26 27 #切割ip 28 [root@hadoop101 tmp]# ifconfig ens33| awk -F "[ /]+" ‘/inet /{print $3}‘ 29 192.168.1.101 30 #打印空行所在行行号 31 [root@hadoop101 tmp]# awk ‘/^$/{print NR}‘ awk.txt 32 3
sort
sort命令是在Linux里非常有用,它将文件进行排序,并将排序结果标准输出。
基本语法
sort(选项)(参数)
选项 | 说明 |
---|---|
-n | 依照数值的大小排序 |
-r | 以相反的顺序来排序 |
-t | 设置排序时所用的分隔字符 |
-k | 指定需要排序的列 |
参数:指定待排序的文件列表
案例驱动:对文件内的数据排序并求和
1 [root@hadoop101 tmp]# sort -n test.txt|awk ‘{a+=$0;print $0}END{print "SUM="a}‘ 2 1 3 2 4 3 5 4 6 5 7 6 8 7 9 8 10 9 11 10 12 SUM=55
原文链接:https://blog.csdn.net/weixin_41159197/article/details/107147466