为了方便以后工作使用和复习,吐血整理记录一下学习shell脚本的笔记,看这篇文章需要对linux系统熟悉,希望对大家有所帮助!
shell是一个用 C 语言编写的程序,它是用户使用 Linux 的桥梁。Shell 既是一种命令语言,又是一种程序设计语言。
Shell 是指一种应用程序,这个应用程序提供了一个界面,用户通过这个界面访问操作系统内核的服务。
为什么要学习和使用shell?
Shell属于内置的脚本,程序开发的效率非常高,依赖于功能强大的命令可以迅速地完成开发任务(批处理)语法简单,代码写起来比较轻松,简单易学
cat /etc/shells
在linux中有很多类型的shell,不同的shell具备不同的功能,shell还决定了脚本中函数的语法,Linux中默认的shell是 ,流行的shell有ash、bash、ksh、csh、zsh等,不同的shell都有自己的特点以及用途。
编写规范:
文件命名规范:
文件名.sh .sh是linux下bash shell 的默认后缀
Bash 常用快捷键
输入输出重定向
linux 的标准输入与输出
输入重定向
输入重定向:是指不使用系统提供的标准输入端口,而进行重新的指定。换言之,输入重定向就是不使用标准输入端口输入文件,而是使用指定的文件作为标准输入设备。(重定向简单理解就是使用 “<”符来修改标准输入设备)
输出重定向
输出重定向:(通俗的讲,重定向输出就是把要输出的文件信息写入到一个文件中去,而不是将要输出的文件信息输出到控制台(显示屏),在linux中,默认的标准输出设备是控制台(或称为显示器),用户输出的信息默认情况下都会显示到控制台
&表示全部文件,文件不管对错,1表示标准输出文件,2表示标准错误输出。
/dev/null 文件
如果希望执行某个命令,但又不希望在屏幕上显示输出结果,那么可以将输出重定向到/dev/null中
多命令顺序执行
shell脚本的执行
两种方式执行shell脚本
第一种:给文件增加执行权限
第二种(了解):通过Bash调用执行脚本
什么是变量?
在一个脚本周期内,其值可以发生改变的量就是变量。
1. 变量的命名规则:
在定义变量时,有一些规则需要遵守:
- 命名只能使用英文字母,数字和下划线,首个字符不能以数字开头。
- 等号左右两侧不能有空格,可以使用下划线“_”,变量的值如果有空格,需要使用单引号或双引号包括。如:“test=“hello world!””。其中双引号括起来的内容“$”,“(”和反引号都拥有特殊含义,而单引号括起来的内容都是普通字符。
- 不能使用标点符号,不能使用bash里的关键字(可用help命令查看保留关键字)。
- 环境变量建议大写,便于区分
- 如果需要增加变量的值,那么可以进行变量值的叠加。不过变量需要用双引号包含"$变量名"或用${变量名}包含变量名。
关于单双引号的问题:
双引号能够识别变量,双引号能够实现转义(类似于“*”)
单引号是不能识别变量,只会原样输出,单引号是不能转义的
shell中特殊符号
单引号和双引号
反引号
2. 变量的分类:
- 用户自定义变量: 这种变量是最常见的变量,由用户自由定义变量名和变量的值。
- 环境变量: 这种变量中主要保存的是和系统操作环境相关的数据,比如当前登录用户,用户的家目录,命令的提示符等。不是太好理解吧,那么大家还记得在Windows中,同一台电脑可以有多个用户登录,而且每个用户都可以定义自己的桌面样式和分辨率,这些其实就是Windows的操作环境,可以当做是Windows的环境变量来理解。环境变量的变量名可以自由定义,但是一般对系统起作用的环境变量的变量名是系统预先设定好的。
- 位置参数变量: 这种变量主要是用来向脚本当中传递参数或数据的,变量名不能自定义,变量作用是固定的。
- 预定义变量: 是Bash中已经定义好的变量,变量名不能自定义,变量作用也是固定的。
2.1 用户自定义变量:
2.1.1 变量定义
2.1.2 变量调用
2.1.3 变量查看
2.1.4 变量删除
2.2 环境变量:
2.2.1 环境变量设置
2.2.2 环境变量查询和删除
env命令和set命令的区别:
set命令可以查看所有变量,而env命令只能查看环境变量。
2.2.3 系统默认环境变量
2.3 位置参数变量:
$1 是你给你写的shell脚本传的第一个参数,$2 是你给你写的shell脚本传的第二个参数…
保存退出后,你在Test.sh所在的目录下输入
结果输出:
$*会把接收的所有参数当成一个整体对待,而$@则会区分对待接收到的所有参数。举个例子:
2.4 预定义变量:
先来看看”$?”这个变量,举个例子说明
再来说明下”$$”和”$!”这两个预定义变量
3. 只读变量:
4. 接受键盘输入:
写个例子来解释下read命令:
在shell中,运算符和其他编程脚本语言一样,常见的有算数运算符、关系运算符、逻辑运算符、字符串运算符、文件测试运算符等
1. 算数运算符
原生bash不支持简单的数学运算,但是可以通过其他命令来实现,例如 awk 和 expr,expr 最常用。
expr 是一款表达式计算工具,使用它能完成表达式的求值操作。
例如,两个数相加(注意使用的是反引号 ` 而不是单引号 '):
下表列出了常用的算术运算符,假定变量 a 为 10,变量 b 为 20
- |加法 | 结果为 30。
- |减法 | 结果为 -10。
*| 乘法 | 结果为 200。
/ |除法 | 结果为 2。
% |取余| 结果为 0。
= |赋值| a=$b 将把变量 b 的值赋给 a。
==| 相等。用于比较两个数字,相同则返回 true(真)。| [ $a == $b ] 返回 false(假)。
!= |不相等。用于比较两个数字,不相同则返回 true。 |[ $a != $b ] 返回 true。
注意:条件表达式要放在方括号之间,并且要有空格,必须写成 [ $a == $b ]。
2. 关系运算符
关系运算符只支持数字,不支持字符串,除非字符串的值是数字。
下表列出了常用的关系运算符,假定变量 a 为 10,变量 b 为 20:
案例:判断当前输入的用户是否存在。如果存在则提示“用户存在”否则提示“用户不存在”。
如果要在shell脚本使用linux命令,可以使用包裹命令
例如:disk_size=$(df -h | awk ‘NR==2 {print $5}’)
3. 逻辑运算符
下表列出了常用的布尔运算符,假定变量 a 为 10,变量 b 为 20:
或运算:一个为真即为真,全部为假才是假
与运算:一个为假即为假,全部为真才是真
4. 字符串运算符
下表列出了常用的字符串运算符,假定变量 a 为 “abc”,变量 b 为 “efg”:
5. 文件测试运算符(重点)
文件测试运算符用于检测 Unix/Linux 文件的各种属性。
注意:权限几个判断,如果只有一个部分符合,则认为是有权限的。
1. if条件判断
1.1 单分支if条件
语法:
案例:统计根分区使用率
案例:创建目录
1.2 双分支if条件语句
语法:
案例1:备份mysql数据库
案例2:判断apache是否启动,如果没有启动则自动启动
nmap端口扫描命令,格式如下:
1.3 多分支if条件语句
语法:
案例:判断用户输入的是什么文件
2. 多分支case条件语句
case语句和if…elif…else语句一样都是多分支条件语句,不过和if多分支条件语句不同的是,case语句只能判断一种条件关系,而if语句可以判断多种条件关系。
case语句语法如下:
这个语句需要注意以下内容:
- case语句,会取出变量中的值,然后与语句体中的值逐一比较。如果数值符合,则执行对应的程序,如果数值不符,则依次比较下一个值。如果所有的值都不符合,则执行 “*)” (*代表所有其他值)中的程序。
- case语句以“case”开头,以“esac”结尾。
每一个分支程序之后要通过“;;”双分号结尾,代表该程序段结束(千万不要忘记,每次写case语句,都不要忘记双分号)。
案例:
3. for循环
for循环是固定循环,也就是在循环时已经知道需要进行几次的循环,有时也把for循环称为计数循环。for的语法有如下两种:
语法一:
语法二:
语法一举例:打印时间
语法一举例:批量解压缩脚本
语法二举例:从1加到100
语法二举例:批量添加指定数量的用户
语法二举例:批量删除用户
4. while循环
对while循环来讲,只要条件判断式成立,循环就会一直继续,直到条件判断式不成立,循环才会停止。
语法:
案例:1加到100
案例:输入的数值进行比较判断
5. until循环
和while循环相反,until循环时只要条件判断式不成立则进行循环,并执行循环程序。一旦循环条件成立,则终止循环。
语法:
案例一:1加到100
6. 函数
语法:
案例:接收用户输入的数字,然后从1加到这个数字
7. 特殊流程控制语句
7.1 exit语句
系统是有exit命令的,用于退出当前用户的登录状态。可是在Shell脚本中,exit语句是用来退出当前脚本的。也就是说,在Shell脚本中,只要碰到了exit语句,后续的程序就不再执行,而直接退出脚本。
exit的语法如下:
如果exit命令之后定义了返回值,那么这个脚本执行之后的返回值就是我们自己定义的返回值。可以通过查询$?这个变量,来查看返回值。如果exit之后没有定义返回值,脚本执行之后的返回值是执行exit 语句之前,最后执行的一条命令的返回值。写一个exit 的例子:
7.2 break语句
当程序执行到break语句时,会结束整个当前循环。而continue 语句也是结束循环的语句,不过continue 语句单次当前循环,而下次循环会继续。
案例:
执行下这个脚本,因为一旦变量i的值等于4,整个循环都会跳出,所以应该只能循环三次:
7.3 continue语句
continue也是结束流程控制的语句。如果在循环中,continue语句只会结束单次当前循环。
案例:
执行下这个脚本:
正则表达式
- | 匹配之前的项1次或者多次 | sa-6+匹配sa-6、sa-666,不能匹配sa-
- | 匹配之前的项0次或者多次| co*l匹配cl、col、cool、coool等
() | 匹配表达式,创建一个用于匹配的子串 | ma(tri)?匹配max或maxtrix
{n} | 匹配之前的项n次,n是可以为0的正整数 |[0-9]{3}匹配任意一个三位数,可以扩展为[0-9][0-9][0-9]
{n,}| 之前的项至少需要匹配n次 | [0-9]{2,}匹配任意一个两位数或更多位数不支持{n,}{n,}{n,}
{n,m}| 指定之前的项至少匹配n次,最多匹配m次,n<=m | [0-9]{2,5}匹配从两位数到五位数之间的任意一个数字
|| 交替匹配|两边的任意一项 | ab(c|d)匹配abc或abd
1 字符截取、替换命令
1.1 cut 列提取命令
cut命令的默认分隔符是制表符,也就是“tab”键,不过对空格符可是支持的不怎么好啊。我们先建立一个测试文件,然后看看cut命令的作用吧:
那如果想要提取多列呢?只要列号直接用“,”分开,命令如下:
cut可以按照字符进行提取,需要注意“8-”代表的是提取所有行的第十个字符开始到行尾,而“10-20”代表提取所有行的第十个字符到第二十个字符,而“-8”代表提取所有行从行首到第八个字符:
如果我想用cut命令截取df命令的第一列和第三列,就会出现这样的情况:
1.2 awk 编程
1.2.1 awk 概述
AWK 是一种处理文本文件的语言,是一个强大的文本分析工具。
1.2.2 printf 格式化输出
为了演示printf命令,我们需要修改下刚刚cut命令使用的student.txt文件,文件内容如下:
如果不想把成绩当成字符串输出,而是按照整型和浮点型输出,则要这样:
1.2.3 awk 基本使用
我们这里先来学习awk基本用法,也就是只看看格式化输出动作是干什么的。
比如刚刚截取df命令的结果时,cut命令已经力不从心了,我们来看看awk命令:
1.2.4 awk 的条件
BEGIN
END
END也是awk保留字,不过刚好和BEGIN相反。END是在awk程序处理完所有数据,即将结束时执行。END后的动作只在程序结束时执行一次。例如:
关系运算符
举几个例子看看关系运算符。假设我想看看平均成绩大于等于87分的学员是谁,就可以这样输入命令:
例子1:
加入了条件之后,只有条件成立动作才会执行,如果条件不满足,则动作则不运行。通过这个实验,大家可以发现,虽然awk是列提取命令,但是也要按行来读入的。这个命令的执行过程是这样的:
1)如果有BEGIN条件,则先执行BEGIN定义的动作。
2)如果没有BEGIN条件,则读入第一行,把第一行的数据依次赋予$0、$1、$2等变量。其中$0代表此行的整体数据,$1代表第一字段,$2代表第二字段。
3)依据条件类型判断动作是否执行。如果条件符合,则执行动作,否则读入下一行数据。如果没有条件,则每行都执行动作。
4)读入下一行数据,重复执行以上步骤。
再举个例子,如果我想看看Sc用户的平均成绩呢:
例子2:
这里要注意在awk中,使用“//”包含的字符串,awk命令才会查找。也就是说字符串必须用“//”包含,awk命令才能正确识别。
正则表达式
如果要想让awk 识别字符串,必须使用“//”包含,例如:
例子1:
当使用df命令查看分区使用情况是,如果我只想查看真正的系统分区的使用状况,而不想查看光盘和临时分区的使用状况,则可以:
例子2:
1.2.5 awk 内置变量
awk常用统计实例
这里“:”分隔符生效了,可是第一行却没有起作用,原来我们忘记了“BEGIN”条件,那么再来试试;
如果我只想看看sshd这个伪用户的相关信息,则可以这样使用:
1.2.6 awk 流程控制
我们再来利用下student.txt文件做个练习,后面的使用比较复杂,我们再看看这个文件的内容:
我们先来看看该如何在awk中定义变量与调用变量的值。假设我想统计PHP成绩的总分,那么就应该这样:
我们解释下这个命令。“NR==2 {iphp1=$3}” (条件是NR==2,动作是php1=$3) 这句话是指如果输入数据是第二行(第一行是标题行),就把第二行的第三字段的值赋予变量“php1”。
“NR==3 {php2=$3}" 这句话是指如果输入数据是第三行,就把第三行的第三字段的值赋予变量“php2”。“NR==4 {php3=$3;totle=phpl+php2+php3;print “totle php is " totle}”(“NR==4”是条件,后面(中的都是动作)这句话是指如果输入数据是第四行﹐就把第四行的第三字段的值赋予变量"php3”;然后定义变量totle的值是“php1+php2+php3”;然后输出“totle php is”关键字,后面加变量totle的值。
在awk编程中,因为命令语句非常长,在输入格式时需要注意以下内容:
多个条件 {动作} 可以用空格分割,也可以用回车分割。
在一个动作中,如果需要执行多个命令,需要用 “;” 分割,或用回车分割。
在awk中,变量的赋值与调用都不需要加入“$”符。
条件中判断两个值是否相同,请使用 “==”,以便和变量赋值进行区分。
在看看该如何实现流程控制,假设如果Linux成绩大于90,就是一个好男人(学PHP的表示压力很大!) :
其实在 awk中 if判断语句,完全可以直接利用awk自带的条件来取代,刚刚的脚本可以改写成这样:
1.2.7 awk 函数
awk编程也允许在编程时使用函数,我们讲讲awk的自定义函数。awk函数的定义方法如下:
我们定义一个简单的函数,使用函数来打印student.txt的学员姓名和平均成绩,应该这样来写函数:
1.2.8 awk 中调用脚本
然后可以使用“一f”选项来调用这个脚本:
1.3 sed 文本选取、替换、删除、新增的命令
sed主要是用来将数据进行选取、替换、删除、新增的命令。
语法:
对sed命令大家要注意,sed所做的修改并不会直接改变文件的内容(如果是用管道符接收的命令的输出,这种情况连文件都没有),而是把修改结果只显示到屏幕上,除非使用“-i”选项才会直接修改文件。
1.3.1 提取行数据
我们举几个例子来看看sed命令到底是干嘛的。假设我想查看下student.txt的第二行,那么就可以利用“p”动作了:
指定输出某行,使用-n选项
1.3.2 删除行数据
1.3.3 追加插入行数据
“a”会在指定行后面追加入数据,如果想要在指定行前面插入数据,则需要使用“i”动作:
如果是想追加或插入多行数据,除最后一行外,每行的末尾都要加入“”代表数据未完结。再来看看“-n”选项的作用:
1.3.4 替换行数据
1.3.5 字符串替换
“c”动作是进行整行替换的,如果仅仅想替换行中的部分数据,就要使用“s”动作了。g 使得 sed 对文件中所有符合的字符串都被替换, 修改后内容会到标准输出,不会修改原文件。
替换的格式和vim非常类似,假设我觉得我自己的PHP成绩太低了,想作弊给他改高点,就可以这样来做:
这样看起来就比较爽了吧。如果我想把AAA老师的成绩注释掉,让他不再生效。可以这样做:
在sed中只能指定行范围,所以很遗憾我在他们两个的中间,不能只把他们两个注释掉,那么我们可以这样:
“-e”选项可以同时执行多个sed动作,当然如果只是执行一个动作也可以使用“-e”选项,但是这时没有什么意义。还要注意,多个动作之间要用“;”号或回车分割,例如上一个命令也可以这样写:
2 字符处理命令
2.1 sort 排序命令
案例:
sort命令默认是用每行开头第一个字符来进行排序的,比如:
如果想要反向排序,请使用“-r”选项:
如果想要指定排序的字段,需要使用“-t”选项指定分隔符,并使用“-k”选项指定字段号。加入我想要按照UID字段排序/etc/passwd文件:
因为sort默认是按照字符排序,前面用户的UID的第一个字符都是1,所以这么排序。要想按照数字排序,请使用“-n”选项:
当然“-k”选项可以直接使用“-k 3”,代表从第三字段到行尾都排序(第一个字符先排序,如果一致,第二个字符再排序,知道行尾)。
2.2 uniq 取消重复行
2.3 wc 统计命令
到此这篇shell编程学习(shell编程入门)的文章就介绍到这了,更多相关内容请继续浏览下面的相关推荐文章,希望大家都能在编程的领域有一番成就!版权声明:
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如若内容造成侵权、违法违规、事实不符,请将相关资料发送至xkadmin@xkablog.com进行投诉反馈,一经查实,立即处理!
转载请注明出处,原文链接:https://www.xkablog.com/shellbc/15493.html