shell编程
1. 变量、条件判断、流程控制、函数
| $n （功能描述：n为数字，$0代表该脚本名称，$1-$9代表第一到第九个参数，十以上的参数，十以上的参数需要用大括号包含，如${10}） $# （功能描述：获取所有输入参数个数，常用于循环,判断参数的个数是否正确以及加强脚本的健壮性）。 $* （功能描述：这个变量代表命令行中所有的参数，$*把所有的参数看成一个整体） $@ （功能描述：这个变量也代表命令行中所有的参数，不过$@把每个参数区分对待）
$？ （功能描述：最后一次执行的命令的返回状态。如果这个变量的值为0，证明上一个命令正确执行；如果这个变量的值为非0（具体是哪个数，由命令自己来决定1-255），则证明上一个命令执行不正确了。） |
| read读取控制台输入 1）基本语法 read (选项) (参数) 选项： -p：指定读取值时的提示符； -t：指定读取值时等待的时间（秒）如果-t不加表示一直等待 参数 变量：指定读取值的变量名
|
|
执行系统函数需要用例如`date`特殊符号包裹，才可显示
（（））等价于[] |
| if条件判断 > -gt(greater than) < -lt(less than) >= -ge(greater equal) <= -le(less than) == -eq(equal) != -ne(not equal) （1）单分支 if [ 条件判断式 ];then 程序 fi 或者 if [ 条件判断式 ] then 程序 fi
（2）多分支 if [ 条件判断式 ] then 程序 elif [ 条件判断式 ] then 程序 else 程序 fi
|
| $?返回0表示上一个命令执行成功 $?返回1-255表示上一个命令执行成功
|
| 修改文件名mv 原文件名 新文件名
|
| for循环 1）基本语法1 for (( 初始值;循环控制条件;变量变化 )) do 程序 done 普通for可循环和增强for循环 for((i=0;i<=100;i++))
|
| while循环 1）基本语法 while [ 条件判断式 ] do 程序 done while循环中break和continue区别
while循环读取输出文件内容
遍历读取并查找，使用管道操作grep搜索内容
|
| case语句 1）基本语法 case $变量名 in "值1"） 如果变量的值等于值1，则执行程序1 ;; "值2"） 如果变量的值等于值2，则执行程序2 ;; …省略其他分支… *） 如果变量的值都不是以上的值，则执行此程序 ;; esac 注意事项： （1）case行尾必须为单词“in”，每一个模式匹配必须以右括号“）”结束。 （2）双分号“;;”表示命令序列结束，相当于java中的break。 （3）最后的“*）”表示默认模式，相当于java中的default。
实现简易计算器：函数或直接计算两种方式
|
| 函数
|
2.文件归档、正则表达式
| touch 创建一个文件 [atguigu@hadoop101 shells]$ touch for1.sh [atguigu@hadoop101 shells]$ vim for1.sh #!/bin/bash sum=0 for((i=0;i<=100;i++)) do sum=$[$sum+$i] done echo $sum |
| find 查找指定目录下的文件夹名
|
| head – n 2 显示文件前两行
|
| tail – n 2 显示文件末两行
|
| 文件归档tar（可搭配定时器定时备份文档）
|
| 正则表达式 正则表达式使用单个字符串来描述、匹配一系列符合某个语法规则的字符串。在很多文本编辑器里，正则表达式通常被用来检索、替换那些符合某个模式的文本。在Linux中，grep，sed，awk等命令都支持通过正则表达式进行模式匹配。 常规匹配：一串不包含特殊字符的正则表达式匹配它自己，例如： [atguigu@hadoop101 shells]$ cat /etc/passwd | grep atguigu 就会匹配所有包含atguigu的行 参数： 1）-i 忽略大小写
2）-E "正则表达式"
3）-n 显示匹配的行号，^$ 匹配空行
4）-c 显示匹配的行数，^$ 匹配空行
5）cat -b 表示同时显示匹配的行数
6）-An 显示匹配行及下n行
7）-Bn 显示匹配行及上n行
8）-n 显示匹配上及上下各n行
10.2 常用特殊字符 1）特殊字符：^ ^ 匹配一行的开头，例如： 会匹配出所有以root开头的行
2）特殊字符：$ $ 匹配一行的结束，例如 会匹配出所有以bash结尾的行
^$ 匹配空行 3）特殊字符：. . 匹配一个任意的字符，例如 [atguigu@hadoop101 shells]$ cat /etc/passwd | grep r..t 会匹配包含rabt,rbbt,rxdt,root等的所有行 4）特殊字符：* * 不单独使用，他和上一个字符连用，表示匹配上一个字符0次或多次，例如 [atguigu@hadoop101 shells]$ cat /etc/passwd | grep ro*t 会匹配rt, rot, root, rooot, roooot等所有行 思考：.* 匹配什么？ 5）特殊字符：[ ] [ ] 表示匹配某个范围内的一个字符，例如 [6,8]------匹配6或者8 [0-9]------匹配一个0-9的数字 [0-9]*------匹配任意长度的数字字符串 [a-z]------匹配一个a-z之间的字符 [a-z]* ------匹配任意长度的字母字符串 [a-c, e-f]-匹配a-c或者e-f之间的任意字符 [atguigu@hadoop101 shells]$ cat /etc/passwd | grep r[a,b,c]*t 会匹配rt,rat, rbt, rabt, rbact,rabccbaaacbt等等所有行 6）特殊字符：\ \ 表示转义，并不会单独使用。由于所有特殊字符都有其特定匹配模式，当我们想匹配某一特殊字符本身时（例如，我想找出所有包含 '$' 的行），就会碰到困难。此时我们就要将转义字符和特殊字符连用，来表示特殊字符本身，例如 [atguigu@hadoop101 shells]$ cat /etc/passwd | grep a\$b 就会匹配所有包含 a$b 的行。 |
| sed （1）语法 sed [ option 参数] 1）-n 不自动打印到操作台中 2）-i 直接编辑文件 （2） cat fstab -n | sed 5p 编辑第五行，并在屏幕中显示
cat fstab -n | sed -n 4p 只显示第4行
cat fstab -n | sed -n 3,5p 显示3-5行内容
cat fstab -n | sed -n '3p;5p' 显示第三行和第五行
（3）'/正则表达式或内容/p' sed -n '/etc/p' fstab 显示etc所在行
sed -n '/#/!p' fstab 显示不带#的行
sed -n '/\:/p' fstab 显示含：的行（：是特殊字符，需要使用\转译）
sed -n '/^UUID/p' fstab 显示以UUID开头的行
sed -n '/^$/!p' fstab 不显示空白行
sed -n '/^$/!p' fstab | sed -n '/^#/!p' 不显示空白行和#所在行
i、a—> 追加 sed '1ahello' test.txt 1a代表在第一行后下一行加入hello显示，不改变原文件
sed 'ikb23' test.txt i表示从第一行开始，每隔一行插入字符
sed -i '1abigdata' test.txt -i直接在原文件内操作，会修改文件
sed '4ihello' test.txt 4i在第四行加入hello，其他内容向下行迁移
sed '/22/achina' test.txt 在匹配22的所有行的下一行添加china（批量添加）
sed '$aend' test.txt $a在文件最后一行追加end
sed '/22/igood' test.txt 在匹配22的所有行的上一行添加china（批量添加）
sed '1cjavaweb' test.txt 1c将第一行的内容替换为javaweb
sed '/bigdata/c大数据' test.txt 将匹配到的bigdata行更改为大数据
d-->删除 sed '1d' test.txt 将第一行删除
sed '1~2d' test.txt 从第一行开始，隔行删除，删除奇数行
sed '2~2d' test.txt 从第二行开始，隔行删除，删除奇数行
sed '1,5d' test.txt 删除第一行至第五行
sed '1,2!d' test.txt 删除 除了1-2行之外的行
sed '$d' test.txt $d删除最后一行
sed '/bigdata/,2d' test.txt 删除匹配到的行及以下2行
sed '/bigdata/,$d' test.txt 删除匹配到的行至最后一行
sed '/^$/d' test.txt 删除匹配到的空行
sed '/22\|^$/!d' test.txt 不删除匹配到的行
s—> 替换 sed 's/22/erer/' test.txt 将匹配到的22替换成erer（非整行替换）
|
3. Shell工具
| 3.1 cut cut的工作就是“剪”，具体的说就是在文件中负责剪切数据用的。cut 命令从文件的每一行剪切字节、字符和字段并将这些字节、字符和字段输出。 1）基本用法 cut [选项参数] filename 说明：默认分隔符是制表符 2）选项参数说明 选项参数 功能 -f 列号，提取第几列 -d 分隔符，按照指定分隔符分割列，默认是制表符“\t” -c 按字符进行切割 后加加n 表示取第几列 比如 -c 1
|
| 3.2 awk 一个强大的文本分析工具，把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行分析处理。 1）基本用法 awk [选项参数] ‘/pattern1/{action1} /pattern2/{action2}...’ filename pattern：表示awk在数据中查找的内容，就是匹配模式 action：在找到匹配内容时所执行的一系列命令 2）选项参数说明 选项参数 功能 -F 指定输入文件折分隔符 -v 赋值一个用户定义变量 3）案例实操
取出2,4,6列的内容，默认分隔符为空格和制表符
取出2,4,6列的内容，指定分隔符为：和，
（1）搜索passwd文件以root关键字开头的所有行，并输出该行的第7列。
（2）搜索passwd文件以root关键字开头的所有行，并输出该行的第1列和第7列，中间以“，”号分割。
（3）只显示/etc/passwd的第一列和第七列，以逗号分割，且在所有行前面添加列名user，shell在最后一行添加"end of shell"。 注意：BEGIN 在所有数据读取行之前执行；END 在所有数据执行之后执行。
（5）将passwd文件中的用户id增加数值1并输出（使用-v参数）
4）awk的内置变量 变量 说明 FILENAME 文件名 NR 已读的记录数（行号） NF 浏览记录的域的个数（切割后，列的个数） 5）案例实操
打印$2列值小于5.0全部行的内容
打印$2列的最大值
（1）统计passwd文件名，每行的行号，每行的列数
（2）查询文件输出结果中的空行所在的行号
（3）切割IP
|
| 综合练习：编写脚本。实现给某个用户发送消息的功能
|
