3. 玩转shell脚本编程

• 3.1. 1 基础知识
  • 3.1.1. 1 Shell简介
  • 3.1.2. 2 Shell分类
    • 2.1 图形界面 Shell（GUI Shell）
    • 2.2 命令行界面 Shell（CLI Shell）
  • 3.1.3. 3 第一个Shell
  • 3.1.4. 4. 执行Shell的三种方法
    • 4.1 直接bash执行
    • 4.2 ./执行
    • 4.3 source执行
  • 3.1.5. 5 Shell变量
    • 5.1 变量命名规则
    • 5.2 系统内置变量
    • 5.3 设置环境变量永久生效的常用设置文件
    • 5.4 用户自定义变量
    • 5.5 变量引用
    • 5.6 变量的作用域
  • 3.1.6. 6 引号
  • 3.1.7. 7 Shell脚本中的注释和风格
  • 3.1.8. 8 Shell程序的退出状态
  • 3.1.9. 9.命令替换
  • 3.1.10. 10.转义
  • 3.1.11. 参考手册
• 3.2. 2 字符串与数组
  • 3.2.1. 1 字符串常用操作
    • 1.1 获取字符串长度
    • 1.2 字符串切片
    • 1.3 字符串替换
    • 1.4 字符串删除
    • 1.5 字符串截取
    • 1.6 变量状态赋值
  • 3.2.2. 2. Shell变量操作
    • 2.1 变量替换扩展
    • 2.2 变量字符串操作
    • 2.3 代码总结
  • 3.2.3. 3 数组
    • 3.1 数组定义
    • 3.2 通过元素值集合来创建数组变量
    • 3.3 通过键值对定义数组
    • 3.4 数组元素读取
    • 3.5 以切片方式获取部分数组元素
    • 3.6 通过declare语句定义关联数组
    • 3.7 在数组末尾追加新元素
    • 3.8 通过循环为数组赋值
    • 3.9 数组元素的替换
    • 3.10 删除数组
    • 3.11 数组的其它操作
  • 3.2.4. 4 字符显示颜色
• 3.3. 3 运算符
  • 3.3.1. 1 Shell表达式
  • 3.3.2. 1.1 整数测试
  • 3.3.3. 1.2 算术运算符
    • * 使用expr外部程序
    • * 使用$((…))
    • * 使用$[…]
    • * 使用let命令
  • 3.3.4. 2 复合算术运算符
  • 3.3.5. 3 自增/自减运算符
  • 3.3.6. 4 数字常量的进制
  • 3.3.7. 5 条件测试
  • 3.3.8. 6 布尔运算符
  • 3.3.9. 7 逻辑运算符
  • 3.3.10. 8 文件测试
  • 3.3.11. 9 字符串测试
  • 3.3.12. 10 Shell 中的中括号用法总结
    • 举例说明
  • 3.3.13. 11 字符串判断中x的作用
• 3.4. 4 流程控制
  • 3.4.1. 1 if语句
    • 1.1 单分支
    • 1.2 双分支
    • 1.3 多分支
  • 3.4.2. 2 for循环
    • 2.1 带列表的for循环语句
    • 2.2 for 循环C 语言风格的语法
    • 2.3 for循环的死循环写法
    • 2.4 不带列表的for循环语句
    • 2.5 使用for循环语句处理数组
  • 3.4.3. 3 while语句
  • 3.4.4. 4 until语句
  • 3.4.5. 5 break 和 continue 语句
  • 3.4.6. 6 case语句
  • 3.4.7. 7 select语句
• 3.5. 5 函数
  • 3.5.1. 1 概念
  • 3.5.2. 2 格式
    • 基本的脚本函数
  • 3.5.3. 3 函数参数
    • 指定位置参数
    • 移动位置参数
  • 3.5.4. 4 函数的嵌套
  • 3.5.5. 5 函数的返回值
  • 3.5.6. 6 全局变量和局部变量
  • 3.5.7. 7 函数库
    • 7.1 函数库文件的定义
    • 7.2 函数库文件的调用
  • 3.5.8. 8 函数库/etc/init.d/functions简介
• 3.6. 6 正则表达式
  • 3.6.1. 基本正则表达式
    • 1.1 字符匹配
    • 1.2 次数匹配
    • 1.3 位置锚定
    • 1.4 分组引用
• 3.7. 7 三剑客之grep
  • 3.7.1. 7.1 概念
  • 3.7.2. 7.2 语法格式
    • 选项
  • 3.7.3. 7.3 使用举例
• 3.8. 8 三剑客之sed
  • 3.8.1. 概念
  • 3.8.2. 适用场景
  • 3.8.3. 语法
  • 3.8.4. 使用举例
  • 3.8.5. 修改keepalive配置剔除后端服务器
  • 3.8.6. sed练习
  • 3.8.7. 使用sed修改文件流的方式
    • 删除
    • 将删除后的内容重定向到sed2.txt中
    • 直接删除文件中的第1行
    • 删除1-3行的内容
    • 清空整个文件，1~最后一行
    • 删除最后1行的内容
    • 删除包含Empty的行
    • 删除空行
    • 删除包含1以外的其它行
  • 3.8.8. 查找和替换
    • 替换匹配到line的行，只替换匹配到的第1次
    • 替换匹配到line的行，只替换匹配到的第2次
    • 所有匹配值的替换
    • 替换开头以this的行
  • 3.8.9. 字符转换
  • 3.8.10. 插入文本
    • 在第2行后添加一行空行
    • 若是一行里面有shui这个单词，那么在他后面会添加一个空行
    • 若是一行里面有shui这个单词，那么在他前后各添加一个空行
    • 若是一行里面有shui这个单词，那么在他前面添加一个空行
    • 在第一行前面添加空行，想在第几行，号令中的1就改成几
    • 在第二行前插入文本
    • 在第二行后插入文本
    • 在匹配行的前面插入1行文本
  • 3.8.11. 读入文本
    • 将/etc/passwd的内容读入到sed.txt的空行之后
  • 3.8.12. 打印
    • 打印第1行
    • 只打印匹配到的行
  • 3.8.13. 写文件
  • 3.8.14. sed 脚本
    • 编写一个sed脚本
    • 加载sed脚本
  • 3.8.15. 高级替换
    • 替换空白行后的一行的内容
    • 更多内容查看
• 3.9. 9 三剑客之awk
  • 3.9.1. 概念
  • 3.9.2. awk输出
  • 3.9.3. awk变量
  • 3.9.4. 操作符
  • 3.9.5. Pattern
  • 3.9.6. 常用action
    • 控制语句
  • 3.9.7. array
  • 3.9.8. 函数
  • 3.9.9. awk判断
  • 3.9.10. awk循环
  • 3.9.11. awk练习题
• 3.10. shell技巧与杂项
  • 3.10.1. echo和printf打印
    • echo
    • printf
  • 3.10.2. cron
  • 3.10.3. 标准输入输出重定向
    • 文件IO标识符
    • tree
    • Here Document
  • 3.10.4. 常见小技巧
    • stty关闭回显
    • 计算运行时间
    • date的常见用法
    • 持续执行命令直至成功才退出
    • tr:替换或删除字符
    • screen
    • 脚本编写注意事项
  • 3.10.5. Shell脚本的调试技术
    • 使用echo命令调试脚本
    • 使用trap命令调试Shell脚本
    • 使用tee命令调试shell脚本
    • 使用钩子函数，调试shell脚本
    • shell自带的调试选项
  • 3.10.6. 信号的名称和值
    • 捕获信号
  • 3.10.7. Shell脚本的参数解析工具
    • while+case命令行参数传递
    • getopts处理多命令行选项
  • 3.10.8. 子shell
    • 在子shell中执行命令
  • 3.10.9. 自动化
    • 开机自启动脚本
  • 3.10.10. Shell脚本实战
  • 3.10.11. 服务脚本的基本语法
    • 1. Apache服务器日志管理
    • 2 文件扫描校验
    • 3 自定义垃圾回收
    • 4 Linux系统检测
    • 5 自动化安装lnmp，安装提示菜单
    • 6 选择菜单 2
    • 7 启动脚本示例
    • 8 备份24小时被修改的文件
    • 9 卸载相关的rpm包、检查rpm包的方法
    • 10 检查软件状态
    • 11 color_print输出
    • 12 Linux下function函数库
• 3.11. xagrs使用
  • 3.11.1. xargs功能：从标准输入执行命令
  • 3.11.2. 常用选项：
• 3.12. 收集的一些shell脚本
  • 3.12.1. 监控服务器主要性能参数指标
  • 3.12.2. 修改SSHD配置文件
  • 3.12.3. 一键安装部署DHCP服务
  • 3.12.4. 自动部署配置vsftpd服务器
  • 3.12.5. 使用脚本操作MySQL数据库
  • 3.12.6. system_opt系统优化
  • 3.12.7. Centos6最小化安装后优化1
  • 3.12.8. Centos6最小化安装后优化2
  • 3.12.9. Centos7安装后优化
  • 3.12.10. 备份数据库脚本
  • 3.12.11. 备份数据库上传到S3存储库
  • 3.12.12. 控制进程数执行run.py脚本
  • 3.12.13. 转换数据库表存储引擎
  • 3.12.14. 监控网站状态脚本
  • 3.12.15. 监控httpd服务状态脚本
  • 3.12.16. 监控Nginx进程，如果尝试启动失败就stop Keepalived
  • 3.12.17. 进程控制示例
  • 3.12.18. lnmp一键安装示例
  • 3.12.19. 服务器初始化脚本示例
  • 3.12.20. 服务启动脚本示例
  • 3.12.21. 监控mysql数据库示例
  • 3.12.22. 每周五使用tar命令备份/var/log下的所有日志文件
  • 3.12.23. 一些常用的函数
  • 3.12.24. 检查监控内存、硬盘
  • 3.12.25. 猜随机数
  • 3.12.26. 检查网段内存活的主机IP信息
  • 3.12.27. 进度条
  • 3.12.28. nginx启动脚本
  • 3.12.29. 3种test的写法
  • 3.12.30. case+color用法
  • 3.12.31. 监控磁盘IO脚本
  • 3.12.32. color_print
  • 3.12.33. 网页检测
    • 检测网页状态发送邮件
    • 检测网页状态是否变化
  • 3.12.34. 函数检查服务
  • 3.12.35. 编写脚本抓取单个网页中的图片数据
• 3.13. 自动化安装zabbix
  • 3.13.1. install_zabbix.sh
• 3.14. 自动化安装cacti服务器
  • 3.14.1. install_cacti.sh
• 3.15. 自动化安装MongoDB
  • 3.15.1. install_mongodb.sh
• 3.16. 备份MongoDB
  • 3.16.1. backup_mongodb.sh
• 3.17. 自动安装memcached
  • 3.17.1. install_memcached.sh
• 3.18. 系统各项内容检测check_os
  • 3.18.1. check_system.sh
• 3.19. 安装tomcat脚本
• 3.20. install_zookeeper脚本
• 3.21. install_elasticserch脚本
• 3.22. 自动Autoinstall_ELK_V1.3脚本
• 3.23. install_vsftpd_or_nfs脚本
  • 3.23.1. install_vsftpd.sh
  • 3.23.2. install_nsf.sh
  • 3.23.3. vsftp主动和被动模式脚本
  • 3.23.4. auto_config_vsftpd.sh
• 3.24. install_mysql5.7
• 3.25. Linux下以秒为单位执行脚本
  • 3.25.1. 方法一
  • 3.25.2. 方法二
  • 3.25.3. 方法三
• 3.26. 备份文件shell脚本
  • 3.26.1. Auto_Backup_Linux_System_Files.sh
• 3.27. monitor_Linux系统性能
• 3.28. 修改IP_主机名_网卡信息脚本
• 3.29. 检查恶意IP登录，拒绝SSH
• 3.30. 数据库备份
  • 3.30.1. 备份数据库
  • 3.30.2. Linux定时备份数据库到COS
  • 3.30.3. Centos环境下编写mysql定时备份脚本
  • 3.30.4. MySQL数据库分库备份
  • 3.30.5. MySQL数据库分库分表备份
• 3.31. Centos6x开机性能优化
• 3.32. 百宝箱脚本
  • 3.32.1. Shell 实践、常用脚本进阶
  • 3.32.2. Shell 脚本进阶2
  • 3.32.3. Shell 实践、常用脚本
  • 3.32.4. 备份所有docker镜像
  • 3.32.5. 批量加载镜像
  • 3.32.6. 批量杀死僵尸进程
  • 3.32.7. nginx启动脚本示例
  • 3.32.8. Spring Boot启动脚本
  • 3.32.9. 安装nginx脚本
  • 3.32.10. 函数输出帮助信息
  • 3.32.11. 设置锁文件防止脚本重复执行
  • 3.32.12. Python颜色打印
  • 3.32.13. 实用脚本
    • python 爬虫
    • python循环接口下载图片
    • python遍历目录修改文件名
    • 字节单位换算
    • 对一组url测试能否访问成功
    • 查询可用IP
    • MySQL单表数据同步脚本
    • Shell执行SQL示例
  • 3.32.14. 参考文献：
• 3.33. 使用python脚本安装MongoDB
  • 3.33.1. 安装包和脚本的目录结构如下
  • 3.33.2. 安装完成之后的目录结构如下：
• 3.34. python实现端口扫描
  • 3.34.1. 使用socket工厂函数
    • 代码示例1
  • 3.34.2. 使用telnetlib标准库模块
    • 代码示例2
• 3.35. python检测ip存活状态
  • 3.35.1. 代码示例1
• 3.36. k8s_deploy脚本
  • 3.36.1. Master节点
  • 3.36.2. node节点
• 3.37. example(字符串处理)
  • 3.37.1. 变量替换的六种形式
  • 3.37.2. 字符串处理
  • 3.37.3. 抽取子串
  • 3.37.4. 字符串处理完整脚本 example.sh
• 3.38. 用Python实现定时备份Mongodb数据，并上传到FTP服务器
• 3.39. Nginx日志切割脚本
  • 3.39.1. 示例1
  • 3.39.2. 示例2
• 3.40. 一键安装docker脚本
• 3.41. shell实现多并发控制
  • 3.41.1. 1.不并发
  • 3.41.2. 2.控制并发
    • 2.1 控制并发示例1
    • 2.2 控制并发示例2
    • 2.3 控制并发示例3
    • 2.4 控制并发示例4
    • 2.5 控制并发示例5
    • 2.6 控制进程数量的ping脚本
• 3.42. 判断文件类型
• 3.43. 用if语句编写选择菜单
• 3.44. 使用while语句编写选择菜单
• 3.45. 使用until编写选择菜单
• 3.46. 目录定时备份
  • 3.46.1. 对指定目录定时备份
  • 3.46.2. 连续对多个目录逐个备份
• 3.47. 远程操作ftp进行上传和下载
  • 3.47.1. 自动下载指定文档
  • 3.47.2. 自动上传指定文档
• 3.48. 批量创建用户脚本
• 3.49. Centos升级内核版本(附带升级脚本)
  • 3.49.1. 参考文献
  • 3.49.2. Linux内核升级到最新
• 3.50. CPU监控脚本
• 3.51. 检测函数执行是否超时
• 3.52. 老男孩Shell编程实战
  • 3.52.1. 什么是shell脚本
    • 脚本的执行方式
    • 环境变量初始化与对应文件的生效顺序
  • 3.52.2. 初始化操作系统脚本
  • 3.52.3. 开发检测脚本
  • 3.52.4. 利用Shell函数开发rsync服务启动脚本
  • 3.52.5. 一个颜色打印示例脚本
  • 3.52.6. 结合case给输出的语句加颜色
  • 3.52.7. while循环
  • 3.52.8. 数组用法
  • 3.52.9. while循环按行读文件的方式总结
  • 3.52.10. 批量检查多个网站地址是否正常。
  • 3.52.11. 开发一个守护进程脚本，每30秒监控一次MySQL主从复制是否异常
  • 3.52.12. Shell脚本调试技巧
    • 使用echo命令调试
    • 使用bash命令参数调试
    • 使用set命令调试部分脚本内容
    • 其他调试Shell脚本的工具
  • 3.52.13. Expect用法
    • 在不使用密钥的情况下，实现非人为交互登录。
    • 对服务器批量管理（了解)
  • 3.52.14. 企业生产场景下的Expect案例
    • 批量执行命令
    • 批量执行Shell脚本
  • 3.52.15. 自动化部署SSH密钥认证+ansible的项目实战
  • 3.52.16. 使用exec调用其他外部命令或脚本
  • 3.52.17. fork子进程的示例.
  • 3.52.18. 使用函数与&后台进程实现多进程ping测试1.
  • 3.52.19. 使用函数与&后台进程实现多进程ping测试2.
  • 3.52.20. 控制进程数量的ping测试脚本
  • 3.52.21. 修改SSHD配置文件,提升SSH安全性
• 3.53. 快捷安装不同版本Python
• 3.54. 常用shell脚本大全
  • 3.54.1. 1. 搬砖常用的 shell 片段记录
  • 3.54.2. 2.有趣的Shell Snippet
  • 3.54.3. 3. bash圣经
• 3.55. 编写Shell脚本的最佳实践
  • 3.55.1. 参考文献