Shell 编程的高级技巧和实战应用
第一步:高级函数和模块化设计
1.1 高级函数设计
- 探讨函数的参数处理和默认值设置。
- 示例:实现一个可以处理可选参数的函数。
#!/bin/bashgreet() {local name=${1:-"World"} # 如果没有提供参数,使用默认值 "World"echo "Hello, $name!"
}greet # 输出 "Hello, World!"
greet "Alice" # 输出 "Hello, Alice!"
输出:
Hello, World!
Hello, Alice!
1.2 模块化脚本设计
- 介绍如何将脚本拆分为多个模块,并通过
source
命令加载。 - 示例:创建一个包含多个函数的模块化脚本。
# utils.sh
#!/bin/bashadd() {echo $(( $1 + $2 ))
}subtract() {echo $(( $1 - $2 ))
}
# main.sh
#!/bin/bashsource ./utils.shsum=$(add 5 3)
diff=$(subtract 5 3)echo "Sum: $sum"
echo "Difference: $diff"
输出:
Sum: 8
Difference: 2
第二步:高级文本处理
2.1 深入学习 sed
- 介绍
sed
的高级用法,如批量替换、插入和删除。 - 示例:使用
sed
实现批量替换和插入操作。
#!/bin/bashtext="Hello, World! This is a sample text."
echo "$text" | sed 's/World/Shell/g' # 批量替换# 创建文件并插入新行
echo "$text" > sample.txt
sed -i '1iThis is a new line at the beginning.' sample.txt
cat sample.txt
输出:
Hello, Shell! This is a sample text.
This is a new line at the beginning.
Hello, World! This is a sample text.
2.2 高级 awk 用法
- 探讨
awk
的高级功能,如字段处理、条件处理和函数。 - 示例:使用
awk
处理复杂的文本数据。
#!/bin/bash# 创建一个包含多行数据的文件
cat <<EOF > data.txt
Name Age
Alice 30
Bob 25
Charlie 35
EOF# 使用 awk 处理数据
awk 'NR > 1 { print $1, $2 + 1 }' data.txt
输出:
Alice 31
Bob 26
Charlie 36
第三步:性能优化和资源管理
3.1 高效的文件处理
- 介绍如何通过并行处理和批量操作提高文件处理效率。
- 示例:使用
xargs
实现并行文件处理。
#!/bin/bash# 创建多个样本文件
for i in {1..5}; doecho "Sample content $i" > file$i.txt
done# 使用 xargs 并行处理文件
ls *.txt | xargs -n 1 -P 5 -I {} sh -c 'cat {} && echo "Processed {}"'
输出:
Sample content 1
Processed file1.txt
Sample content 2
Processed file2.txt
Sample content 3
Processed file3.txt
Sample content 4
Processed file4.txt
Sample content 5
Processed file5.txt
3.2 资源限制和监控
- 讨论如何在脚本中设置资源限制和监控系统资源使用情况。
- 示例:使用
ulimit
设置资源限制并监控资源使用。
#!/bin/bash# 限制单个进程的最大文件数
ulimit -n 1024# 创建大量文件测试限制
for i in {1..1024}; dotouch file$i
done# 监控系统资源使用
echo "Memory usage:"
free -mecho "Disk usage:"
df -h
输出:
Memory usage:total used free shared buff/cache available
Mem: 7977 518 6349 9 1109 7114
Swap: 2047 0 2047Disk usage:
Filesystem Size Used Avail Use% Mounted on
/dev/sda1 50G 10G 37G 22% /
第四步:综合实战案例
4.1 自动化备份和恢复
- 创建一个自动化备份和恢复脚本,演示如何处理压缩和解压缩、远程传输等操作。
#!/bin/bash# 自动化备份脚本
backup_dir="/backup"
src_dir="/data"
date=$(date +%F)
backup_file="$backup_dir/$date.tar.gz"# 创建备份
mkdir -p "$backup_dir"
tar -czf "$backup_file" "$src_dir"
echo "Backup completed: $backup_file"# 自动化恢复脚本
restore_dir="/restore"
mkdir -p "$restore_dir"
tar -xzf "$backup_file" -C "$restore_dir"
echo "Restore completed: $restore_dir"
输出:
Backup completed: /backup/2023-07-17.tar.gz
Restore completed: /restore
4.2 日志分析和报警
- 编写一个脚本自动分析系统日志,并在检测到错误时发送邮件或报警。
#!/bin/bashlog_file="/var/log/syslog"
output_file="/var/log/error_report.txt"# 分析日志并生成报告
grep "ERROR" "$log_file" > "$output_file"
echo "Error report generated: $output_file"# 发送邮件(需要配置 mail 命令)
mail -s "Error Report" admin@example.com < "$output_file"
echo "Error report sent to admin@example.com"
输出:
Error report generated: /var/log/error_report.txt
Error report sent to admin@example.com
相关文章:
Shell 编程的高级技巧和实战应用
第一步:高级函数和模块化设计 1.1 高级函数设计 探讨函数的参数处理和默认值设置。示例:实现一个可以处理可选参数的函数。 #!/bin/bashgreet() {local name${1:-"World"} # 如果没有提供参数,使用默认值 "World"ech…...

VMWare虚拟机如何连接U盘
检查配置 1)Win R键,输入services.msc,打开服务。 2)将AMware USB Arbitration Services 服务开启,并设置为自动启动; 连接U盘 目前作者了解有两种连接方式,如有其他连接方式,欢…...
【学习笔记】后缀自动机(SAM)
前言 之前对后缀自动机的理解太浅薄了,故打算重新写一篇。 后缀自动机是什么 后缀自动机是一个字符串的所有后缀建起来的自动机。它把所有子串(后缀的前缀)用 O ( n ) O(n) O(n) 的空间装了起来。后缀自动机的边会构成一个 D A G DAG DA…...

Godot的节点与场景
要深入的理解节点与场景,我们需要跳出这两个概念来看他。说的再直白一些godot本质就是一个场景编辑器! 场景的概念应该在我们平时看电影看电视时会经常提到,比如某一个打斗的场景,这个场景可能会被设在某一个街道,那么…...
C++ 学习(2) ---- std::cout 格式化输出
目录 std::cout 格式化输出简介使用成员函数使用流操作算子 std::cout 格式化输出简介 C 通常使用cout输出数据,和printf()函数相比,cout实现格式化输出数据的方式更加多样化; 一方面,cout 作为 ostream 类的对象,该类…...
前端拿不到Long类型成员变量,用@JsonSerialize(using = ToStringSerializer.class)序列化一下
EqualsAndHashCode(callSuper true) Data TableName("la_school_business") Schema(description "商务负责人表") public class SchoolBusiness extends BaseEntity {private static final long serialVersionUID -7124481085999629236L;/*** 商务负责人…...

JWT登录校验流程
jwt令牌的基本概念: 1. JWT(JSON Web Token) 定义:JWT 是一种开放标准(RFC 7519),用于在各方之间作为 JSON 对象安全地传输信息。它可以被验证和信任,因为它是数字签名的。结构&am…...
yarn安装和部署
文章目录 概述安装部署1.构建项目2.测试3.清理构建目录 小结 概述 yarn是一个快速、可靠和安全的JavaScript包管理工具,由Facebook开发。它被设计用来替代npm(Node Package Manager),尽管它与npm在很多方面兼容。yarn提供了以下一…...
Visual Studio的安装教程与使用方法
Visual Studio的安装教程与使用方法 一、Visual Studio的安装教程 1. 准备工作 确认系统要求: 在开始安装Visual Studio之前,请确保您的计算机满足Visual Studio的系统要求这。包括操作系统版本、内存、硬盘空间等。您可以在Visual Studio的官方网站…...

一键换装软件哪个好?6个换装工具让你秒变穿搭达人
#紫色跑道的city穿搭#火了,很多人都开始打卡各种紫色穿搭,展示自己的时尚态度。 但对于没有时间或金钱去精心搭配的我们来说,有没有一种更简单、更快捷的方式,让我们也能轻松跟上潮流呢? 当然有!今天&…...

【EtherCAT】Windows+Visual Studio配置SOEM主站——源码配置
目录 一、准备工作 1. Visual Studio 2022 2. Npcap 1.79 3. SOEM源码 二、源码部署 1. 新建Visual Studio工程 2. 创建文件夹 3. 创建主函数 4. 复制源代码 5. 删除无关项 6. 将soem源码添加进工程 7. 添加soem头文件 8. 配置头文件路径 9. 配置静态库和静态库路…...
GPTPDF深度解析:开源文档处理技术全攻略
GPTPDF深度解析:开源文档处理技术全攻略 在数字化信息时代,PDF文件因其稳定性和跨平台兼容性,已成为学术交流、技术文档和电子书籍等领域的首选格式。然而,PDF文档的处理和内容提取一直是一个难题。随着人工智能技术的飞速发展&a…...

网络学习:应用层DNS域名解析协议
目录 一、简介 二、工作流程 一、简介 DNS( Domain Name System)是“域名系统”的英文缩写,是一种组织成域层次结构的计算机和网络服务命名系统,它用于TCP/IP网络,它所提供的服务是用来将主机名和域名转换为IP地址的工作。 同时,DNS…...

7.怎么配置一个axios来拦截前后端请求
首先创建一个axios.js文件 导入我们所需要的依赖 import axios from "axios"; import Element from element-ui import router from "./router"; 设置请求头和它的类型和地址 注意先注释这个url,还没有解决跨域问题,不然会出现跨域 // axios.defaults.…...

Day17_1--AJAX学习之GET/POST传参
AJAX 简介 AJAX 是一种在无需重新加载整个网页的情况下,能够更新部分网页的技术。其实AJAX就可以理解为就是JS。通过AJAX也就实现了前后端分离,前端只写页面,后端生成数据! 现在开始通过实例学习: 1--GET传参 <!…...

golang国内proxy设置
go env -w GOPROXYhttps://goproxy.cn,direct经常使用的两个, goproxy.cn 和 goproxy.io 连接分别是 https://goproxy.cn https://goproxy.io 如果遇到某些包下载不下来的情况,可尝试更换数据源 更推荐使用https://goproxy.cn 速度快,缓存的包多 提醒…...

全网最适合入门的面向对象编程教程:31 Python的内置数据类型-对象Object和类型Type
全网最适合入门的面向对象编程教程:31 Python 的内置数据类型-对象 Object 和类型 Type 摘要: Python 中的对象和类型是一个非常重要的概念。在 Python 中,一切都是对象,包括数字、字符串、列表等,每个对象都有自己的类型。 原文链接: Fre…...

【mongodb】mongodb副本集的搭建和使用
本站以分享各种运维经验和运维所需要的技能为主 《python零基础入门》:python零基础入门学习 《python运维脚本》: python运维脚本实践 《shell》:shell学习 《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战 《k8…...
Java后端面试复习7.24
lock加锁解锁尝试获取锁方法lock底层基于什么实现lock和lock的底层实现分别面向什么用户lock和synchronized异同如何选择合适的锁ReentrantLock如何实现冲入内部类三个公平和非公平获取锁怎么实现的RL默认公平还是非公平,构造参数ReentrantRedaWriteLock的特性什么是…...

前端 HTML 概述
目录 1. HTML概述 1.1 超文本标记语言 1.2 标签 2. HTML 解析与编辑 2.1 解析与访问 2.2 编辑 html文件 1. HTML概述 HTML( Hyper Text Markup Language:超文本标记语言 ):主要用于网页主体结构的搭建,在网页上…...

华为云AI开发平台ModelArts
华为云ModelArts:重塑AI开发流程的“智能引擎”与“创新加速器”! 在人工智能浪潮席卷全球的2025年,企业拥抱AI的意愿空前高涨,但技术门槛高、流程复杂、资源投入巨大的现实,却让许多创新构想止步于实验室。数据科学家…...
MySQL 隔离级别:脏读、幻读及不可重复读的原理与示例
一、MySQL 隔离级别 MySQL 提供了四种隔离级别,用于控制事务之间的并发访问以及数据的可见性,不同隔离级别对脏读、幻读、不可重复读这几种并发数据问题有着不同的处理方式,具体如下: 隔离级别脏读不可重复读幻读性能特点及锁机制读未提交(READ UNCOMMITTED)允许出现允许…...

Python:操作 Excel 折叠
💖亲爱的技术爱好者们,热烈欢迎来到 Kant2048 的博客!我是 Thomas Kant,很开心能在CSDN上与你们相遇~💖 本博客的精华专栏: 【自动化测试】 【测试经验】 【人工智能】 【Python】 Python 操作 Excel 系列 读取单元格数据按行写入设置行高和列宽自动调整行高和列宽水平…...

为什么需要建设工程项目管理?工程项目管理有哪些亮点功能?
在建筑行业,项目管理的重要性不言而喻。随着工程规模的扩大、技术复杂度的提升,传统的管理模式已经难以满足现代工程的需求。过去,许多企业依赖手工记录、口头沟通和分散的信息管理,导致效率低下、成本失控、风险频发。例如&#…...

转转集团旗下首家二手多品类循环仓店“超级转转”开业
6月9日,国内领先的循环经济企业转转集团旗下首家二手多品类循环仓店“超级转转”正式开业。 转转集团创始人兼CEO黄炜、转转循环时尚发起人朱珠、转转集团COO兼红布林CEO胡伟琨、王府井集团副总裁祝捷等出席了开业剪彩仪式。 据「TMT星球」了解,“超级…...
Java 加密常用的各种算法及其选择
在数字化时代,数据安全至关重要,Java 作为广泛应用的编程语言,提供了丰富的加密算法来保障数据的保密性、完整性和真实性。了解这些常用加密算法及其适用场景,有助于开发者在不同的业务需求中做出正确的选择。 一、对称加密算法…...

【配置 YOLOX 用于按目录分类的图片数据集】
现在的图标点选越来越多,如何一步解决,采用 YOLOX 目标检测模式则可以轻松解决 要在 YOLOX 中使用按目录分类的图片数据集(每个目录代表一个类别,目录下是该类别的所有图片),你需要进行以下配置步骤&#x…...
#Uniapp篇:chrome调试unapp适配
chrome调试设备----使用Android模拟机开发调试移动端页面 Chrome://inspect/#devices MuMu模拟器Edge浏览器:Android原生APP嵌入的H5页面元素定位 chrome://inspect/#devices uniapp单位适配 根路径下 postcss.config.js 需要装这些插件 “postcss”: “^8.5.…...

【电力电子】基于STM32F103C8T6单片机双极性SPWM逆变(硬件篇)
本项目是基于 STM32F103C8T6 微控制器的 SPWM(正弦脉宽调制)电源模块,能够生成可调频率和幅值的正弦波交流电源输出。该项目适用于逆变器、UPS电源、变频器等应用场景。 供电电源 输入电压采集 上图为本设计的电源电路,图中 D1 为二极管, 其目的是防止正负极电源反接, …...

使用LangGraph和LangSmith构建多智能体人工智能系统
现在,通过组合几个较小的子智能体来创建一个强大的人工智能智能体正成为一种趋势。但这也带来了一些挑战,比如减少幻觉、管理对话流程、在测试期间留意智能体的工作方式、允许人工介入以及评估其性能。你需要进行大量的反复试验。 在这篇博客〔原作者&a…...