Shell 编程的高级技巧和实战应用
第一步:高级函数和模块化设计
1.1 高级函数设计
- 探讨函数的参数处理和默认值设置。
- 示例:实现一个可以处理可选参数的函数。
#!/bin/bashgreet() {local name=${1:-"World"} # 如果没有提供参数,使用默认值 "World"echo "Hello, $name!"
}greet # 输出 "Hello, World!"
greet "Alice" # 输出 "Hello, Alice!"
输出:
Hello, World!
Hello, Alice!
1.2 模块化脚本设计
- 介绍如何将脚本拆分为多个模块,并通过
source命令加载。 - 示例:创建一个包含多个函数的模块化脚本。
# utils.sh
#!/bin/bashadd() {echo $(( $1 + $2 ))
}subtract() {echo $(( $1 - $2 ))
}
# main.sh
#!/bin/bashsource ./utils.shsum=$(add 5 3)
diff=$(subtract 5 3)echo "Sum: $sum"
echo "Difference: $diff"
输出:
Sum: 8
Difference: 2
第二步:高级文本处理
2.1 深入学习 sed
- 介绍
sed的高级用法,如批量替换、插入和删除。 - 示例:使用
sed实现批量替换和插入操作。
#!/bin/bashtext="Hello, World! This is a sample text."
echo "$text" | sed 's/World/Shell/g' # 批量替换# 创建文件并插入新行
echo "$text" > sample.txt
sed -i '1iThis is a new line at the beginning.' sample.txt
cat sample.txt
输出:
Hello, Shell! This is a sample text.
This is a new line at the beginning.
Hello, World! This is a sample text.
2.2 高级 awk 用法
- 探讨
awk的高级功能,如字段处理、条件处理和函数。 - 示例:使用
awk处理复杂的文本数据。
#!/bin/bash# 创建一个包含多行数据的文件
cat <<EOF > data.txt
Name Age
Alice 30
Bob 25
Charlie 35
EOF# 使用 awk 处理数据
awk 'NR > 1 { print $1, $2 + 1 }' data.txt
输出:
Alice 31
Bob 26
Charlie 36
第三步:性能优化和资源管理
3.1 高效的文件处理
- 介绍如何通过并行处理和批量操作提高文件处理效率。
- 示例:使用
xargs实现并行文件处理。
#!/bin/bash# 创建多个样本文件
for i in {1..5}; doecho "Sample content $i" > file$i.txt
done# 使用 xargs 并行处理文件
ls *.txt | xargs -n 1 -P 5 -I {} sh -c 'cat {} && echo "Processed {}"'
输出:
Sample content 1
Processed file1.txt
Sample content 2
Processed file2.txt
Sample content 3
Processed file3.txt
Sample content 4
Processed file4.txt
Sample content 5
Processed file5.txt
3.2 资源限制和监控
- 讨论如何在脚本中设置资源限制和监控系统资源使用情况。
- 示例:使用
ulimit设置资源限制并监控资源使用。
#!/bin/bash# 限制单个进程的最大文件数
ulimit -n 1024# 创建大量文件测试限制
for i in {1..1024}; dotouch file$i
done# 监控系统资源使用
echo "Memory usage:"
free -mecho "Disk usage:"
df -h
输出:
Memory usage:total used free shared buff/cache available
Mem: 7977 518 6349 9 1109 7114
Swap: 2047 0 2047Disk usage:
Filesystem Size Used Avail Use% Mounted on
/dev/sda1 50G 10G 37G 22% /
第四步:综合实战案例
4.1 自动化备份和恢复
- 创建一个自动化备份和恢复脚本,演示如何处理压缩和解压缩、远程传输等操作。
#!/bin/bash# 自动化备份脚本
backup_dir="/backup"
src_dir="/data"
date=$(date +%F)
backup_file="$backup_dir/$date.tar.gz"# 创建备份
mkdir -p "$backup_dir"
tar -czf "$backup_file" "$src_dir"
echo "Backup completed: $backup_file"# 自动化恢复脚本
restore_dir="/restore"
mkdir -p "$restore_dir"
tar -xzf "$backup_file" -C "$restore_dir"
echo "Restore completed: $restore_dir"
输出:
Backup completed: /backup/2023-07-17.tar.gz
Restore completed: /restore
4.2 日志分析和报警
- 编写一个脚本自动分析系统日志,并在检测到错误时发送邮件或报警。
#!/bin/bashlog_file="/var/log/syslog"
output_file="/var/log/error_report.txt"# 分析日志并生成报告
grep "ERROR" "$log_file" > "$output_file"
echo "Error report generated: $output_file"# 发送邮件(需要配置 mail 命令)
mail -s "Error Report" admin@example.com < "$output_file"
echo "Error report sent to admin@example.com"
输出:
Error report generated: /var/log/error_report.txt
Error report sent to admin@example.com
相关文章:
Shell 编程的高级技巧和实战应用
第一步:高级函数和模块化设计 1.1 高级函数设计 探讨函数的参数处理和默认值设置。示例:实现一个可以处理可选参数的函数。 #!/bin/bashgreet() {local name${1:-"World"} # 如果没有提供参数,使用默认值 "World"ech…...
VMWare虚拟机如何连接U盘
检查配置 1)Win R键,输入services.msc,打开服务。 2)将AMware USB Arbitration Services 服务开启,并设置为自动启动; 连接U盘 目前作者了解有两种连接方式,如有其他连接方式,欢…...
【学习笔记】后缀自动机(SAM)
前言 之前对后缀自动机的理解太浅薄了,故打算重新写一篇。 后缀自动机是什么 后缀自动机是一个字符串的所有后缀建起来的自动机。它把所有子串(后缀的前缀)用 O ( n ) O(n) O(n) 的空间装了起来。后缀自动机的边会构成一个 D A G DAG DA…...
Godot的节点与场景
要深入的理解节点与场景,我们需要跳出这两个概念来看他。说的再直白一些godot本质就是一个场景编辑器! 场景的概念应该在我们平时看电影看电视时会经常提到,比如某一个打斗的场景,这个场景可能会被设在某一个街道,那么…...
C++ 学习(2) ---- std::cout 格式化输出
目录 std::cout 格式化输出简介使用成员函数使用流操作算子 std::cout 格式化输出简介 C 通常使用cout输出数据,和printf()函数相比,cout实现格式化输出数据的方式更加多样化; 一方面,cout 作为 ostream 类的对象,该类…...
前端拿不到Long类型成员变量,用@JsonSerialize(using = ToStringSerializer.class)序列化一下
EqualsAndHashCode(callSuper true) Data TableName("la_school_business") Schema(description "商务负责人表") public class SchoolBusiness extends BaseEntity {private static final long serialVersionUID -7124481085999629236L;/*** 商务负责人…...
JWT登录校验流程
jwt令牌的基本概念: 1. JWT(JSON Web Token) 定义:JWT 是一种开放标准(RFC 7519),用于在各方之间作为 JSON 对象安全地传输信息。它可以被验证和信任,因为它是数字签名的。结构&am…...
yarn安装和部署
文章目录 概述安装部署1.构建项目2.测试3.清理构建目录 小结 概述 yarn是一个快速、可靠和安全的JavaScript包管理工具,由Facebook开发。它被设计用来替代npm(Node Package Manager),尽管它与npm在很多方面兼容。yarn提供了以下一…...
Visual Studio的安装教程与使用方法
Visual Studio的安装教程与使用方法 一、Visual Studio的安装教程 1. 准备工作 确认系统要求: 在开始安装Visual Studio之前,请确保您的计算机满足Visual Studio的系统要求这。包括操作系统版本、内存、硬盘空间等。您可以在Visual Studio的官方网站…...
一键换装软件哪个好?6个换装工具让你秒变穿搭达人
#紫色跑道的city穿搭#火了,很多人都开始打卡各种紫色穿搭,展示自己的时尚态度。 但对于没有时间或金钱去精心搭配的我们来说,有没有一种更简单、更快捷的方式,让我们也能轻松跟上潮流呢? 当然有!今天&…...
【EtherCAT】Windows+Visual Studio配置SOEM主站——源码配置
目录 一、准备工作 1. Visual Studio 2022 2. Npcap 1.79 3. SOEM源码 二、源码部署 1. 新建Visual Studio工程 2. 创建文件夹 3. 创建主函数 4. 复制源代码 5. 删除无关项 6. 将soem源码添加进工程 7. 添加soem头文件 8. 配置头文件路径 9. 配置静态库和静态库路…...
GPTPDF深度解析:开源文档处理技术全攻略
GPTPDF深度解析:开源文档处理技术全攻略 在数字化信息时代,PDF文件因其稳定性和跨平台兼容性,已成为学术交流、技术文档和电子书籍等领域的首选格式。然而,PDF文档的处理和内容提取一直是一个难题。随着人工智能技术的飞速发展&a…...
网络学习:应用层DNS域名解析协议
目录 一、简介 二、工作流程 一、简介 DNS( Domain Name System)是“域名系统”的英文缩写,是一种组织成域层次结构的计算机和网络服务命名系统,它用于TCP/IP网络,它所提供的服务是用来将主机名和域名转换为IP地址的工作。 同时,DNS…...
7.怎么配置一个axios来拦截前后端请求
首先创建一个axios.js文件 导入我们所需要的依赖 import axios from "axios"; import Element from element-ui import router from "./router"; 设置请求头和它的类型和地址 注意先注释这个url,还没有解决跨域问题,不然会出现跨域 // axios.defaults.…...
Day17_1--AJAX学习之GET/POST传参
AJAX 简介 AJAX 是一种在无需重新加载整个网页的情况下,能够更新部分网页的技术。其实AJAX就可以理解为就是JS。通过AJAX也就实现了前后端分离,前端只写页面,后端生成数据! 现在开始通过实例学习: 1--GET传参 <!…...
golang国内proxy设置
go env -w GOPROXYhttps://goproxy.cn,direct经常使用的两个, goproxy.cn 和 goproxy.io 连接分别是 https://goproxy.cn https://goproxy.io 如果遇到某些包下载不下来的情况,可尝试更换数据源 更推荐使用https://goproxy.cn 速度快,缓存的包多 提醒…...
全网最适合入门的面向对象编程教程:31 Python的内置数据类型-对象Object和类型Type
全网最适合入门的面向对象编程教程:31 Python 的内置数据类型-对象 Object 和类型 Type 摘要: Python 中的对象和类型是一个非常重要的概念。在 Python 中,一切都是对象,包括数字、字符串、列表等,每个对象都有自己的类型。 原文链接: Fre…...
【mongodb】mongodb副本集的搭建和使用
本站以分享各种运维经验和运维所需要的技能为主 《python零基础入门》:python零基础入门学习 《python运维脚本》: python运维脚本实践 《shell》:shell学习 《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战 《k8…...
Java后端面试复习7.24
lock加锁解锁尝试获取锁方法lock底层基于什么实现lock和lock的底层实现分别面向什么用户lock和synchronized异同如何选择合适的锁ReentrantLock如何实现冲入内部类三个公平和非公平获取锁怎么实现的RL默认公平还是非公平,构造参数ReentrantRedaWriteLock的特性什么是…...
前端 HTML 概述
目录 1. HTML概述 1.1 超文本标记语言 1.2 标签 2. HTML 解析与编辑 2.1 解析与访问 2.2 编辑 html文件 1. HTML概述 HTML( Hyper Text Markup Language:超文本标记语言 ):主要用于网页主体结构的搭建,在网页上…...
【CSS position 属性】static、relative、fixed、absolute 、sticky详细介绍,多层嵌套定位示例
文章目录 ★ position 的五种类型及基本用法 ★ 一、position 属性概述 二、position 的五种类型详解(初学者版) 1. static(默认值) 2. relative(相对定位) 3. absolute(绝对定位) 4. fixed(固定定位) 5. sticky(粘性定位) 三、定位元素的层级关系(z-i…...
select、poll、epoll 与 Reactor 模式
在高并发网络编程领域,高效处理大量连接和 I/O 事件是系统性能的关键。select、poll、epoll 作为 I/O 多路复用技术的代表,以及基于它们实现的 Reactor 模式,为开发者提供了强大的工具。本文将深入探讨这些技术的底层原理、优缺点。 一、I…...
LabVIEW双光子成像系统技术
双光子成像技术的核心特性 双光子成像通过双低能量光子协同激发机制,展现出显著的技术优势: 深层组织穿透能力:适用于活体组织深度成像 高分辨率观测性能:满足微观结构的精细研究需求 低光毒性特点:减少对样本的损伤…...
什么是VR全景技术
VR全景技术,全称为虚拟现实全景技术,是通过计算机图像模拟生成三维空间中的虚拟世界,使用户能够在该虚拟世界中进行全方位、无死角的观察和交互的技术。VR全景技术模拟人在真实空间中的视觉体验,结合图文、3D、音视频等多媒体元素…...
全面解析数据库:从基础概念到前沿应用
在数字化时代,数据已成为企业和社会发展的核心资产,而数据库作为存储、管理和处理数据的关键工具,在各个领域发挥着举足轻重的作用。从电商平台的商品信息管理,到社交网络的用户数据存储,再到金融行业的交易记录处理&a…...
实战设计模式之模板方法模式
概述 模板方法模式定义了一个操作中的算法骨架,并将某些步骤延迟到子类中实现。模板方法使得子类可以在不改变算法结构的前提下,重新定义算法中的某些步骤。简单来说,就是在一个方法中定义了要执行的步骤顺序或算法框架,但允许子类…...
PydanticAI快速入门示例
参考链接:https://ai.pydantic.dev/#why-use-pydanticai 示例代码 from pydantic_ai import Agent from pydantic_ai.models.openai import OpenAIModel from pydantic_ai.providers.openai import OpenAIProvider# 配置使用阿里云通义千问模型 model OpenAIMode…...
Qt的学习(二)
1. 创建Hello Word 两种方式,实现helloworld: 1.通过图形化的方式,在界面上创建出一个控件,显示helloworld 2.通过纯代码的方式,通过编写代码,在界面上创建控件, 显示hello world; …...
【Redis】Redis从入门到实战:全面指南
Redis从入门到实战:全面指南 一、Redis简介 Redis(Remote Dictionary Server)是一个开源的、基于内存的键值存储系统,它可以用作数据库、缓存和消息代理。由Salvatore Sanfilippo于2009年开发,因其高性能、丰富的数据结构和广泛的语言支持而广受欢迎。 Redis核心特点:…...
使用VMware克隆功能快速搭建集群
自己搭建的虚拟机,后续不管是学习java还是大数据,都需要集群,java需要分布式的微服务,大数据Hadoop的计算集群,如果从头开始搭建虚拟机会比较费时费力,这里分享一下如何使用克隆功能快速搭建一个集群 先把…...
