当前位置： 首页 > news >正文

shell脚本之正则表达式

news 2026/2/10 21:30:43

目录

  • 一.常见的管道命令
    • 1.1sort命令
    • 1.2uniq命令
    • 1.3tr命令
    • 1.4cut命令
    • 1.5实例
      • 1.5.1统计当前主机连接状态
      • 1.5.2统计当前主机数
  • 二.正则表达式
    • 2.1正则表达式的定义
    • 2.2常见元字符（支持的工具：find，grep，egrep，sed和awk）
    • 2.3扩展正则表达式
    • 2.4位置锚定

一.常见的管道命令

1.1sort命令

  • sort命令可针对文本文件的内容，以行为单位来排序

    格式：sort  【选项】 参数

  • 常用选项

选项说明
-f忽略大小写
-b忽略每行前面的空格
-n按照数字进行排序
-r反向排序
-u等同于uniq，表示相同的数据仅显示一行
-t指定字段分隔符，默认使用【Tab】键分隔
-k指定排序字段
-o<输出文件>将排序后的结果转存至指定文件

1.2uniq命令

  • uniq命令用于检查及删除文本文件中重复出现的行列，一般与sort命令结合使用

    格式：uniq【选项】 参数

  • 常用选项

选项说明
-c进行计数，并删除文件中重复出现的行
-d仅显示连续的重复行
-u仅显示出现一次的行

1.3tr命令

  • 常用来对来自标准输入的字符进行替换，压缩和删除

    格式；tr 【选项】 【参数】

  • 常用选项

选项说明
-c保留字符集1的字符，其他的字符用字符集2替换
-d删除所有属于字符集1的字符
-s将重复出现的字符串压缩为一个字符串；用字符集2替换字符集1
-t字符集2替换字符集1，不加选项同结果
  • 常用参数
参数说明
字符集1指定要转换或删除的原字符集，当执行转换操作时，必须使用参数“字符集2”指定转换的目标字符集。但执行删除操作时，不需要参数“字符集2‘
字符集2指定要转换成的目标字符集

1.4cut命令

  • 显示行中指定的部分，删除文件中指定字段

     格式；cut 【选项】 参数

-常用选项

选项说明
-f通过指定哪一个字段进行提取。cut命令使用“TAB” 作为默认的字段分割符
-d“TAB”是默认的分割符，使用此选项可更改为其他的分隔符
–complement用于排除所指定的字段
–output-delimiter更改输出内容的分隔符

1.5实例

1.5.1统计当前主机连接状态

在这里插入图片描述

1.5.2统计当前主机数

在这里插入图片描述

二.正则表达式

2.1正则表达式的定义

  • 正则表达式，又称正规表达式，常规表达式
  • 使用字符串来描述，匹配一系列符合某个规则的字符
  • 正则表达式组成
    • 普通字符，包括大小写字母，数字，标点符号及一些其他符号
    • 元字符是指在正则表达式中具有特殊意义的专用字符

2.2常见元字符（支持的工具：find，grep，egrep，sed和awk）

匹配符表示含义
.表示任意一个字符
【】匹配括号中的一个字符
【^】表示否定括号中出现字符类中的字符，取反
\转义字符用于取消特殊符号的含义
^匹配字符串开始的位置
$匹配字符串结束的位置
{n}匹配前面的字表达式n次
{n，}匹配前面的子表达式不少于n次
{n，m}匹配前面的子表达式n到m次
【：alnum：】匹配任意字母和数字
【：alphabet：】匹配任意字母，大写或小写
【：lower：】小写字符a-z
【：upper：】大写字符A-Z
【：blank：】空格和TAB字符
【：space：】所有空白字符（新行，空格，制表符）
【：digital：】数字0-9
【：xdigt：】16进制数字
【：cntrl：】控制字符

实例1：.表示任意一个字符

在这里插入图片描述

示例2：【】匹配括号中的一个字符
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
示例3；【^】:表示否定括号中出现字符类中的字符，取反
在这里插入图片描述
在这里插入图片描述
示例4：【：alnum：】匹配任意字母和数字

在这里插入图片描述
示例5：元字符；（.）
在这里插入图片描述
在这里插入图片描述

2.3扩展正则表达式

  • 支持的工具；egrep，awk或grep -E和sed -r
限定符说明
*匹配前面子表达式0次或者多次
.*任意长度的任意符
？匹配前面子表达式0次或者1次，即：可有可无
+与星号相似，表示其前面字符出现一次或多次，但必须出现一次，>=1
{n，m}匹配前面的子表达式n到m次
{m}匹配前面的子表达式n次
{n，}匹配前面的子表达式不少于n次>=n
{，n}匹配前面的子表达式最多n次，<=n
l用逻辑OR方式指定正则表达式要用的模式
（）字符串分组，将括号中的字符串作为一个整体

实例1：*匹配前面子表达式0次或者多次
在这里插入图片描述
示例2；{n，m}匹配前面的子表达式n到m次
在这里插入图片描述
实例3：{n，}匹配前面的子表达式不少于n次>=n
在这里插入图片描述
实例4；{，n}匹配前面的子表达式最多n次，<=n
在这里插入图片描述
实例5：*匹配前面子表达式0次或者多次
在这里插入图片描述
实例6：*任意长度的任意字符
在这里插入图片描述
实例7：？匹配前面子表达式0次或者1次，即：可有可无
在这里插入图片描述
实例8：+与星号相似，表示其前面字符出现字符一次或多次，但必须出现一次，>=1
在这里插入图片描述
实例9：|逻辑OR方式指定正则表达式要用的模式
在这里插入图片描述
实例10：（）字符串分组，将括号中的字符串作为一个整体
在这里插入图片描述
实例11：提取ip地址
在这里插入图片描述
在这里插入图片描述

2.4位置锚定

位置限定符说明
^行首锚定，用于模式的最左侧
$行尾锚定，用于模式最右侧
^ OATTERN^用于模式匹配整行
^$空行
^ [[:space;]]*$空白行
<或\b词首锚定，用于单词模式的左侧
>或\b词尾锚定，用于单词的右侧
<PATTERN>匹配整个单词

实例1；行尾锚定，用于模式的最右侧

在这里插入图片描述
实例2；行尾锚定，用于模式的最左侧
在这里插入图片描述
实例3：用于模式匹配整行，匹配的内容单独在一行
在这里插入图片描述
实例4；<：只匹配右侧单词
在这里插入图片描述
实例5：>;只匹配左侧的单词
在这里插入图片描述
实例6：过滤出不是以#开头的非空行

在这里插入图片描述

相关文章：

shell脚本之正则表达式

目录 一.常见的管道命令1.1sort命令1.2uniq命令1.3tr命令1.4cut命令1.5实例1.5.1统计当前主机连接状态1.5.2统计当前主机数 二.正则表达式2.1正则表达式的定义2.2常见元字符&#xff08;支持的工具&#xff1a;find&#xff0c;grep&#xff0c;egrep&#xff0c;sed和awk&…...

编程日记 2023/8/16 22:34:10

将SM2根证书预置到chromium中

最近花了很多精力在做chromium的GmSSL适配&#xff0c;协议和算法都已经完成&#xff0c;这篇文章是关于将SM2根证书预置到chromium中 我的开发测试环境是macos12.4&#xff0c;从chromium的代码和文档中得知证书获取和校验都是通过操作系统以及native api接口完成&#xff0c…...

编程日记 2023/8/16 22:33:08

linux安装mysql-8.0.33正确方式及常见问题

目录 获取mysql下载地址链接 解压安装包 复制文件到安装目录 添加用户和用户属组修改权限 创建存储数据的文件夹/usr/local/mysql 初始化安装 修改配置文件 创建日志文件并赋予对应权限 启动成功​编辑 创建软链接 之前安装过mysql&#xff0c;时间比较长忘记安装步骤了今天…...

编程日记 2023/8/16 22:32:07

Vim的插件管理器之Vundle

1、安装Vundle插件管理器 Vim可以安装插件&#xff0c;但是需要手动安装比较麻烦&#xff0c;Vim本身没有提供插件管理器&#xff0c;所以会有很多的第三方的插件管理器&#xff0c;有一个vim的插件叫做 “vim-easymotion”&#xff0c;在它的github的安装说明里有列出对于不同…...

编程日记 2023/8/16 22:31:05

机器学习丨1. 机器学习概述

Author&#xff1a;AXYZdong 硕士在读 工科男 有一点思考&#xff0c;有一点想法&#xff0c;有一点理性&#xff01; 定个小小目标&#xff0c;努力成为习惯&#xff01;在最美的年华遇见更好的自己&#xff01; CSDNAXYZdong&#xff0c;CSDN首发&#xff0c;AXYZdong原创 唯…...

编程日记 2023/8/16 22:30:01

清除pip安装库时的缓存

目录 1、命令清除缓存 2、路径手动清除 在使用pip安装Python库时&#xff0c;如果之前已经下载过该库&#xff0c;pip会默认使用缓存来安装库&#xff0c;而不是重新从网络上下载。缓存文件通常存储在用户目录下的缓存文件夹中&#xff0c;具体位置因操作系统和Python版本而异…...

编程日记 2023/8/16 22:28:59

gitee上传一个本地项目到一个空仓库

gitee上传一个本地项目到一个空仓库 引入 比如&#xff0c;你现在本地下载了一个半成品的框架&#xff0c;现在想要把这个本地项目放到gitee的仓库上&#xff0c;这时就需要我们来做到把这个本地项目上传到gitee上了。 具体步骤 1. 登录码云 地址&#xff1a;https://gite…...

编程日记 2023/8/16 22:27:58

力扣：63. 不同路径 II（Python3）

题目&#xff1a; 一个机器人位于一个 m x n 网格的左上角 &#xff08;起始点在下图中标记为 “Start” &#xff09;。 机器人每次只能向下或者向右移动一步。机器人试图达到网格的右下角&#xff08;在下图中标记为 “Finish”&#xff09;。 现在考虑网格中有障碍物。那么从…...

编程日记 2023/8/16 22:26:57

【C语言】每日一题（多数元素）

多数元素&#xff0c;链接奉上 方法 1.摩尔投票2.合理但错误的方法2.1暴力循环2.2排序求出中间元素中间元素 1.摩尔投票 先来简单的介绍摩尔投票&#xff1a; 摩尔投票是一种用来解决绝对众数问题的算法。 什么是绝对众数呢&#xff1f; 在一个集合中&#xff0c;如果一个元素…...

编程日记 2023/8/16 22:25:55

后端 .net7 Minimal API 限流中间件（微信小程序无师自通十）

我的微信小程序使用.net7 Minimal API 作为后端&#xff0c;当服务器摆上公网后&#xff0c;可以观察到很多的攻击行为和暴力访问。所以&#xff0c;我需要使用微软的限流中间件部署相应的功能在服务器上 关键字&#xff1a; AddFixedWindowLimiter using Microsoft.AspNetCo…...

编程日记 2023/8/16 22:24:52

背上沉重的书包准备面试之react篇

目录 react特性&#xff1f; react生命周期&#xff1f; state和props区别 react中setState执行机制&#xff1f; 在react类组件形式中&#xff0c;setState第二个参数的作用&#xff1f; react事件机制&#xff1f; react事件绑定方式有哪些&#xff1f; react组件之间…...

编程日记 2023/8/16 22:23:50

OpenCV-Python中的图像处理-霍夫变换

OpenCV-Python中的图像处理-霍夫变换 霍夫变换霍夫直线变换霍夫圆环变换 霍夫变换 霍夫(Hough)变换在检测各种形状的技术中非常流行&#xff0c;如果要检测的形状可以用数学表达式描述&#xff0c;就可以是使用霍夫变换检测它。即使要检测的形状存在一点破坏或者扭曲也是可以使…...

编程日记 2023/8/16 22:22:47

W5500-EVB-PICO做UDP Client进行数据回环测试（八）

前言 上一章我们用开发板作为UDP Server进行数据回环测试&#xff0c;本章我们让我们的开发板作为UDP Client进行数据回环测试。 连接方式 使开发板和我们的电脑处于同一网段&#xff1a; 开发板通过交叉线直连主机开发板和主机都接在路由器LAN口 测试工具 网路调试工具&a…...

编程日记 2023/8/16 22:21:46

npm install 中 --save 和 --save-dev 是什么？

npm&#xff0c;全名 Node Package Manager&#xff0c;套件管理工具&#xff0c;package.json 会记下你在项目中安装的所有套件。 假设在项目中安装 lodash npm i --save lodash这样在 dependencies 中会出现&#xff1a; 如果修改了导入方式&#xff1a; npm i --save-dev …...

编程日记 2023/8/16 22:20:43

【Nginx17】Nginx学习：目录索引、字符集与浏览器判断模块

Nginx学习&#xff1a;目录索引、字符集与浏览器判断模块 今天要学习的内容有几个还是大家比较常见的&#xff0c;所以学习起来也不会特别费劲。对于目录的默认页设置大家都不会陌生&#xff0c;字符集的设置也比较常见&#xff0c;而浏览器的判断这一块&#xff0c;可能有同学…...

编程日记 2023/8/16 22:19:41

CA/TA开发编程实战-视频课程

Hello大家好&#xff0c;上架一门新的视频课程&#xff0c;课程主要包含两大部分&#xff0c;第一部分搭建环境&#xff0c;第二部分从无到有的编写代码。带领大家"手把手"编写。 具体大纲如下&#xff1a; qemu v8环境搭建 搭建一个qemu_v8的环境&#xff0c;用于…...

编程日记 2023/8/16 22:18:39

（7）(7.1) 使用航点和事件规划任务

文章目录 前言 7.1.1 设置Home位置 7.1.2 视频&#xff1a;制作并保存多路点任务 7.1.3 视频&#xff1a;加载已保存的多航点任务 7.1.4 使用说明 7.1.5 提示 7.1.6 自动网格 7.1.7 任务指令 7.1.8 任务结束 7.1.9 任务重置 7.1.10 MIS_OPTIONS 7.1.11 任务再出发 …...

编程日记 2023/8/16 22:17:38

OCR相关模块——版面分析技术、表格文本识别

OCR相关模块——版面分析技术、表格文本识别 版面分析技术表格识别技术 版面分析技术 版面分析模型&#xff1a;飞桨用到了yolov2检测模型&#xff0c;对文档图片中的文本、表格、图片、标题与列表区域进行检测。当前主流是用分割做。 表格识别技术 参考博文...

编程日记 2023/8/16 22:16:36

mov转mp4格式怎么转？

mov转mp4格式怎么转&#xff1f;众所周知&#xff0c;MOV视频格式是由苹果公司推出的常用的视频格式&#xff0c;能够在苹果软件及设备上使用。但是&#xff0c;如果将其应用于其他软件和设备上的话&#xff0c;可能会遇到文件无法正常播放的情况。在这个时候&#xff0c;我们需…...

编程日记 2023/8/16 22:15:34

SSL握手协议相关概念

下图为握手协议的流程图&#xff0c;具体的解释参考博客&#xff1a; 【下】安全HTTPS-全面详解对称加密&#xff0c;非对称加密&#xff0c;数字签名&#xff0c;数字证书和HTTPS_tenfyguo的博客-CSDN博客 下面梳理一下SSL协议中的一些细节。首先是相关名词&#xff1a;证书、…...

编程日记 2023/8/16 22:14:33

golang循环变量捕获问题​​

在 Go 语言中&#xff0c;当在循环中启动协程&#xff08;goroutine&#xff09;时&#xff0c;如果在协程闭包中直接引用循环变量&#xff0c;可能会遇到一个常见的陷阱 - ​​循环变量捕获问题​​。让我详细解释一下&#xff1a; 问题背景 看这个代码片段&#xff1a; fo…...

编程新知 2026/1/21 14:29:57

SciencePlots——绘制论文中的图片

文章目录 安装一、风格二、1 资源 安装 # 安装最新版 pip install githttps://github.com/garrettj403/SciencePlots.git# 安装稳定版 pip install SciencePlots一、风格 简单好用的深度学习论文绘图专用工具包–Science Plot 二、 1 资源 论文绘图神器来了&#xff1a;一行…...

编程新知 2025/9/8 13:50:07

day52 ResNet18 CBAM

在深度学习的旅程中&#xff0c;我们不断探索如何提升模型的性能。今天&#xff0c;我将分享我在 ResNet18 模型中插入 CBAM&#xff08;Convolutional Block Attention Module&#xff09;模块&#xff0c;并采用分阶段微调策略的实践过程。通过这个过程&#xff0c;我不仅提升…...

编程新知 2025/11/9 1:27:18

Linux简单的操作

ls ls 查看当前目录 ll 查看详细内容 ls -a 查看所有的内容 ls --help 查看方法文档 pwd pwd 查看当前路径 cd cd 转路径 cd .. 转上一级路径 cd 名 转换路径 …...

编程新知 2026/1/20 14:36:39

1.3 VSCode安装与环境配置

进入网址Visual Studio Code - Code Editing. Redefined下载.deb文件&#xff0c;然后打开终端&#xff0c;进入下载文件夹&#xff0c;键入命令 sudo dpkg -i code_1.100.3-1748872405_amd64.deb 在终端键入命令code即启动vscode 需要安装插件列表 1.Chinese简化 2.ros …...

编程新知 2026/1/29 3:35:37

P3 QT项目----记事本（3.8）

3.8 记事本项目总结 项目源码 1.main.cpp #include "widget.h" #include <QApplication> int main(int argc, char *argv[]) {QApplication a(argc, argv);Widget w;w.show();return a.exec(); } 2.widget.cpp #include "widget.h" #include &q…...

编程新知 2026/2/1 6:56:36

镜像里切换为普通用户

如果你登录远程虚拟机默认就是 root 用户&#xff0c;但你不希望用 root 权限运行 ns-3&#xff08;这是对的&#xff0c;ns3 工具会拒绝 root&#xff09;&#xff0c;你可以按以下方法创建一个 非 root 用户账号 并切换到它运行 ns-3。 一次性解决方案&#xff1a;创建非 roo…...

编程新知 2025/9/11 11:00:29

汇编常见指令

汇编常见指令 一、数据传送指令 指令功能示例说明MOV数据传送MOV EAX, 10将立即数 10 送入 EAXMOV [EBX], EAX将 EAX 值存入 EBX 指向的内存LEA加载有效地址LEA EAX, [EBX4]将 EBX4 的地址存入 EAX&#xff08;不访问内存&#xff09;XCHG交换数据XCHG EAX, EBX交换 EAX 和 EB…...

编程新知 2026/1/23 2:04:44

使用 Streamlit 构建支持主流大模型与 Ollama 的轻量级统一平台

🎯 使用 Streamlit 构建支持主流大模型与 Ollama 的轻量级统一平台 📌 项目背景 随着大语言模型（LLM）的广泛应用，开发者常面临多个挑战： 各大模型（OpenAI、Claude、Gemini、Ollama）接口风格不统一；缺乏一个统一平台进行模型调用与测试；本地模型 Ollama 的集成与前…...

编程新知 2026/1/25 3:31:07

AirSim/Cosys-AirSim 游戏开发（四）外部固定位置监控相机

这个博客介绍了如何通过 settings.json 文件添加一个无人机外的 固定位置监控相机&#xff0c;因为在使用过程中发现 Airsim 对外部监控相机的描述模糊&#xff0c;而 Cosys-Airsim 在官方文档中没有提供外部监控相机设置&#xff0c;最后在源码示例中找到了&#xff0c;所以感…...

编程新知 2026/2/5 18:58:39