当前位置: 首页 > article >正文

监控 100 台服务器磁盘内存CPU利用率

监控 100 台服务器磁盘,内存,CPU利用率脚本

以下是一个优化后的监控脚本,用于同时监控100台服务器的磁盘、内存和CPU利用率,并支持并发执行以提高效率:

#!/bin/bash
# 服务器监控脚本 - 支持并发获取100台服务器系统指标
# 功能:同时监控磁盘、内存、CPU利用率
# 需要提前配置SSH免密登录和目标服务器IP列表# 配置参数
HOST_FILE="server_list.txt"   # 服务器IP列表文件
MAX_CONCURRENCY=20            # 最大并发数(避免过高负载)
LOG_DIR="monitor_logs"        # 日志存放目录
CURRENT_DATE=$(date +%Y%m%d)  # 当前日期# 创建日志目录
mkdir -p "$LOG_DIR"
OUTPUT_FILE="$LOG_DIR/monitor_report_$CURRENT_DATE.csv"# 检查服务器列表文件
if [[ ! -f "$HOST_FILE" ]]; thenecho "错误:服务器列表文件 $HOST_FILE 不存在!"exit 1
fi# 准备CSV文件表头
echo "Hostname,IP,Timestamp,DisktUsed(%),MemoryUsed(%),CPULoad" > "$OUTPUT_FILE"# 并发执行控制变量
declare -A running_ssh  # 跟踪正在运行的SSH进程
declare -A host_outputs # 存储主机输出
running_count=0# 核心监控函数
monitor_server() {local ip="$1"{# 获取主机名local hostname=$(ssh -o ConnectTimeout=5 -o StrictHostKeyChecking=no "$ip" 'hostname' 2>/dev/null)if [[ -z "$hostname" ]]; thenecho "$ip,,连接失败: $(date +%T),N/A,N/A,N/A"returnfi# 收集系统指标read -r timestamp disk_usage memory_usage cpu_load <<< $(ssh "$ip" \'ts=$(date +%T);disk=$(df -h / | awk "NR==2{print \$5}" | tr -d "%");mem=$(free | awk "/Mem/{printf \"%.0f\", (\$3-\$6-\$7)*100/\$2}");  # 计算真实内存使用cpu=$(top -bn1 | awk "/Cpu/ {printf \"%.1f\", 100 - \$8}");  # 获取CPU利用率echo "$ts $disk $mem $cpu"')# 输出CSV格式结果echo "$hostname,$ip,$timestamp,${disk_usage:-0},${memory_usage:-0},${cpu_load:-0}"} >> "$OUTPUT_FILE" 2>/dev/null
}# 主监控循环
while IFS= read -r ip; do# 跳过空行和注释[[ -z "$ip" || "$ip" =~ ^# ]] && continue# 等待空闲槽位while (( running_count >= MAX_CONCURRENCY )); dosleep 0.2# 检查已完成的进程for pid in "${!running_ssh[@]}"; doif ! kill -0 "$pid" 2>/dev/null; thenunset running_ssh["$pid"]((running_count--))fidonedone# 启动监控任务monitor_server "$ip" &running_ssh[$!]="$ip"((running_count++))
done < "$HOST_FILE"# 等待所有后台任务完成
wait
echo "监控完成! 结果已保存到: $OUTPUT_FILE"

脚本关键优化点与功能说明:

  1. 并发处理机制
while (( running_count >= MAX_CONCURRENCY )); dosleep 0.2for pid in "${!running_ssh[@]}"; doif ! kill -0 "$pid" 2>/dev/null; thenunset running_ssh["$pid"]((running_count--))fidone
done
  • 使用进程池技术控制并发数量(默认20)
  • 实时检测进程状态释放槽位
  • 避免同时发起过多SSH请求导致网络拥堵
  1. 指标收集函数
read -r timestamp disk_usage memory_usage cpu_load <<< $(ssh "$ip" \'ts=$(date +%T);disk=$(df -h / | awk "NR==2{print \$5}" | tr -d "%");mem=$(free | awk "/Mem/{printf \"%.0f\", (\$3-\$6-\$7)*100/\$2}"); cpu=$(top -bn1 | awk "/Cpu/ {printf \"%.1f\", 100 - \$8}");echo "$ts $disk $mem $cpu"')
  • 磁盘使用:监控根分区使用率(可修改为指定分区)

  • 真实内存计算

($3-$6-$7)/$2 * 100

计算公式

  • $3:已用内存

  • $6:缓存(cache)

  • $7:缓冲(buffer)

  • CPU利用率:100% - 空闲时间 = 实际使用率

  1. 错误处理与超时
local hostname=$(ssh -o ConnectTimeout=5 -o StrictHostKeyChecking=no "$ip" 'hostname' 2>/dev/null)
if [[ -z "$hostname" ]]; thenecho "$ip,,连接失败: $(date +%T),N/A,N/A,N/A"return
fi
  • SSH超时设置(5秒)
  • 连接失败自动记录错误信息
  • StrictHostKeyChecking跳过密钥确认
  1. 日志与输出
echo "Hostname,IP,Timestamp,DisktUsed(%),MemoryUsed(%),CPULoad" > "$OUTPUT_FILE"
  • CSV格式输出,兼容Excel分析
  • 按日期生成日志文件(自动创建目录)
  • 表头清晰标注指标单位
  1. 内存计算优化
mem=$(free | awk "/Mem/{printf \"%.0f\", (\$3-\$6-\$7)*100/\$2}")
  • 创新点:计算真实使用内存 = 总内存 - (free + buffers + cache)
  • 区别于简单计算 used/total*100,更准确反映应用实际内存占用

使用说明:

  1. 准备工作
# 创建服务器列表文件
echo "192.168.1.101" >> server_list.txt
echo "192.168.1.102" >> server_list.txt
# ...添加100台服务器IP# 配置SSH免密登录
ssh-keygen
for ip in $(cat server_list.txt); do ssh-copy-id $ip
done# 添加执行权限
chmod +x server_monitor.sh
  1. 执行监控
./server_monitor.sh
  1. 输出示例
Hostname,IP,Timestamp,DisktUsed(%),MemoryUsed(%),CPULoad
web-node1,192.168.1.101,14:35:22,35,68,24.5
db-master,192.168.1.102,14:35:23,12,45,8.3
...(100台数据)

注意事项:

  1. 内存计算使用CentOS/RHEL的free命令输出格式
  2. top -bn1 需要服务器支持batch模式
  3. 如需监控指定分区,修改df命令的挂载点
  4. 对于Ubuntu系统,调整内存计算公式(free -m输出列不同)
  5. 可添加阈值告警功能(在echo前添加判断)
  6. 日志文件可配置定时清理(如保留7天数据)

此脚本优化了服务器监控的效率和准确性,特别是改进了内存使用率的计算方式,能更真实地反映服务器的内存压力情况。

相关文章:

监控 100 台服务器磁盘内存CPU利用率

监控 100 台服务器磁盘,内存&#xff0c;CPU利用率脚本 以下是一个优化后的监控脚本&#xff0c;用于同时监控100台服务器的磁盘、内存和CPU利用率&#xff0c;并支持并发执行以提高效率&#xff1a; #!/bin/bash # 服务器监控脚本 - 支持并发获取100台服务器系统指标 # 功能…...

Linux远程连接主机——ssh命令详解

摘要&#xff1a;SSH是OpenSSH套件中的加密远程连接工具&#xff0c;基于SSH协议提供安全的服务器管理通道。本文详解连接参数、认证方法和功能&#xff0c;提供实用操作示例。 一、SSH核心特性 SSH&#xff08;Secure Shell&#xff09;是行业标准的远程管理协议&#xff1a;…...

算法-集合的使用

1、set常用操作 set<int> q; //以int型为例 默认按键值升序 set<int,greater<int>> p; //降序排列 int x; q.insert(x); //将x插入q中 q.erase(x); //删除q中的x元素,返回0或1,0表示set中不存在x q.clear(); //清空q q.empty(); //判断q是否为空&a…...

性能优化 - 理论篇:CPU、内存、I/O诊断手段

文章目录 Pre引言1. CPU 性能瓶颈1.1 top 命令 —— 多维度 CPU 使用率指标1.2 负载&#xff08;load&#xff09;——任务排队情况1.3 vmstat 命令 —— CPU 繁忙与等待 2. 内存性能瓶颈2.1 操作系统层面的内存分布2.2 top 命令 —— VIRT / RES / SHR 三个关键列2.3 CPU 缓存…...

算法:二分查找

1.二分查找 704. 二分查找 - 力扣&#xff08;LeetCode&#xff09; 二分查找算法要确定“二段性”&#xff0c;时间复杂度为O(lonN)。为了防止数据溢出&#xff0c;所以求mid时要用防溢出的方式。 class Solution { public:int search(vector<int>& nums, int tar…...

Spring Boot3.4.1 集成 mybatis plus

Spring Boot 集成 mybatis plus 第一步 引入依赖 <dependency><groupId>mysql</groupId><artifactId>mysql-connector-java</artifactId><version>8.0.16</version> </dependency><dependency><groupId>com.bao…...

Ubuntu 22.04 上安装 PostgreSQL(使用官方 APT 源)

Ubuntu 22.04 上安装 PostgreSQL&#xff08;使用官方 APT 源&#xff09; 步骤 1&#xff1a;更新系统 sudo apt update sudo apt upgrade -y步骤 2&#xff1a;添加 PostgreSQL 官方仓库 # 安装仓库管理工具 sudo apt install wget ca-certificates gnupg lsb-release -y#…...

Linux随记(十八)

一、k8s的node节点磁盘 /data已使用率超过 85% , 出现disk pressure &#xff0c;驱逐pod现象 evicted &#xff0c; the node had condition:[DiskPressure] #修改/var/lib/kubelet/config.yaml ]# cat /var/lib/kubelet/config.yaml apiVersion: kubelet.config.k8s.io/v1…...

Windows MongoDB C++驱动安装

MongoDB驱动下载 MongoDB 官网MongoDB C驱动程序入门MongoDB C驱动程序入门 安装环境 安装CMAKE安装Visual Studio 编译MongoDB C驱动 C驱动依赖C驱动&#xff0c;需要先编译C驱动 下载MongoDB C驱动源码 打开CMAKE(cmake-gui) 选择源码及输出路径,然后点击configure …...

MS1023/MS1224——10MHz 到 80MHz、10:1 LVDS 并串转换器(串化器)/串并转换器(解串器)

产品简述 MS1023 串化器和 MS1224 解串器是一对 10bit 并串 / 串并转 换芯片&#xff0c;用于在 LVDS 差分底板上传输和接收 10MHz 至 80MHz 的并行字速率的串行数据。起始 / 停止位加载后&#xff0c;转换为负载编 码输出&#xff0c;串行数据速率介于 120Mbps…...

ESOP股权管理平台完整解决方案

——全生命周期合规化、智能化、价值化的资本中枢系统 一、平台顶层架构 1.1 四层驱动模型 #mermaid-svg-QrD0g5nIuRtsMl7c {font-family:"trebuchet ms",verdana,arial,sans-serif;font-size:16px;fill:#333;}#mermaid-svg-QrD0g5nIuRtsMl7c .error-icon{fill:#552…...

线性调频波形测距测速信号处理——全代码+注释

clear all close all clc %% 参数设置 fs600e6;%采样率 fc10.45e9;% 波形发射载频 t10e-6;%脉宽 f050e6;%波形中频频率 B10e6;%带宽 uB/(2*t);%调频斜率 Tv100e-6;% 脉冲重复周期 Num64;% 测速脉冲数 lamdfs/B;% 抽取带宽 Nsround(fs*t); NTvround(fs*Tv); tt0:1/fs:t-1/fs; ff…...

WPS word 已有多级列表序号

wps的word中&#xff0c;原来已生成的文档里&#xff0c;已存在序号。比如&#xff0c;存在2、2.1、2.1.1、2.1.1.1、2.1.1.1.1 5层序号&#xff0c;而且已分为5级。但增加内容的时候&#xff0c;并不会自动增加序号&#xff0c;应该如何解决&#xff1f; 原来长这样&#xff…...

Vue 3 源码层核心原理剖析(完整详解版)

一、Compiler 编译过程解密&#xff1a;多框架实现对比 Vue 3 编译流程深度解析&#xff08;基于 /packages/compiler-core/src/parse.ts&#xff09; 完整编译链条及技术实现&#xff1a; #mermaid-svg-S8ScpxdjkcJv0YWT {font-family:"trebuchet ms",verdana,ari…...

数据库操作-MySQL-4(JDBC编程)

JDBC&#xff1a;通过Java代码操作mysql数据库&#xff0c;数据库会提供一些API供我们调用 MySQL、Oracle、等API有差异&#xff0c;但是Java统一了所有接口&#xff0c;即JDBC&#xff1b; 原始api-驱动包&#xff08;类似转接头&#xff09;-统一的api-Java 驱动包&#xff1…...

Linux打开.img镜像文件

kparkx 可以查看和修改img文件的内容 1.安装kparkx 1.安装 kpartx sudo apt-get update sudo apt-get install kpartx2.使用kpartx映射镜像文件 假设镜像文件名为 example.img &#xff0c;以下命令会将其分区映射到 dev/mapper/ sudo kpartx -av example.img• -a表示添加…...

【FAQ】HarmonyOS SDK 闭源开放能力 —Account Kit(5)

1.问题描述&#xff1a; 集成华为一键登录的LoginWithHuaweiIDButton&#xff0c; 但是Button默认名字叫 “华为账号一键登录”&#xff0c;太长无法显示&#xff0c;能否简写成“一键登录”与其他端一致&#xff1f; 解决方案&#xff1a; 问题分两个场景&#xff1a; 一、…...

【科研绘图系列】R语言绘制论文组合图形(multiple plots)

禁止商业或二改转载,仅供自学使用,侵权必究,如需截取部分内容请后台联系作者! 文章目录 介绍加载R包数据下载导入数据数据预处理画图1画图2画图3画图4画图5系统信息介绍 这篇文章详细介绍了如何使用R语言进行科研绘图,特别是绘制论文组合图形(multiple plots)。文章从数…...

springMVC-9数据格式化

数据格式化 学习目标&#xff1a; 理解在我们提交数据(比如表单时)&#xff0c;SpringMVC怎样对提交的数据进行转换和处理的 Spring MVC 上下文中内建了很多转换器&#xff0c;可完成大多数 Java 类型的转换工作。 基本数据类型可以和字符串之间自动完成转换 应用实例-页面…...

Kafka 和Redis 在系统架构中的位置

Kafka 位置&#xff1a;位于应用层和数据存储层之间&#xff0c;作为消息队列和数据传输中间件。作用&#xff1a; 数据收集与传输&#xff1a;收集应用层产生的数据&#xff0c;传输到后端数据存储系统。消息队列&#xff1a;实现应用层各服务之间的异步通信和解耦。与应用层…...

【Spring AI】如何实现文生图功能

在人工智能与软件开发深度融合的当下&#xff0c;Spring AI 作为构建 AI 驱动应用的有力框架&#xff0c;能够便捷集成各类 AI 能力。 文生图技术可将文本描述转化为图像&#xff0c;极具应用价值。接下来&#xff0c;我给大家详细讲解一下如何使用 Spring AI 调用文生图功能。…...

【ISAQB大纲解读】Kafka消息总线被视为“自下而上设计”?

Kafka消息总线被视为“自下而上设计”的典型案例&#xff0c;核心在于其设计路径和演化逻辑完全符合自下而上方法的本质特征&#xff1a; 自下而上设计的核心逻辑 #mermaid-svg-pDSqW0S2h0bj15iN {font-family:"trebuchet ms",verdana,arial,sans-serif;font-size:16…...

ISBN书号查询接口如何用PHP实现调用?

一、什么是ISBN书号查询接口 ISBN数据查询接口是一项图书信息查询服务。它基于全球通用的ISBN编码系统&#xff0c;帮助用户快速获取图书的详细信息&#xff0c;包括书名、作者、出版社、出版时间、价格、封面等关键字段。 该接口广泛应用于电商平台、图书馆管理系统、二手书…...

什么是 Docker Compose 的网络(network),为什么你需要它,它是怎么工作的

Docker Compose 的网络就是&#xff1a;让多个容器之间能像“连上同一个局域网”一样互相通信&#xff0c;不用管 IP&#xff0c;用服务名就能访问彼此。 就像家里连接到同一个 WiFi 的手机、电脑、电视&#xff0c;它们都能互相发现对方&#xff0c;Docker 里的容器也是一样 …...

嵌入式Linux 期末复习指南(上)

鉴于互联网上针对本科目相关复习视频及资料过少&#xff0c; 撰写本篇期末复习指南用作期末复习知识点扫盲&#xff0c;以应对本科期末考试及格之用。 由于任课老师并透露考试范围或任何有关试卷的相关信息&#xff0c;本篇指南基于教材、上机实验报告及作者经验编写&#xff0…...

SpringBoot3.2新特性:JdbcClient

文章目录 一、简介二、使用1、支持隐式位置参数2、通过索引设置位置参数3、支持 Name / Value 对命名参数4、通过 Map 设置命名参数5、使用 JdbClient 执行更新操作6、使用示例 参考资料 一、简介 Spring 6.1 中新添加了 JdbcClient 接口&#xff0c;它提供了 Fluent 风格的 A…...

Dify:启动 Web 服务的详细指南

1. 进入 web 目录 cd web解释&#xff1a; cd 是 “change directory” 的缩写&#xff0c;用于切换当前工作目录。您需要进入项目的 web 目录&#xff0c;这是前端代码所在的位置。在这个目录下&#xff0c;您可以执行构建和启动 Web 服务的相关命令。 2. 安装依赖 pnpm in…...

3.1 HarmonyOS NEXT分布式数据管理实战:跨设备同步、端云协同与安全保护

HarmonyOS NEXT分布式数据管理实战&#xff1a;跨设备同步、端云协同与安全保护 在万物互联的时代&#xff0c;数据的跨设备流转与安全共享是全场景应用的核心需求。HarmonyOS NEXT通过分布式数据管理技术&#xff0c;实现了设备间数据的实时同步与端云协同&#xff0c;为开发…...

Aop + 注解实现数据字典类型转换 EasyExcel导出

Aop 注解 实现数据字典类型转换 文章目录 Aop 注解 实现数据字典类型转换一、基础方式✅字典转换简介&#x1f449;实现步骤✅ 1. 定义自定义注解Dict ✅ 2. 定义查询字典项的两个方法✅ 3. 定义Aop拦截我们查询的方法✅ 4. VO映射类✅ 5. Controller层✅ 6. serviceImpl✅ 7. …...

Python 元组方法全集详解

Python 元组方法全集详解 在 Python 中,元组(tuple)是不可变序列类型,因此支持的操作比列表少。以下是元组支持的所有方法和操作: 一、元组核心方法 1. 创建元组 # 标准创建 t = (1, 2, 3) # (1, 2, 3) t = tuple(...