当前位置： 首页 > news >正文

jmx prometheus引起的一次cpu飙高

news 2026/3/28 2:54:06

用户接入了jmx agent进行prometheus监控后，在某个时间点出现cpu飙高

排查思路：
1、top，找到java进程ID
2、top -Hp 进程ID，找到java进程下占用高CPU的线程ID
3、jstack 进程ID，找到那个高CPU的线程ID的堆栈。
4、分析堆栈信息

通过排查思路，找到了是jmx prometheus的线程：
在这里插入图片描述
jmx prometheus的源码：
在这里插入图片描述
这里只有for循环，很简单的逻辑，所以我们在思考会不会数据量太多了。

通过arthas查看方法返回数据：
watch io.prometheus.jmx.$ findExisting ‘{params,returnObj,throwExp}’ -n 5 -x 3
查看meban数据大小
在这里插入图片描述
prometheus 数据：kafka的客户端id一直在变，所以猜想是不是数据量越大prometheus就会越大
在这里插入图片描述
结论：kafaka 消费数据量比较大的时候，jmx 数据就会比较大。jmx prometheus默认的逻辑是会读取全部的java mbean然后转换成prometheus 数据格式，mbean数据比较多的时候，循环就会比较多，cpu计算就会飙高。mbean中的数据有业务客户端的添加进去的，它的数据量是不可控的。

解决方案： 不读取所有的mbean数据，只读取指定的数据格式

相关文章：

jmx prometheus引起的一次cpu飙高

用户接入了jmx agent进行prometheus监控后，在某个时间点出现cpu飙高 排查思路： 1、top，找到java进程ID 2、top -Hp 进程ID，找到java进程下占用高CPU的线程ID 3、jstack 进程ID，找到那个高CPU的线程ID的堆栈。 4、分析堆…...

编程日记 2023/2/19 2:13:37

Android 虚拟 A/B 详解(六) SnapshotManager 之状态数据

本文为洛奇看世界(guyongqiangx)原创，转载请注明出处。 原文链接：https://blog.csdn.net/guyongqiangx/article/details/129094203 Android 虚拟 A/B 分区《AAndroid 虚拟 A/B 分区》系列，更新中，文章列表： Android 虚拟分区详解(一) 参考资料推荐Android 虚拟分区详解(二…...

编程日记 2023/3/15 3:37:30

Python快速入门系列之一：Python对象

Python对象1. 列表（list）2. 元组（tuple）3. 字典（dict）4. 集合（set）5. 字符串（string）6. BIF （Built-in Function）7. 列表、集合以及字…...

编程日记 2023/2/19 2:10:01

【博客626】不同类型的ARP报文作用以及ARP老化机制

不同类型的ARP报文作用以及ARP老化机制 1、ARP协议及报文 2、不同类型的ARP报文作用 3、ARP工作原理 4、ARP老化机制 5、Linux ARP老化机制 ARP状态机： 在上图中，我们看到只有arp缓存项的reachable状态对于外发包是可用的，对于stale状态的…...

编程日记 2023/2/19 2:08:49

nacos discovery和config

微服务和nacos版本都在2.x及之后。1、discovery用于服务注册，将想要注册的服务注册到nacos中，被naocs发现。pom引入的依赖是：yml配置文件中：2、config用于获取nacos配置管理->配置列表下配置文件中的内容pom引入的依赖是&#…...

编程日记 2023/2/19 2:07:39

【算法数据结构体系篇class06】：堆、大根堆、小根堆、优先队列

一、堆结构1）堆结构就是用数组实现的完全二叉树结构2）完全二叉树中如果每棵子树的最大值都在顶部就是大根堆3）完全二叉树中如果每棵子树的最小值都在顶部就是小根堆4）堆结构的heapInsert与heapify操作5）堆结构的增大ad…...

编程日记 2023/2/19 2:06:29

试题 算法提高 最小字符串

资源限制内存限制：256.0MB C/C时间限制：2.0s Java时间限制：6.0s Python时间限制：10.0s问题描述给定一些字符串(只包含小写字母)，要求将他们串起来构成一个字典序最小的字符串。输入格式第一行T,表示有T组数据。接下来T…...

编程日记 2023/2/19 2:05:20

已解决ImportError: cannot import name ‘featureextractor‘ from ‘radiomics‘

已解决from radiomics import featureextractor导包，抛出ImportError: cannot import name ‘featureextractor‘ from ‘radiomics‘异常的正确解决方法，亲测有效！！！ 文章目录报错问题报错翻译报错原因解决方法联系博…...

编程日记 2023/2/19 2:04:10

乡村振兴研究：全网最全指标农村经济面板数据（2000-2021年）

数据来源：国家统计局 时间跨度：2000-2021年 区域范围：全国31省 指标说明： 部分样例数据： 行政区划代码地区年份经度纬度乡镇数(个)乡数(个)镇数(个)村民委员会数(个)乡村户数(万户)乡村人口(万人)乡村从业人员(万人…...

编程日记 2023/2/19 2:02:58

C语言中用rand()函数产生一随机数

在C语言中如何产生一个随机数呢&#xff1f;用rand()函数。 rand()函数在头文件&#xff1a;#include <stdio.h>中&#xff0c;函数原型&#xff1a;int rand(void);。rand()会返回一个范围在0到RAND_MAX&#xff08;32767&#xff09;之间的随机数&#xff08;整数&…...

编程日记 2023/2/19 2:00:38

关于系统架构

1.系统架构分类: C/S架构 B/S架构 2.C/S架构 Client / Server&#xff08;客户端 / 服务器&#xff09; 特点&#xff1a;需要安装特定的客户端软件。 C/S架构的系统优点和缺点: 优点&#xff1a; 1)速度快(软件中数据大部分都是集成到客户端当中&#xff0c;很少量的数据从服…...

编程日记 2023/2/19 1:59:28

LeetCode 1237. 找出给定方程的正整数解

原题链接 难度&#xff1a;middle\color{orange}{middle}middle 2023/2/18 每日一题 题目描述 给你一个函数 f(x,y)f(x, y)f(x,y) 和一个目标结果 zzz&#xff0c;函数公式未知&#xff0c;请你计算方程 f(x,y)zf(x,y) zf(x,y)z 所有可能的正整数 数对 xxx 和 yyy。满足条件…...

编程日记 2023/2/19 1:58:18

【ArcGIS Pro二次开发】(5)：UI管理_自定义控件的位置

新增的自定义控件一般放在默认的【加载项】选项卡下&#xff0c;但是根据需求&#xff0c;我们可能需要将控件放在新的自定义选项卡下&#xff0c;在自定义选项卡添加系统自带的控件&#xff0c;将自定义的按钮等控件放在右键菜单栏里以方便使用&#xff0c;等等。 下面就以一…...

编程日记 2023/2/19 1:57:08

学习OpenGL图形2D/3D编程

环境&#xff1a;WindowsVisual Studio 2019最流行的几个库&#xff1a;GLUT&#xff0c;SDL&#xff0c;SFML和GLFWGLFWGLAD库查看显卡OPENGL支持情况VS2019glfwgladopenGL3.3顶点着色器片段着色器VAO-VBO-(EBO)->渲染VAO-VBO-EBO->texture纹理矩阵matrix对图形transfor…...

编程日记 2023/2/19 1:56:00

2023美赛思路 | A题时间序列预测任务的模型选择总结

2023美赛思路 | A题时间序列预测任务的模型选择总结 目录 2023美赛思路 | A题时间序列预测任务的模型选择总结基本介绍数据描述任务介绍时序模型基本介绍 这道题分析植被就行，主要涉及不同植被间的相互作用，有竞争有相互促进，我查了下“植物科学数据中心”和“中国迁地保护植…...

编程日记 2023/2/19 1:54:51

PHP教材管理系统设计（源代码+毕业论文）

【P003】PHP教材管理系统设计&#xff08;源代码论文&#xff09; 设计方案 本系统采用B/S结构&#xff0c;所有的程序及数据都放在服务器上&#xff0c;终端在取得相应的权限后使用Web页面浏览&#xff0c;录入&#xff0c;修改等功能。在语言方面使用PHP语言&#xff0c;在…...

编程日记 2023/2/19 1:53:42

nps内网穿透工具

一、准备一台有公网ip的服务器 https://github.com/ehang-io/nps/releases 在这个地址下载服务端的安装包&#xff0c;centos的下载这个 上传到服务器上。 二、然后解压&#xff0c;安装&#xff0c;启动 [rootadministrator ~]# tar xzvf linux_amd64_server.tar.gz [roo…...

编程日记 2023/2/19 1:52:33

webpack打包时的热模块替代配置以及source-map

1.HMR 在devServer当中添加hot:true 热模块化功能 含义:当其中有一个文件发生变化的时候&#xff0c;那么就会被重新打包一次&#xff0c;极大的提高了构建速度 A.样式文件:可以使用HMR功能&#xff0c;因为在style-loader当中实现了 B.js文件:默认不能使用HMR功能&#xf…...

编程日记 2023/2/19 1:51:25

Seata架构篇 - TCC模式

TCC 模式 概述 TCC 是分布式事务中的两阶段提交协议&#xff0c;它的全称为 Try-Confirm-Cancel&#xff0c;即资源预留&#xff08;Try&#xff09;、确认操作&#xff08;Confirm&#xff09;、取消操作&#xff08;Cancel&#xff09;。Try&#xff1a;对业务资源的检查并…...

编程日记 2023/2/19 1:50:14

前端最全面试题整理

前端基础 一、 HTTP/HTML/浏览器 1、说一下 http 和 https https 的 SSL 加密是在传输层实现的。 (1) http 和 https 的基本概念 http: 超文本传输协议&#xff0c;是互联网上应用最为广泛的一种网络协议&#xff0c;是一个客户端和服务器端请求和应答的标准&#xff08;T…...

编程日记 2023/2/19 1:49:02

零基础学编程：借助快马与claude code生成交互式代码示例入门javascript

最近刚开始学习JavaScript&#xff0c;发现数组操作是编程中最基础也最常用的部分。作为一个完全零基础的小白&#xff0c;我尝试用InsCode(快马)平台结合Claude Code来学习这个知识点&#xff0c;整个过程比想象中顺利很多。这里记录下我的学习过程&#xff0c;希望能帮到同样…...

编程新知 2026/3/28 2:20:51

终极Chrome全页截图指南：一键保存完整网页内容的高效方案

终极Chrome全页截图指南&#xff1a;一键保存完整网页内容的高效方案 【免费下载链接】full-page-screen-capture-chrome-extension One-click full page screen captures in Google Chrome 项目地址: https://gitcode.com/gh_mirrors/fu/full-page-screen-capture-chrome-ex…...

编程新知 2026/3/28 1:31:46

IPD实战指南：CBB模块化设计如何加速产品创新与资源整合

1. CBB模块化设计的本质与价值 第一次接触CBB这个概念时&#xff0c;我正负责一款智能家居产品的研发。当时团队为了赶进度&#xff0c;每个新产品都从零开始设计电路板&#xff0c;结果发现80%的功能模块都是重复的。这种低效的开发方式让我开始思考&#xff1a;能不能像搭积木…...

编程新知 2026/3/27 23:10:37

AS_BH1750库：BH1750FVI环境光传感器嵌入式驱动设计与工程实践

1. AS_BH1750库概述&#xff1a;面向嵌入式系统的BH1750FVI环境光传感器驱动设计与工程实践BH1750FVI是由ROHM Semiconductor推出的高精度数字环境光传感器&#xff08;Ambient Light Sensor, ALS&#xff09;&#xff0c;采用IC接口&#xff0c;具备宽动态范围&#xff08;0.1…...

编程新知 2026/3/27 23:04:34

无需编程！用OFA模型快速搭建图文匹配工具：上传即测，结果秒出

无需编程&#xff01;用OFA模型快速搭建图文匹配工具&#xff1a;上传即测&#xff0c;结果秒出 1. 图文匹配的痛点与解决方案 你有没有遇到过这样的困扰&#xff1f;在网上购物时&#xff0c;商品图片和描述对不上&#xff1b;浏览社交媒体时&#xff0c;配图与文字内容完全…...

编程新知 2026/3/27 22:34:20

s2-pro效果惊艳展示：情感化语音合成——喜悦、平静、关切语调

s2-pro效果惊艳展示&#xff1a;情感化语音合成——喜悦、平静、关切语调 1. 专业级语音合成新标杆 s2-pro作为Fish Audio开源的专业级语音合成模型镜像&#xff0c;正在重新定义文本转语音的技术边界。不同于传统单调的语音合成&#xff0c;这款工具能够精准捕捉并复现人类语…...

编程新知 2026/3/27 20:35:37

OpenGL之标准化设备坐标（Normalized Device Coordinate =NDC）

NDC坐标本质是比例1. 设备无关性NDC 使图形渲染与屏幕分辨率无关。无论屏幕是 1280720 还是 19201080&#xff0c;同样的 NDC 坐标都会渲染出相同比例的图形&#xff08;图形会随着分辨率变化而自动拉伸&#xff09;&#xff0c;表现如下&#xff1a;┌────────────…...

编程新知 2026/3/27 20:13:08

手把手教你用R玩转MSigDB：从数据库下载、基因集构建到GSEA/GSVA完整流程

手把手教你用R玩转MSigDB&#xff1a;从数据库下载、基因集构建到GSEA/GSVA完整流程 如果你正在寻找一个权威的基因集数据库来支持你的转录组功能分析&#xff0c;MSigDB&#xff08;Molecular Signatures Database&#xff09;无疑是首选。作为Broad研究所维护的核心资源&…...

编程新知 2026/3/27 19:59:04

Wan2.2-I2V-A14B部署教程：系统盘50GB+数据盘40GB最小化配置实操

Wan2.2-I2V-A14B部署教程&#xff1a;系统盘50GB数据盘40GB最小化配置实操 1. 镜像概述与核心特性 Wan2.2-I2V-A14B是一款专为文生视频任务优化的私有部署镜像&#xff0c;特别针对RTX 4090D 24GB显存显卡进行了深度优化。这个镜像最大的特点是开箱即用&#xff0c;内置了完整…...

编程新知 2026/3/27 18:52:40

手把手拆解：一个QKD系统中的‘诱骗态’光源硬件是怎么搭出来的？

手把手拆解&#xff1a;一个QKD系统中的‘诱骗态’光源硬件是怎么搭出来的&#xff1f; 量子密钥分发&#xff08;QKD&#xff09;技术近年来从实验室走向商业化应用&#xff0c;其中诱骗态光源的设计与实现成为工程落地的核心挑战之一。不同于理论论文中简化的模型&#xff0c…...

编程新知 2026/3/27 18:22:15