当前位置： 首页 > news >正文

jmx prometheus引起的一次cpu飙高

news 2026/5/13 16:06:59

用户接入了jmx agent进行prometheus监控后，在某个时间点出现cpu飙高

排查思路：
1、top，找到java进程ID
2、top -Hp 进程ID，找到java进程下占用高CPU的线程ID
3、jstack 进程ID，找到那个高CPU的线程ID的堆栈。
4、分析堆栈信息

通过排查思路，找到了是jmx prometheus的线程：
在这里插入图片描述
jmx prometheus的源码：
在这里插入图片描述
这里只有for循环，很简单的逻辑，所以我们在思考会不会数据量太多了。

通过arthas查看方法返回数据：
watch io.prometheus.jmx.$ findExisting ‘{params,returnObj,throwExp}’ -n 5 -x 3
查看meban数据大小
在这里插入图片描述
prometheus 数据：kafka的客户端id一直在变，所以猜想是不是数据量越大prometheus就会越大
在这里插入图片描述
结论：kafaka 消费数据量比较大的时候，jmx 数据就会比较大。jmx prometheus默认的逻辑是会读取全部的java mbean然后转换成prometheus 数据格式，mbean数据比较多的时候，循环就会比较多，cpu计算就会飙高。mbean中的数据有业务客户端的添加进去的，它的数据量是不可控的。

解决方案： 不读取所有的mbean数据，只读取指定的数据格式

相关文章：

jmx prometheus引起的一次cpu飙高

用户接入了jmx agent进行prometheus监控后，在某个时间点出现cpu飙高 排查思路： 1、top，找到java进程ID 2、top -Hp 进程ID，找到java进程下占用高CPU的线程ID 3、jstack 进程ID，找到那个高CPU的线程ID的堆栈。 4、分析堆…...

编程日记 2023/2/19 2:13:37

Android 虚拟 A/B 详解(六) SnapshotManager 之状态数据

本文为洛奇看世界(guyongqiangx)原创，转载请注明出处。 原文链接：https://blog.csdn.net/guyongqiangx/article/details/129094203 Android 虚拟 A/B 分区《AAndroid 虚拟 A/B 分区》系列，更新中，文章列表： Android 虚拟分区详解(一) 参考资料推荐Android 虚拟分区详解(二…...

编程日记 2023/3/15 3:37:30

Python快速入门系列之一：Python对象

Python对象1. 列表（list）2. 元组（tuple）3. 字典（dict）4. 集合（set）5. 字符串（string）6. BIF （Built-in Function）7. 列表、集合以及字…...

编程日记 2023/2/19 2:10:01

【博客626】不同类型的ARP报文作用以及ARP老化机制

不同类型的ARP报文作用以及ARP老化机制 1、ARP协议及报文 2、不同类型的ARP报文作用 3、ARP工作原理 4、ARP老化机制 5、Linux ARP老化机制 ARP状态机： 在上图中，我们看到只有arp缓存项的reachable状态对于外发包是可用的，对于stale状态的…...

编程日记 2023/2/19 2:08:49

nacos discovery和config

微服务和nacos版本都在2.x及之后。1、discovery用于服务注册，将想要注册的服务注册到nacos中，被naocs发现。pom引入的依赖是：yml配置文件中：2、config用于获取nacos配置管理->配置列表下配置文件中的内容pom引入的依赖是&#…...

编程日记 2023/2/19 2:07:39

【算法数据结构体系篇class06】：堆、大根堆、小根堆、优先队列

一、堆结构1）堆结构就是用数组实现的完全二叉树结构2）完全二叉树中如果每棵子树的最大值都在顶部就是大根堆3）完全二叉树中如果每棵子树的最小值都在顶部就是小根堆4）堆结构的heapInsert与heapify操作5）堆结构的增大ad…...

编程日记 2023/2/19 2:06:29

试题 算法提高 最小字符串

资源限制内存限制：256.0MB C/C时间限制：2.0s Java时间限制：6.0s Python时间限制：10.0s问题描述给定一些字符串(只包含小写字母)，要求将他们串起来构成一个字典序最小的字符串。输入格式第一行T,表示有T组数据。接下来T…...

编程日记 2023/2/19 2:05:20

已解决ImportError: cannot import name ‘featureextractor‘ from ‘radiomics‘

已解决from radiomics import featureextractor导包，抛出ImportError: cannot import name ‘featureextractor‘ from ‘radiomics‘异常的正确解决方法，亲测有效！！！ 文章目录报错问题报错翻译报错原因解决方法联系博…...

编程日记 2023/2/19 2:04:10

乡村振兴研究：全网最全指标农村经济面板数据（2000-2021年）

数据来源：国家统计局 时间跨度：2000-2021年 区域范围：全国31省 指标说明： 部分样例数据： 行政区划代码地区年份经度纬度乡镇数(个)乡数(个)镇数(个)村民委员会数(个)乡村户数(万户)乡村人口(万人)乡村从业人员(万人…...

编程日记 2023/2/19 2:02:58

C语言中用rand()函数产生一随机数

在C语言中如何产生一个随机数呢&#xff1f;用rand()函数。 rand()函数在头文件&#xff1a;#include <stdio.h>中&#xff0c;函数原型&#xff1a;int rand(void);。rand()会返回一个范围在0到RAND_MAX&#xff08;32767&#xff09;之间的随机数&#xff08;整数&…...

编程日记 2023/2/19 2:00:38

关于系统架构

1.系统架构分类: C/S架构 B/S架构 2.C/S架构 Client / Server&#xff08;客户端 / 服务器&#xff09; 特点&#xff1a;需要安装特定的客户端软件。 C/S架构的系统优点和缺点: 优点&#xff1a; 1)速度快(软件中数据大部分都是集成到客户端当中&#xff0c;很少量的数据从服…...

编程日记 2023/2/19 1:59:28

LeetCode 1237. 找出给定方程的正整数解

原题链接 难度&#xff1a;middle\color{orange}{middle}middle 2023/2/18 每日一题 题目描述 给你一个函数 f(x,y)f(x, y)f(x,y) 和一个目标结果 zzz&#xff0c;函数公式未知&#xff0c;请你计算方程 f(x,y)zf(x,y) zf(x,y)z 所有可能的正整数 数对 xxx 和 yyy。满足条件…...

编程日记 2023/2/19 1:58:18

【ArcGIS Pro二次开发】(5)：UI管理_自定义控件的位置

新增的自定义控件一般放在默认的【加载项】选项卡下&#xff0c;但是根据需求&#xff0c;我们可能需要将控件放在新的自定义选项卡下&#xff0c;在自定义选项卡添加系统自带的控件&#xff0c;将自定义的按钮等控件放在右键菜单栏里以方便使用&#xff0c;等等。 下面就以一…...

编程日记 2023/2/19 1:57:08

学习OpenGL图形2D/3D编程

环境&#xff1a;WindowsVisual Studio 2019最流行的几个库&#xff1a;GLUT&#xff0c;SDL&#xff0c;SFML和GLFWGLFWGLAD库查看显卡OPENGL支持情况VS2019glfwgladopenGL3.3顶点着色器片段着色器VAO-VBO-(EBO)->渲染VAO-VBO-EBO->texture纹理矩阵matrix对图形transfor…...

编程日记 2023/2/19 1:56:00

2023美赛思路 | A题时间序列预测任务的模型选择总结

2023美赛思路 | A题时间序列预测任务的模型选择总结 目录 2023美赛思路 | A题时间序列预测任务的模型选择总结基本介绍数据描述任务介绍时序模型基本介绍 这道题分析植被就行，主要涉及不同植被间的相互作用，有竞争有相互促进，我查了下“植物科学数据中心”和“中国迁地保护植…...

编程日记 2023/2/19 1:54:51

PHP教材管理系统设计（源代码+毕业论文）

【P003】PHP教材管理系统设计&#xff08;源代码论文&#xff09; 设计方案 本系统采用B/S结构&#xff0c;所有的程序及数据都放在服务器上&#xff0c;终端在取得相应的权限后使用Web页面浏览&#xff0c;录入&#xff0c;修改等功能。在语言方面使用PHP语言&#xff0c;在…...

编程日记 2023/2/19 1:53:42

nps内网穿透工具

一、准备一台有公网ip的服务器 https://github.com/ehang-io/nps/releases 在这个地址下载服务端的安装包&#xff0c;centos的下载这个 上传到服务器上。 二、然后解压&#xff0c;安装&#xff0c;启动 [rootadministrator ~]# tar xzvf linux_amd64_server.tar.gz [roo…...

编程日记 2023/2/19 1:52:33

webpack打包时的热模块替代配置以及source-map

1.HMR 在devServer当中添加hot:true 热模块化功能 含义:当其中有一个文件发生变化的时候&#xff0c;那么就会被重新打包一次&#xff0c;极大的提高了构建速度 A.样式文件:可以使用HMR功能&#xff0c;因为在style-loader当中实现了 B.js文件:默认不能使用HMR功能&#xf…...

编程日记 2023/2/19 1:51:25

Seata架构篇 - TCC模式

TCC 模式 概述 TCC 是分布式事务中的两阶段提交协议&#xff0c;它的全称为 Try-Confirm-Cancel&#xff0c;即资源预留&#xff08;Try&#xff09;、确认操作&#xff08;Confirm&#xff09;、取消操作&#xff08;Cancel&#xff09;。Try&#xff1a;对业务资源的检查并…...

编程日记 2023/2/19 1:50:14

前端最全面试题整理

前端基础 一、 HTTP/HTML/浏览器 1、说一下 http 和 https https 的 SSL 加密是在传输层实现的。 (1) http 和 https 的基本概念 http: 超文本传输协议&#xff0c;是互联网上应用最为广泛的一种网络协议&#xff0c;是一个客户端和服务器端请求和应答的标准&#xff08;T…...

编程日记 2023/2/19 1:49:02

【限时开放】DeepSeek内部调试工具集首次对外披露：含Request ID全链路追踪、模型响应热力图与异常模式识别器

更多请点击&#xff1a; https://intelliparadigm.com 第一章&#xff1a;DeepSeek API接入开发教程 DeepSeek 提供了稳定、高性能的大模型 API 接口&#xff0c;支持文本生成、对话补全与函数调用等多种能力。接入前需在官方控制台申请 API Key&#xff0c;并确保账户已开通对…...

编程新知 2026/5/13 16:05:40

手把手教你用Python/Node.js快速接入抖音开放平台，实现用户信息获取

Python/Node.js实战&#xff1a;抖音开放平台用户信息获取全流程解析 抖音开放平台为开发者提供了丰富的用户数据接口&#xff0c;但很多技术团队在对接过程中常因OAuth2.0流程复杂而卡在授权环节。本文将用两种主流技术栈演示如何快速完成从授权到获取用户信息的完整闭环。 1.…...

编程新知 2026/5/13 15:22:38

ClawdOS：为AI Agent构建可视化操作系统的全栈实践

1. 项目概述&#xff1a;为你的AI大脑装上眼睛和手如果你和我一样&#xff0c;是OpenClaw&#xff08;前身是Moltbot/Clawdbot&#xff09;的早期用户&#xff0c;那你一定经历过这种场景&#xff1a;在终端里&#xff0c;你的AI助手聪明绝顶&#xff0c;能写代码、查资料、分析…...

编程新知 2026/5/13 15:13:53

深度探索JD-GUI：Java字节码逆向工程与代码解析实战剖析

深度探索JD-GUI&#xff1a;Java字节码逆向工程与代码解析实战剖析 【免费下载链接】jd-gui A standalone Java Decompiler GUI 项目地址: https://gitcode.com/gh_mirrors/jd/jd-gui 在Java开发与逆向工程领域&#xff0c;Java反编译、字节码分析、代码逆向已成为开发者…...

编程新知 2026/5/13 14:57:48

RPG Maker Decrypter终极指南：轻松解密游戏资源文件

RPG Maker Decrypter终极指南&#xff1a;轻松解密游戏资源文件 【免费下载链接】RPGMakerDecrypter Tool for decrypting and extracting RPG Maker XP, VX and VX Ace encrypted archives and MV and MZ encrypted files. 项目地址: https://gitcode.com/gh_mirrors/rp/RPG…...

编程新知 2026/5/13 13:58:08

3个步骤搭建Sunshine游戏串流服务器：从零到一的完整指南

3个步骤搭建Sunshine游戏串流服务器&#xff1a;从零到一的完整指南 【免费下载链接】Sunshine Self-hosted game stream host for Moonlight. 项目地址: https://gitcode.com/GitHub_Trending/su/Sunshine 你是否曾经梦想过在客厅的电视上玩书房电脑里的3A大作&#xf…...

编程新知 2026/5/13 11:22:40

终极Vim分屏体验：vim-airline轻量级状态栏与标签栏全攻略

终极Vim分屏体验&#xff1a;vim-airline轻量级状态栏与标签栏全攻略 【免费下载链接】vim-airline lean & mean status/tabline for vim thats light as air 项目地址: https://gitcode.com/gh_mirrors/vi/vim-airline vim-airline是一款轻量级的Vim状态栏与标签栏…...

编程新知 2026/5/13 11:11:01

从手机5G到智能声呐：LMS自适应波束形成算法在真实场景里是怎么用的？

从手机5G到智能声呐&#xff1a;LMS自适应波束形成算法的工程实践 当你在嘈杂的会议室里对着智能音箱说话时&#xff0c;它为何能精准捕捉你的声音而忽略背景噪音&#xff1f;当5G基站需要同时服务数百个移动设备时&#xff0c;又是如何避免信号相互干扰&#xff1f;这些看似毫…...

编程新知 2026/5/13 10:37:34

ScienceClaw：基于Python的学术爬虫工具，高效抓取文献与课程资料

1. 项目概述与核心价值 最近在GitHub上看到一个挺有意思的项目&#xff0c;叫“ScienceClaw”&#xff0c;作者是beita6969。光看这个名字&#xff0c;你可能觉得有点摸不着头脑——“科学爪”&#xff1f;这到底是干嘛的&#xff1f;作为一个在开源社区混迹多年的老鸟&#xf…...

编程新知 2026/5/13 8:55:29

基于MCP协议构建技术生态分析工具：架构设计与工程实践

1. 项目概述&#xff1a;一个技术生态分析工具的诞生最近在折腾一个挺有意思的东西&#xff0c;一个叫apifyforge/tech-ecosystem-analysis-mcp的项目。光看这个名字&#xff0c;可能有点唬人&#xff0c;但说白了&#xff0c;它就是一个用来“解剖”技术生态系统的工具。想象一…...

编程新知 2026/5/13 8:19:14