当前位置: 首页 > news >正文

谷粒商城实战笔记-144-性能压测-性能监控-堆内存与垃圾回收

文章目录

  • 一,两种类型的应用
    • 1,CPU密集型应用
      • 示例:Apache Spark
    • 2,IO密集型应用
      • 示例:MySQL
  • 二,监控

我们通过压力测试对接口进行了性能评估,以确定其是否满足性能要求。
如果不符合,就需要进行优化。

优化时需要考虑多方面因素,如:

  • 数据库性能
  • SQL语句效率
  • 应用程序的编码质量
  • 中间件的影响
  • 网络IO
  • 操作系统

性能优化首先要判断应用是CPU密集型还是IO密集型

一,两种类型的应用

CPU密集型应用需要大量计算,而IO密集型应用则涉及大量的数据传输和读写。针对不同类型的应用,优化策略也不同。

例如,CPU密集型应用可以通过增加CPU或使用多台服务器来分担任务。

而IO密集型应用则需要考虑使用固态硬盘、增加内存、缓存技术和提高网络传输效率。

1,CPU密集型应用

CPU密集型应用是指那些需要大量计算资源,对处理器性能要求较高的应用。这类应用的特点是CPU使用率很高,而IO操作相对较少。它们通常涉及到复杂的算法处理、数据分析或图形渲染等任务。

示例:Apache Spark

Apache Spark是一个开源的分布式计算系统,它提供了一个快速和通用的集群计算平台。Spark广泛应用于大数据处理和机器学习领域,其核心是一个优化的内存计算引擎,能够处理大规模数据集。

性能特点:

  • 内存计算: Spark利用内存进行数据计算,减少了磁盘IO操作,从而提高了处理速度。
  • 并行处理: 通过并行处理,Spark能够将任务分配到多个CPU核心上,实现高效的计算。

2,IO密集型应用

IO密集型应用是指那些主要受限于输入输出操作的应用,如网络服务、数据库操作等。这类应用的特点是CPU使用率相对较低,但对IO操作的依赖很高。

示例:MySQL

MySQL是一个广泛使用的开源关系数据库管理系统。数据库操作通常涉及到大量的磁盘读写,因此MySQL是一个典型的IO密集型应用。

性能特点:

  • 缓冲管理: MySQL通过缓冲池来减少磁盘IO操作,提高查询性能。
  • 索引优化: 通过优化索引结构,MySQL能够快速定位数据,减少IO操作的次数。

二,监控

就像中医看病会望闻问切一样,在计算机应用优化过程中,也需要收集足够的信息才能定位到问题,根据问题制定解决方案,这些信息就是各种监控指标。

我们需要监控CPU和内存的使用率、线程数等,以便进行合理的优化和分析。

Java的内存模型和垃圾回收机制对于性能优化至关重要。

Java虚拟机(JVM)的内存分为多个区域,包括堆、方法区、程序计数器、本地方法栈和虚拟机栈。

其中,堆是存储对象实例和数组的地方,是优化的重点。

JVM的执行引擎负责执行方法调用,而本地方法则涉及操作系统的接口。

JVM的堆分为新生代和老年代。新生代包括伊甸园区和两个幸存者区(S0和S1)。

对象首先在伊甸园区创建,如果内存不足,则触发Minor GC,清理新生代中不再使用的对象,并将存活的对象移动到幸存者区。

幸存者区的两个区域会交替使用,以确保总有一块空间是空闲的。

当对象在幸存者区存活超过一定次数后,它们会被晋升到老年代。老年代存储的是长期存活的对象和大对象。

如果新生代或老年代的内存不足,会触发Full GC,这是一种成本较高的垃圾回收操作。因此,在性能优化时,要尽量避免Full GC的发生。

相关文章:

谷粒商城实战笔记-144-性能压测-性能监控-堆内存与垃圾回收

文章目录 一,两种类型的应用1,CPU密集型应用示例:Apache Spark 2,IO密集型应用示例:MySQL 二,监控 我们通过压力测试对接口进行了性能评估,以确定其是否满足性能要求。 如果不符合,就…...

大模型综述

《Harnessing the Power of LLMs in Practice: A Survey on ChatGPT and Beyond》论文阅读 模型架构 两种架构: encoder-decoder架构/encoder架构:T5/BERTdecoder架构:GPT4 特点LLMsencoder-decoderorencoder-onlyBERT-style训练:掩码语言模型类型:…...

Python 常用内置函数

目录 1、enumerate函数 1.1、for循环中使用 1.2、enumerate指定索引的起始值 1.3、enumerate在线程中的作用 2、Map 函数 2.1、map()函数可以传多个迭代器对象 3、lambda表达式(匿名函数) 示例 4、sort函数和sorted函数 4.1、sort()函数 4.2、…...

什么是大数据?

1. 大数据定义 大数据到底是什么? 大数据的定义是数据种类更多、数量更多、速度更快。这也被称为三个“V”。 简单来说,大数据是更大、更复杂的数据集,尤其是来自新数据源的数据集。这些数据集非常庞大,传统数据处理软件根本无…...

Linux 内核源码分析---资源分配及系统总线

资源管理 Linux提供通用的构架,用于在内存中构建数据结构。这些结构描述了系统中可用的资源,使得内核代码能够管理和分配资源。 其中关键的数据结构resource如下: 用于连接parent, child, sibling成员规则如下: 1、每个子结点只…...

C# POST请求 各种实现方法梳理

目录 1.首先是基础的参数 2.使用RestClient 3.使用封装库 4.使用微软原生库进行请求 5.使用HttpClient进行请求 C#代码中,实现Http/Https 中的POST请求,可以有很多种方式,下面就梳理下我常用的几种方式,给大家借鉴 1.首先…...

《MySQL数据库》数据导入、导出、表处理—/—<4>

一、插入数据 1、可使用外部工具navicat导入数据的情况下 因为部分公司不允许使用外部工具去导入数据 对于大批量数据,除了上节课中使用导入向导插入数据,也可在vscode中打开csv文件,然后选中光标,长按shiftctrl,拖动…...

Java I/O (Input/Output)——文件字节流

博客主页:誓则盟约系列专栏:Java SE 专栏关注博主,后期持续更新系列文章如果有错误感谢请大家批评指出,及时修改感谢大家点赞👍收藏⭐评论✍ Java I/O 简介 Java I/O(输入/输出)是 Java 程序中…...

VisionPro二次开发学习笔记4-使用C#创建绘图图形

VisionPro提供了许多可以添加到CogDisplay的基本形状,例如CogCircle,CogRectangle,CogEllipse和CogRectangleAffine。这些形状可以是用户可以用鼠标操作的交互式图形,也可以是用户无法更改的静态形状。 若要在CogDisplay控件上绘…...

【langchain学习】使用JsonOutputParser让大模型生成结构化JSON数据

使用Langchain处理结构化数据,以JsonOutputParser为例。以下是具体步骤和代码示例: 导入所需库: from config import llm from langchain_core.output_parsers import JsonOutputParser from langchain_core.prompts import PromptTemplate f…...

【学习笔记】Matlab和python双语言的学习(最大最小化规划)

文章目录 前言一、最大最小化规划二、选址问题三、代码实现----Matlab1.Matlab 的 fminimax 函数2.Matlab 代码 四、代码实现----python总结 前言 通过模型算法,熟练对Matlab和python的应用。 学习视频链接: https://www.bilibili.com/video/BV1EK41187…...

基于SpringBoot的Redis开发实战教程

配置和集成缓存涉及多个步骤,从选择适当的缓存技术到实现缓存的存取操作。以下是具体的步骤和示例,假设我们使用Redis作为缓存工具,并基于Spring Boot进行开发。 1. 选择和配置缓存技术 a. 选择缓存工具 Redis 是一个流行的内存数据结构存…...

mysql 分区操作

1。新建分区 mysql 没有全局唯一索引,因此所有涉及唯一索引的都需要加上分区键,因此要做好权衡,键分区不一定能提高效率哦,建分区的主要目的是为了分区查询和删除数据 --将CREATE_TIME 加入主键 ALTER TABLE your_table DROP PR…...

[网鼎杯 2018]Comment

使用环境为https://adworld.xctf.org.cn/challenges,搜索题目[网鼎杯 2018]Comment。 进入环境,发现为一个留言板,点击发帖试试。 尝试发帖 跳转到登录页面,根据提示使用burp进行暴力破解。 发现payload为666时状态码不同。 尝试…...

LVS详解

目录 一、LVS简介 LVS 官网: 二、LVS 负载均衡模式 2.1 LVS-NAT模式: 2.1.1 简介 2.1.2 工作流程图: 2.1.3 说明: 2.1.4 LVS-NAT的优缺点: 2.2 LVS-DR模式: 2.2.1 简介 2.2.2 工作原理: 2.2.3 工作…...

Yolo-World初步使用

Yolo v8目前已经支持Yolo-World,整理一下初步使用步骤。 使用步骤 1 先下载Yolo-World的pt文件,下载地址:GitHub - AILab-CVC/YOLO-World: [CVPR 2024] Real-Time Open-Vocabulary Object Detection 官网应该是点这里(有个笑脸…...

Navicat Premium使用

文章目录 Navicat Premium 16的使用连接MySQL建立数据库并构建表导入数据 Navicat Premium 16是一款功能强大的数据库管理工具,它允许用户从单一应用程序中同时连接多种数据库,提供了极其便捷和高效的管理和开发环境,对于 MySQL 用户来说&…...

LLC数字控制TMS320F28034,4-DSP的epwm配置介绍

LLC数字控制TMS320F28034,4-DSP的epwm配置介绍 1 TMS320F280341.1 概述1.2 PWM详细介绍 2 TMS320F28034 PWM功能框图2.1 ePWM功能模块2.2 ePWM功能寄存器框图 3 TMS320F28034 PWM初始化流程4 结合项目设计5 代码设计5.1 PWM初始化程序5.2 工程代码 6 总结 配套代码示…...

MongoDB学习记录

1、初识Mongo 概述:与关系型数据库不同,MongoDB 的数据以类似于 JSON 格式的二进制文档存储,通常称这种格式为Bson,Bson不仅支持JSON中已有的数据类型,还增加了一些额外的数据类型,例如日期和二进制数据&a…...

vlunstack-2(复现红日安全-ATT CK实战)

环境搭建 配置信息 DC IP:10.10.10.10 OS:Windows 2012(64) 应用:AD域 WEB IP1:10.10.10.80 IP2:192.168.47.131 OS:Windows 2008(64) 应用:Weblogic 10.3.6MSSQL 2008 PC IP1:10.10…...

告别CAD模型:手把手教你用COLMAP为任意物体创建Gen6D训练/测试集

零基础构建Gen6D训练集:从实物拍摄到坐标系定义的完整指南 当我们需要让AI系统理解一个物体在三维空间中的精确位置和方向时,传统方法通常依赖物体的CAD模型。但现实情况是,许多独特物体(如古董艺术品、定制工业零件或生物标本&a…...

微信聊天记录如何实现本地永久备份?开源工具WeChatMsg守护你的数字资产

微信聊天记录如何实现本地永久备份?开源工具WeChatMsg守护你的数字资产 【免费下载链接】WeChatMsg 提取微信聊天记录,将其导出成HTML、Word、CSV文档永久保存,对聊天记录进行分析生成年度聊天报告 项目地址: https://gitcode.com/GitHub_T…...

OpenClaw会议纪要助手:Qwen3-14b_int4_awq转写与重点提炼

OpenClaw会议纪要助手:Qwen3-14b_int4_awq转写与重点提炼 1. 为什么需要自动化会议纪要 作为远程工作者,我每周要参加至少15场跨时区会议。过去手动整理纪要时经常遇到三个痛点:一是录音转文字耗时(1小时会议需要2小时整理&…...

python deepcopy

# 关于Python的深拷贝,你可能需要知道这些 在Python里处理数据时,经常会遇到需要复制对象的情况。这时候很多人会直接使用赋值操作,但很快就会发现事情没那么简单。比如你有一个列表,里面嵌套了另一个列表,当你修改嵌套…...

如何构建一个高效的知识/信息资源管理体系?启雀的功能优势介绍

面对海量的数字信息,构建一个高效的知识/信息资源管理体系至关重要。这不仅能提升个人和团队的工作效率,还能将零散的信息转化为有价值的组织智慧。高效知识管理方法一个完整的知识管理流程通常包含收集、整理、沉淀和应用四个环节。你可以结合以下方法来…...

考研学习C语言记录26.4.3

我是一名备考生,目前在准备27考研。其实C语言在之前的本科阶段有所学习,但由于当时本人对科目不够重视,再加毕业已经有段时间了,所以现在学习相当于从0开始。接下来我会在这个平台做一个阶段性的学习记录,记录一下自己…...

3步打造waifu2x-caffe轻量化部署方案:图像增强绿色版打包全流程

3步打造waifu2x-caffe轻量化部署方案:图像增强绿色版打包全流程 【免费下载链接】waifu2x-caffe waifu2xのCaffe版 项目地址: https://gitcode.com/gh_mirrors/wa/waifu2x-caffe waifu2x-caffe是一款基于深度学习的图像增强工具,能够通过AI算法实…...

BaGet实战教程:如何配置和使用镜像功能加速包下载

BaGet实战教程:如何配置和使用镜像功能加速包下载 【免费下载链接】BaGet A lightweight NuGet and symbol server 项目地址: https://gitcode.com/gh_mirrors/ba/BaGet BaGet是一款轻量级的NuGet和符号服务器,通过配置其镜像功能,开发…...

前端 SEO 如何优化

前端 SEO 如何优化 在互联网时代,网站的前端 SEO(搜索引擎优化)已经成为提升网站流量和用户体验的重要手段。作为一名科普作家,我将通过本文深入探讨前端 SEO 如何优化,并提供一些实用建议,帮助你在百度等…...

AI人工神经网络核心原理与深度学习机制解析

AI人工神经网络核心原理与深度学习机制解析...