当前位置: 首页 > article >正文

PostgreSQL 高负载 Load Average 暴涨 | BufferMapping LWLock 锁竞争 完整排查优化实战

文章目录一、故障现场全景呈现1. 服务器整体资源异常top监控3. 磁盘IO详细监控4. 数据库内部等待事件定位5. 数据库原始内存参数配置二、相关技术概念说明三、根本原因分析四、解决方案与优化建议五、优化效果验证一、故障现场全景呈现本次故障发生在16GB内存的PostgreSQL数据库服务器核心表现为系统负载飙升、CPU满载结合top、vmstat、iostat三大系统监控工具及数据库内部等待事件形成完整故障链路精准定位问题根源。1. 服务器整体资源异常top监控执行top命令获取系统整体状态关键指标异常明显op-13:49:56 up137days,23:10,2users, load average:82.05,75.69,74.35Tasks:464total,30running,434sleeping,0stopped,0zombie %Cpu(s):89.7us,9.3sy,0.0ni,0.6id,0.1wa,0.0hi,0.2si,0.0st MiB Mem:15954.5total,250.1free,1457.2used,14247.1buff/cache MiB Swap:8192.0total,7892.5free,299.5used.12526.8avail Mem PIDUSERPR NI VIRT RES SHR S %CPU %MEM TIME COMMAND1455217postgres20019126161.2g1.1g R10.67.70:22.66 postgres1457456postgres2001759928768768751728R10.64.70:12.48 postgres1457863postgres20018781361.2g1.1g R10.37.50:20.52 postgres1446316postgres2001754100811572808976R10.05.02:00.04 postgres1457835postgres2001756072500896486136R10.03.10:34.81 postgres1467978postgres200189628412875279464R9.60.80:02.25 postgres1468383postgres2001742660557008554028S9.33.40:00.60 postgres1467989postgres200188394411195274200R9.00.70:02.10 postgres1427874postgres20018793401.1g1.1g R8.37.32:26.32 postgres1467990postgres200188393611183274076R8.30.70:02.09 postgres1468053postgres2001742628559984557076S8.03.40:01.48 postgres1468236postgres2001742584556476553640R8.03.40:00.88 postgres1468432postgres2001742588556912554112S8.03.40:00.29 postgres1468434postgres2001743160558856555948R8.03.40:00.30 postgres1468468postgres2001742568557184554356S8.03.40:00.26 postgres1468225postgres2001741516437524435456S7.62.70:00.85 postgres1468328postgres2001742584506188503388R7.63.10:00.43 postgres1468329postgres2001741260437312435296S7.62.70:00.42 postgres系统负载load average长期维持在74~82远超服务器8核CPU的合理负载正常负载≈CPU核心数系统严重过载。CPU用户态占用us高达89.7%空闲CPUid仅0.6%几乎所有CPU资源被数据库进程耗尽。大量postgres进程处于R运行状态进程排队竞争CPU资源壅塞严重。内存整体使用率不高但绝大多数内存被系统缓存buff/cache占用PostgreSQL自身共享缓存配置严重不足无法有效缓存热数据。Swap分区已使用299.5MB后续监控显示进一步攀升至538MB说明物理内存已出现紧张迹象。系统资源连续监控vmstat 1 2000执行vmstat 1 2000命令持续监控系统进程、内存、IO及CPU状态截取关键数据如下vmstat12000输出procs -----------memory---------- ---swap-- -----io---- -system-- ------cpu----- r b swpdfreebuff cache si so bi boincs us syidwa st960303136254836122041468108810182441184002664720011833031362402281220414682896002276885518488985150001121303136247200122041468639600241652588754948515100680303136260732122041467592000203264601056948414200301303136255804122041467866400200858069746555851410011913031362405361221214680136001576612662763078712100115130313624484412220146851881601464109255685203841510068030313626105212220146851320010645649374867851500011813031362487601222014687728001872572589754848613100vmstat 分析:CPU执行队列r23~39远高于8核CPU的合理值8左右大量进程排队等待CPU是系统负载暴高的直接原因。阻塞进程b9-17看似偏高但结合wat值0%~1%可明确进程阻塞并非因硬盘IO缓慢而是因数据库内部锁竞争与后续数据库等待事件完全吻合。磁盘读bi瞬間冲高至28192说明数据库频繁从硬盘加载数据页缓存缺页现象严重。CPU用户态us96%~97%满载几乎所有CPU资源被PostgreSQL查询耗尽空闲CPUid趋近于0。Swap使用swpd538MB物理内存紧张进一步挤压数据库共享缓存的可用空间。3. 磁盘IO详细监控执行iostat -x 1 2000命令深入分析磁盘IO性能排除IO瓶颈iostat-x12000截取关键监控片段如下Linux5.15.0-91-generic(PCIPGDBPCAGLCY-P)04/23/2026 _x86_64_(8CPU)avg-cpu: %user %nice %system %iowait %steal %idle26.010.006.3820.180.0047.42Device r/s rkB/s rrqm/s %rrqm r_await rareq-sz w/s wkB/s wrqm/s %wrqm w_await wareq-sz d/s dkB/s drqm/s %drqm d_await dareq-sz f/s f_await aqu-sz %util sda15.65215.139.6038.035.5913.758.02170.8133.9480.892.3121.300.004.350.0042.790.854302.850.000.000.116.92sdb1563.3919265.343.610.230.1412.3261.701299.263.375.184.2021.060.03181.880.0243.761.117236.250.000.000.112.81avg-cpu: %user %nice %system %iowait %steal %idle92.880.006.120.000.001.00Device r/s rkB/s rrqm/s %rrqm r_await rareq-sz w/s wkB/s wrqm/s %wrqm w_await wareq-sz d/s dkB/s drqm/s %drqm d_await dareq-sz f/s f_await aqu-sz %util sda0.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.00sdb0.000.000.000.000.000.001.008.000.000.000.008.000.000.000.000.000.000.000.000.000.000.40avg-cpu: %user %nice %system %iowait %steal %idle91.490.006.630.000.001.88Device r/s rkB/s rrqm/s %rrqm r_await rareq-sz w/s wkB/s wrqm/s %wrqm w_await wareq-sz d/s dkB/s drqm/s %drqm d_await dareq-sz f/s f_await aqu-sz %util sda0.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.000.00sdb7.9279.210.000.007.3810.0020.79186.140.000.000.148.950.000.000.000.000.000.000.000.000.0611.09iostat 分析:磁盘使用率%utilsda最高6.92%sdb最高11.09%均远低于100%磁盘IO无饱和现象。读等待时间r_awaitsdb最高7.38mssda最高5.59ms均处于正常范围一般20ms磁盘读响应正常。%iowait仅第一组数据为20.18%后续两组均为0%结合磁盘%util可知短暂的iowait是因数据库集中读数据bi冲高并非磁盘性能不足且持续时间极短不构成IO瓶颈。核心佐证CPU满载us 91%~93%时磁盘IO处于低负载状态进一步说明系统瓶颈在CPU和数据库锁竞争而非磁盘IO。4. 数据库内部等待事件定位通过筛选高CPU进程PID查询PostgreSQL系统视图pg_stat_activity定位数据库内部阻塞原因执行命令ps-eopid,pcpu,pmem,cmd--sort-pcpu|greppostgres|head-n20|awk{print $1}|paste-sd,-|xargs-I{}psql-c SELECT pid, usename, now()-query_start duration,datname, state, wait_event,wait_event_type,substr(query,1,20) query FROM pg_stat_activity WHERE pid IN ({});查询结果关键片段pid|usename|duration|datname|state|wait_event|wait_event_type|query --------------------------------------------------------------------------------------------------------------------------1460734|pcishoeleg_5010|00:00:03.423004|pcishoeleg_5010|active|BufferMapping|LWLock|WITH fact AS(\r |||||||1460732|pcishoeleg_5010|00:00:04.349096|pcishoeleg_5010|active|BufferMapping|LWLock|WITH fact AS(\r |||||||1460843|pcishoeleg_5010|00:00:02.941622|pcishoeleg_5010|active|BufferMapping|LWLock|WITH fact AS(\r |||||||1460865|pcishoeleg_5010|00:00:00.323677|pcishoeleg_5010|active|BufferMapping|LWLock|WITH fact AS(\r |||||||1460828|pcishoeleg_5010|00:00:02.909692|pcishoeleg_5010|active|BufferMapping|LWLock|WITH fact AS(\r |||||||1460834|pcishoeleg_5010|00:00:01.168062|pcishoeleg_5010|active|BufferMapping|LWLock|SELECT Sum(time_yiel1460774|pcishoeleg_5010|00:00:02.185091|pcishoeleg_5010|active|BufferMapping|LWLock|WITH fact AS(\r 核心现象大量postgres会话进程统一阻塞在wait_event_type LWLock、wait_event BufferMapping说明所有进程都在竞争同一把轻量级锁。阻塞会话执行的SQL均为报表类聚合查询包含WITH子查询、SUM汇总、DISTINCT去重等需要扫描大量数据页的操作。5. 数据库原始内存参数配置系统实际内存状况free-mtotal usedfreeshared buff/cache available Mem:159545111836217152598886Swap:81911808011数据库内存参数postgres#show shared_buffers;shared_buffers196608#1.5GBpostgres#show effective_cache_size;effective_cache_size524288# 4G两个参数均配置失当shared_buffers 严重偏低导致频繁缓存置换effective_cache_size 低估导致优化器选择次优执行计划两者叠加共同放大了 BufferMapping LWLock 的争用强度。二、相关技术概念说明LWLock 轻量锁LWLockLightweight Lock是 PostgreSQL 内核自行实现的内存级细粒度锁机制与事务层面的表锁、行锁完全独立专门用于保护数据库内部的共享内存数据结构。整个数据库内部有许多把不同用途的 LWLock例如 WAL 写入锁、Clog 锁、Buffer Content 锁等BufferMapping LWLock 只是众多 LWLock 实例中的一把具体的锁专门用来保护 Shared Buffers 的全局哈希表LWLock机制 ↓ BufferMapping LWLock具体实例其核心特点是仅支持共享读Shared 和 独占写Exclusive 两种模式加锁与释放均在内存层面完成开销极低、速度极快不涉及任何磁盘 I/O 操作BufferMapping 缓存映射锁PostgreSQL 的共享缓冲池Shared Buffers依赖一张全局哈希表Buffer Tag Map 来维护磁盘数据页与内存缓冲区块之间的映射关系。所有涉及缓冲区的操作——包括数据页加载入内存、缓冲区命中查找、缓冲区淘汰置换——都必须先获取这把全局 BufferMapping LWLock才能对哈希表进行读写。本次等待事件的本质在高并发场景下大量进程同时竞争同一把全局锁导致大量并发请求 ↓ 全局 BufferMapping LWLock 争用 ↓ 请求被迫串行化排队 ↓ CPU 运行队列堆积 → 系统负载飙升 → 所有查询延迟上升三、根本原因分析核心根本原因shared_buffers 配置严重不足本次故障的根源在于内存配置与实际业务负载严重不匹配。服务器拥有 16GB 物理内存但 shared_buffers 仅配置了 1.5GB导致热点数据无法充分驻留内存。当报表类大查询持续扫描大量冷数据页时缓冲区容量不足以容纳所需数据触发频繁的缺页与缓存置换。每一次置换都必须反复操作全局 Buffer Tag Map进而引发剧烈的 BufferMapping LWLock 争用最终导致全局串行化排队。业务触发原因高并发报表查询叠加主库同时并发执行大量包含 WITH 临时表、SUM 聚合、DISTINCT 的报表 SQL每条查询均需扫描大量物理数据页大幅放大了缓存置换频率进一步加剧了锁排队拥塞。辅助原因优化器缓存预估参数不合理effective_cache_size 配置过小导致 PostgreSQL 查询优化器低估可用内存资源在执行计划选择上倾向于全表顺序扫描而非索引扫描读取的数据页数量持续暴增恶化了缓存压力。系统层面辅助因素操作系统内存挤压操作系统占用了绝大部分内存作为系统缓存数据库可用内存空间被进一步压缩与 shared_buffers 配置不足形成叠加效应共同恶化了缓存不足的问题。shared_buffers 严重不足 ↓ 热点数据无法驻留内存频繁缺页 ↓ 缓存置换反复操作全局 Buffer Tag Map ↓ BufferMapping LWLock 高度争用 ↓ 大量并发报表查询叠加业务触发 effective_cache_size 低估导致全表扫描放大效应 操作系统内存挤压辅助恶化 ↓ 全局串行化排队 → CPU 队列堆积 → 负载飙升 → 所有查询延迟上升四、解决方案与优化建议shared_buffers 调整这是本次故障的根本修复点建议调整为物理内存的 25%参数调整前调整后预期效果shared_buffers1.5G4G热点数据充分驻留内存缓存置换频率大幅下降effective_cache_size4G10G优化器倾向选择索引扫描减少全表扫描2.SQL优化使用pg_profile产生报告并进行分析如何使用pg_profile,请参考这篇文章–使用 pg_profile 在 Postgres 中生成性能报告主要关注Top SQL by execution time,截图如下主要怎对红框中top4的SQL进行优化添加了合适的索引过程略五、优化效果验证调整shared_buffers与effective_cache_size后LWLock、BufferMapping消失针对上图中红框中的高频执行的4条SQL,添加合适的索引后cpu负载开始大幅下降

相关文章:

PostgreSQL 高负载 Load Average 暴涨 | BufferMapping LWLock 锁竞争 完整排查优化实战

文章目录一、故障现场全景呈现1. 服务器整体资源异常(top监控)3. 磁盘IO详细监控4. 数据库内部等待事件定位5. 数据库原始内存参数配置二、相关技术概念说明三、根本原因分析四、解决方案与优化建议五、优化效果验证一、故障现场全景呈现 本次故障发生在…...

让任天堂控制器在Windows上重获新生的双剑合璧方案

让任天堂控制器在Windows上重获新生的双剑合璧方案 【免费下载链接】WiinUPro 项目地址: https://gitcode.com/gh_mirrors/wi/WiinUPro 你是否曾经为手中的Wii、Wii U或Switch控制器无法在Windows电脑上使用而感到遗憾?那些设计精良、手感出色的任天堂控制器…...

解锁明日方舟视觉宝库:2000+高清游戏素材的完整创作指南

解锁明日方舟视觉宝库:2000高清游戏素材的完整创作指南 【免费下载链接】ArknightsGameResource 明日方舟客户端素材 项目地址: https://gitcode.com/gh_mirrors/ar/ArknightsGameResource 在游戏开发、二次元创作和视觉设计领域,高质量的游戏素材…...

WarcraftHelper终极指南:3步解决魔兽争霸3在Windows 11的兼容性问题

WarcraftHelper终极指南:3步解决魔兽争霸3在Windows 11的兼容性问题 【免费下载链接】WarcraftHelper Warcraft III Helper , support 1.20e, 1.24e, 1.26a, 1.27a, 1.27b 项目地址: https://gitcode.com/gh_mirrors/wa/WarcraftHelper 还在为魔兽争霸3在现代…...

时间序列预测模型选择:实战决策矩阵与应用指南

1. 时间序列预测模型决策矩阵概述时间序列预测是数据分析领域最基础也最具挑战性的任务之一。我在金融、零售和制造业的十多个实际项目中,最常被业务方问到的问题就是:"面对这么多预测算法,我们到底该怎么选?"这个决策矩…...

别再傻傻分不清!一文搞懂激光器里那些镜片:反射镜、透镜、分束镜到底怎么选?

激光器光学镜片选型实战指南:从反射镜到分束镜的精准匹配 在激光器设计与光学系统搭建中,镜片选型往往成为工程师最易踩坑的环节。我曾亲眼见证一个价值百万的激光项目因选错反射镜镀膜类型,导致系统效率骤降30%。光学镜片不是简单的"透…...

AI技术岗必看!吴恩达亲授4大领域+高效学习法,助你抢占职业发展先机!

做AI技术岗,必须掌握的4大领域 学完这些还不够——持续深耕才是真正的分水岭 怎么学最高效? 没有人能在周末或一个月内学完这些 吴恩达推荐的建立学习习惯方法 小结 读完需要 2 分钟 速读仅需 1 分钟 今天是连载的第二天🫰一起共读…...

别再熬夜改格式了!paperxie 一键套 4000 + 高校模板,毕业论文排版半小时搞定

paperxie-免费查重复率aigc检测/开题报告/毕业论文/智能排版/文献综述/期刊论文https://www.paperxie.cn/format/typesettinghttps://www.paperxie.cn/format/typesetting 谁本科写论文没被格式搞到崩溃?调了一下午页眉还是歪的、目录自动更新失灵、行距和页边距反复…...

用STC89C52RC和HC-05蓝牙模块,DIY一个带转向灯和蜂鸣器的智能小车电机驱动板(附完整代码)

基于STC89C52RC的智能小车驱动系统开发实战 项目背景与核心功能 智能小车作为嵌入式开发的经典练手项目,融合了电机控制、无线通信、传感器反馈等多个技术模块。本次项目以STC89C52RC单片机为核心控制器,通过HC-05蓝牙模块实现无线遥控,采用I…...

别再手动做PPT了!用Python-pptx库,5分钟搞定周报/月报自动化生成

用Python-pptx实现周报自动化:从模板设计到数据绑定的完整指南 每周五下午,市场部的张磊总要面对同样的噩梦:从十几个Excel表格中复制数据,粘贴到PPT模板里,调整格式到深夜。直到他发现了一个秘密武器——python-pptx。…...

Depth-Anything-V2:开启单目深度估计新纪元

Depth-Anything-V2:开启单目深度估计新纪元 【免费下载链接】Depth-Anything-V2 [NeurIPS 2024] Depth Anything V2. A More Capable Foundation Model for Monocular Depth Estimation 项目地址: https://gitcode.com/gh_mirrors/de/Depth-Anything-V2 在计…...

别再只盯着DAC了!深入WM8978的DSP内核:5段EQ、ALC与降风噪实战配置指南

解锁WM8978的DSP潜能:从5段EQ到风噪消除的嵌入式音频实战 在嵌入式音频系统设计中,WM8978这颗集成了DSP内核的编解码芯片常被简化为一个普通的数模转换模块。但当我们深入其数字信号处理单元时,会发现一片被多数开发者忽视的"音效实验室…...

C语言day3

变量1.变量中的值,可以发生变化的原因。是因为在定义变量的时候,系统会给变量开辟内存空间。2.初始化 含义:在变量内存空间开辟的同时,装入初始值。变量定义后,如果没有给初值的,变量里就存储了随机值。变量…...

Unity Custom Interpolators与半透明阴影的原理与实战

深入剖析 URP 渲染管线中两个容易被忽略的关键问题: 插值寄存器(Interpolator)的数量瓶颈与打包技巧,以及半透明阴影的底层限制与三种可用的 workaround。 本文包含完整的 HLSL 代码示例与原理示意图。Part 01Custom Interpolator…...

存算一体芯片指令调用不是“memcpy”!资深IC验证专家首次公开C语言语义到物理计算单元的5层映射逻辑

更多请点击: https://intelliparadigm.com 第一章:存算一体芯片指令调用的本质认知 存算一体(Processing-in-Memory, PIM)芯片通过将计算单元嵌入存储阵列内部,打破传统冯诺依曼架构中“内存墙”的瓶颈。其指令调用并…...

对稀疏矩阵运算的两种优化方式

背景 卷积神经网络(CNN)广泛应用于移动端视觉任务,GEMM 是其推理的性能瓶颈,脉动阵列(SA)通过局部寄存器通信高效加速 GEMM,被广泛应用于 TPU 等商用产品,但传统架构仍有优化空间。面…...

AI模型版本原子回滚、训练-推理环境一致性校验、分布式LoRA微调调度器——Docker AI Toolkit 2026这9个硬核特性,90%工程师尚未启用

更多请点击: https://intelliparadigm.com 第一章:Docker AI Toolkit 2026核心架构演进与安装部署 Docker AI Toolkit 2026(简称 DAIT-2026)标志着容器化AI工作流从“可运行”迈向“可推理、可编排、可审计”的关键跃迁。其核心架…...

CodeAct:用可执行代码作为LLM智能体行动空间的实践指南

1. 项目概述:用可执行代码重塑LLM智能体最近在折腾大语言模型(LLM)智能体(Agent)时,我发现了一个挺有意思的开源项目:xingyaoww/code-act。简单来说,它提出了一个核心观点&#xff1…...

MZmine3 命令行登录问题深度解析与高效解决方案

MZmine3 命令行登录问题深度解析与高效解决方案 【免费下载链接】mzmine3 mzmine source code repository 项目地址: https://gitcode.com/gh_mirrors/mz/mzmine3 MZmine3 4.2.0版本在Rocky Linux 8.8系统及HPC集群环境中暴露了关键的命令行登录问题。作为开源质谱数据分…...

别再傻傻分不清了!ToB、ToC、ToG产品经理的日常工作到底差在哪?

ToB、ToC、ToG产品经理的日常:从需求挖掘到落地的全景对比 每天早上9点,当ToC产品经理正在分析用户点击热力图时,ToB产品经理可能正在与销售团队讨论某企业客户的定制需求,而ToG产品经理则可能在准备向某政府部门汇报项目进度的材…...

Sigil插件系统深度解析:从架构设计到高级定制实战指南

Sigil插件系统深度解析:从架构设计到高级定制实战指南 【免费下载链接】Sigil Sigil is a multi-platform EPUB ebook editor 项目地址: https://gitcode.com/gh_mirrors/si/Sigil Sigil作为一款跨平台EPUB电子书编辑器,其插件系统通过Python环境…...

向量数据库生产调优:Qdrant性能优化与规模化部署完全指南

从原型到生产的鸿沟 把一个RAG系统从原型推到生产,向量数据库往往是最先遇到瓶颈的组件。常见的痛点:- 查询延迟高:随着数据量增长,相似性搜索越来越慢- 内存爆炸:默认配置把所有向量加载到内存,百万级数据…...

为AI编码助手构建本地记忆系统:基于Markdown的Agentic Memory实践

1. 项目概述:为你的AI编码助手构建一个“会思考”的本地记忆系统如果你和我一样,每天都在和AI编码助手(比如Cursor、Claude Code)打交道,那你肯定遇到过这个烦人的问题:每次新开一个会话,它都像…...

虚拟文件系统 GVfs

GVfs(GNOME Virtual File System) 是 GNOME 桌面环境的用户空间虚拟文件系统,基于 GIO(GLib 的 I/O 抽象库)实现,用于统一访问本地、网络与设备存储,替代旧版 GnomeVFS。GVfs 以 D-Bus 为总线、…...

GDSDecomp:重塑Godot游戏逆向工程的技术范式

GDSDecomp:重塑Godot游戏逆向工程的技术范式 【免费下载链接】gdsdecomp Godot reverse engineering tools 项目地址: https://gitcode.com/GitHub_Trending/gd/gdsdecomp 在游戏开发领域,Godot引擎以其开源特性和易用性赢得了广泛认可&#xff0…...

别再手动拖拽了!用NX二次开发实现点到点移动复制,效率提升不止一倍

告别低效操作:NX二次开发实现智能点到点移动复制的实战指南 在模具设计和机械装配领域,工程师们常常需要将数十个零件或特征精确移动到新位置。传统手动拖拽不仅耗时费力,还容易因操作失误导致装配偏差。我曾在一个汽车底盘装配项目中&#x…...

HPM6750 RISC-V开发实战:用Segger Embedded Studio搞定从工程构建到OpenOCD调试的全流程

HPM6750 RISC-V开发实战:从工程构建到OpenOCD调试的完整指南 当一块搭载RISC-V架构的HPM6750 EVK Mini开发板放在桌面上时,许多开发者会面临一个共同问题:如何从零开始构建一个可调试的完整项目?本文将带你使用Segger Embedded St…...

OpenClaw客户端设计:构建高效数据采集与API交互工具

1. 项目概述与核心价值 最近在折腾一个挺有意思的开源项目,名字叫 messyvirgo-openclaw-client 。光看这个仓库名,你可能会有点摸不着头脑, messyvirgo 、 openclaw 、 client ,这几个词组合在一起,到底是个啥…...

Audiveris乐谱识别完全指南:三步将纸质乐谱变为数字音乐

Audiveris乐谱识别完全指南:三步将纸质乐谱变为数字音乐 【免费下载链接】audiveris Latest generation of Audiveris OMR engine 项目地址: https://gitcode.com/gh_mirrors/au/audiveris 你是否曾看着堆积如山的纸质乐谱发愁?想要将它们变成可编…...

全面掌握EPANET:开源水力水质模拟工具从入门到实战

全面掌握EPANET:开源水力水质模拟工具从入门到实战 【免费下载链接】EPANET The Water Distribution System Hydraulic and Water Quality Analysis Toolkit 项目地址: https://gitcode.com/gh_mirrors/ep/EPANET 你是否正在寻找一个能够模拟城市供水系统水力…...