Ubuntu 下 nginx-1.24.0 源码分析 - ngx_conf_add_dump
ngx_conf_add_dump
定义在src\core\ngx_conf_file.c
static ngx_int_t
ngx_conf_add_dump(ngx_conf_t *cf, ngx_str_t *filename)
{off_t size;u_char *p;uint32_t hash;ngx_buf_t *buf;ngx_str_node_t *sn;ngx_conf_dump_t *cd;hash = ngx_crc32_long(filename->data, filename->len);sn = ngx_str_rbtree_lookup(&cf->cycle->config_dump_rbtree, filename, hash);if (sn) {cf->conf_file->dump = NULL;return NGX_OK;}p = ngx_pstrdup(cf->cycle->pool, filename);if (p == NULL) {return NGX_ERROR;}cd = ngx_array_push(&cf->cycle->config_dump);if (cd == NULL) {return NGX_ERROR;}size = ngx_file_size(&cf->conf_file->file.info);buf = ngx_create_temp_buf(cf->cycle->pool, (size_t) size);if (buf == NULL) {return NGX_ERROR;}cd->name.data = p;cd->name.len = filename->len;cd->buffer = buf;cf->conf_file->dump = buf;sn = ngx_palloc(cf->temp_pool, sizeof(ngx_str_node_t));if (sn == NULL) {return NGX_ERROR;}sn->node.key = hash;sn->str = cd->name;ngx_rbtree_insert(&cf->cycle->config_dump_rbtree, &sn->node);return NGX_OK;
}
函数 ngx_conf_add_dump 的作用和意义可以通俗理解为:
作用
这个函数负责将 Nginx 的配置文件内容缓存到内存中,并记录文件信息,避免重复加载相同的配置文件。
具体步骤
- 检查是否已缓存:通过哈希值快速判断当前配置文件是否已经被缓存过。
- 缓存新文件:如果未缓存,则将文件内容读取到内存缓冲区,并记录文件名和哈希值。
- 避免重复:通过红黑树(一种高效的数据结构)管理已缓存的文件信息,确保同一个文件不会被多次加载。
意义
- 提升性能:减少重复读取磁盘文件的开销,加快配置加载速度。
- 节省资源:避免多次解析相同配置文件,降低内存和 CPU 的消耗。
- 支持动态重载:在 Nginx 重载配置时,能快速复用已缓存的配置数据,提高服务稳定性。
简单来说,这个函数就像是给配置文件做了一个“快照”,需要时直接从内存读取,而不是每次都从磁盘重新加载,从而让 Nginx 更高效地管理配置。
函数签名
static ngx_int_t ngx_conf_add_dump(ngx_conf_t *cf, ngx_str_t *filename);
1. static 关键字
- 作用:表示该函数是文件作用域的,只能在当前源文件(
ngx_conf_file.c)中被调用,其他文件无法直接访问。 - 意义:限制函数的可见性,避免外部误用,增强代码的封装性。
2. 返回值类型 ngx_int_t
- 类型定义:
ngx_int_t是 Nginx 自定义的整数类型(通常为typedef int ngx_int_t),用于统一表示函数执行结果。 - 返回值含义:
NGX_OK:表示函数执行成功(通常返回值为 0)。NGX_ERROR:表示函数执行失败(通常返回值为 -1)。
- 设计目的:通过统一的返回值类型,简化错误处理逻辑。
3. 参数 ngx_conf_t *cf
- 类型:
ngx_conf_t是 Nginx 的配置解析上下文结构体,包含解析配置时所需的所有状态信息。 - 作用:
- 提供内存池(
cf->pool)用于动态内存分配。 - 传递当前配置文件的句柄(
cf->conf_file)。 - 关联 Nginx 的全局运行时数据(通过
cf->cycle,即ngx_cycle_t结构体)。
- 提供内存池(
- 关键字段:
cf->cycle->config_dump_rbtree:红黑树,用于记录已缓存的配置文件信息。cf->cycle->config_dump:数组,存储实际缓存的配置文件内容。cf->temp_pool:临时内存池,用于分配短期使用的数据结构。
4. 参数 ngx_str_t *filename
- 类型:
ngx_str_t是 Nginx 自定义的字符串类型,定义为:typedef struct {size_t len; // 字符串长度u_char *data; // 字符串内容(指向二进制数据) } ngx_str_t; - 作用:指定需要缓存的配置文件路径(如
nginx.conf)。 - 特点:
- 支持二进制安全(通过
len明确长度,而非依赖\0结尾)。 - 允许文件名中包含特殊字符(如空格、中文等)。
- 支持二进制安全(通过
详解
static ngx_int_t
ngx_conf_add_dump(ngx_conf_t *cf, ngx_str_t *filename)
{off_t size;u_char *p;uint32_t hash;ngx_buf_t *buf;ngx_str_node_t *sn;ngx_conf_dump_t *cd;
变量声明
off_t size:用于存储配置文件的大小(字节数)。u_char *p:指向动态分配的内存,用于复制文件名。uint32_t hash:存储文件名的哈希值,用于快速查找。ngx_buf_t *buf:指向缓冲区,用于存储配置文件内容。ngx_str_node_t *sn:红黑树节点,记录文件名和哈希值。ngx_conf_dump_t *cd:配置转储结构体,包含文件名和缓冲区。
hash = ngx_crc32_long(filename->data, filename->len);
计算文件名的哈希值
- 作用:通过
ngx_crc32_long函数计算文件名的 CRC32 哈希值。 - 设计意图:哈希值用于快速判断文件是否已被缓存(红黑树的键)。
sn = ngx_str_rbtree_lookup(&cf->cycle->config_dump_rbtree, filename, hash);
查询红黑树
- 作用:在红黑树(
config_dump_rbtree)中查找是否已存在相同文件名的节点。 - 参数:
&cf->cycle->config_dump_rbtree:全局红黑树,存储所有已缓存的文件信息。filename:当前要缓存的文件名。hash:文件名的哈希值。
- 返回值:如果找到节点,返回对应的
ngx_str_node_t;否则返回NULL。 - 设计意图:避免重复缓存同一文件,节省内存和 I/O 开销。
if (sn) {cf->conf_file->dump = NULL;return NGX_OK;}
处理已缓存的文件
- 逻辑:如果文件已存在(
sn != NULL),则直接标记当前配置文件的dump为NULL,表示不需要重复缓存。
p = ngx_pstrdup(cf->cycle->pool, filename);if (p == NULL) {return NGX_ERROR;}
复制文件名
- 作用:通过
ngx_pstrdup在内存池中复制文件名。 - 参数:
cf->cycle->pool:全局内存池,生命周期与 Nginx 进程一致。filename:需要复制的文件名。
- 错误处理:如果内存分配失败,返回
NGX_ERROR。
cd = ngx_array_push(&cf->cycle->config_dump);if (cd == NULL) {return NGX_ERROR;}
向配置转储数组添加新条目
- 作用:将新的
ngx_conf_dump_t结构体添加到config_dump数组中。 - 参数:
&cf->cycle->config_dump是存储所有缓存文件信息的数组。 - 错误处理:如果内存分配失败,返回
NGX_ERROR。 - 设计意图:数组用于后续快速遍历所有缓存的配置文件。
size = ngx_file_size(&cf->conf_file->file.info);
获取文件大小
- 作用:通过
ngx_file_size宏获取当前配置文件的大小。 - 参数:
cf->conf_file->file.info是文件的元信息结构体。 - 设计意图:为缓冲区分配足够的内存以存储文件内容。
buf = ngx_create_temp_buf(cf->cycle->pool, (size_t) size);if (buf == NULL) {return NGX_ERROR;}
创建临时缓冲区
- 作用:在内存池中分配一个临时缓冲区
buf,大小为文件内容长度。 - 参数:
cf->cycle->pool:全局内存池。(size_t) size:缓冲区大小。
- 错误处理:分配失败时返回
NGX_ERROR。 - 设计意图:将文件内容一次性读入内存,避免重复磁盘 I/O。
cd->name.data = p;cd->name.len = filename->len;cd->buffer = buf;
填充配置转储结构体
- 作用:将文件名和缓冲区关联到
cd结构体。 - 字段说明:
cd->name:保存文件名的字符串(data和len)。cd->buffer:指向存储文件内容的缓冲区。
- 设计意图:统一管理文件名和内容,便于后续快速访问。
cf->conf_file->dump = buf;
标记当前文件的缓存状态
- 作用:将当前配置文件的
dump指针指向缓冲区buf。 - 设计意图:在解析配置时,通过
dump判断是否需要从内存中读取内容。
sn = ngx_palloc(cf->temp_pool, sizeof(ngx_str_node_t));if (sn == NULL) {return NGX_ERROR;}
分配红黑树节点
- 作用:在临时内存池中分配一个红黑树节点
sn。 - 参数:
cf->temp_pool:临时内存池,生命周期可能短于全局内存池。sizeof(ngx_str_node_t):节点大小。
- 错误处理:分配失败时返回
NGX_ERROR。 - 设计意图:临时内存池用于短期数据,避免全局内存池膨胀。
sn->node.key = hash;sn->str = cd->name;
初始化红黑树节点
- 作用:将哈希值和文件名字符串关联到红黑树节点。
- 字段说明:
sn->node.key:哈希值作为红黑树的键。sn->str:文件名字符串,用于后续比较(解决哈希冲突)。
ngx_rbtree_insert(&cf->cycle->config_dump_rbtree, &sn->node);
插入红黑树
- 作用:将新节点插入到全局红黑树
config_dump_rbtree中。 - 设计意图:通过红黑树的高效查找特性(O(log n)),快速判断文件是否已被缓存。
return NGX_OK;
}
返回成功状态
- 作用:告知调用者文件已成功缓存。
相关文章:
Ubuntu 下 nginx-1.24.0 源码分析 - ngx_conf_add_dump
ngx_conf_add_dump 定义在src\core\ngx_conf_file.c static ngx_int_t ngx_conf_add_dump(ngx_conf_t *cf, ngx_str_t *filename) {off_t size;u_char *p;uint32_t hash;ngx_buf_t *buf;ngx_str_node_t *sn;ngx_conf_dump_t *cd;has…...
QEMU源码全解析 —— 内存虚拟化(23)
接前一篇文章:QEMU源码全解析 —— 内存虚拟化(22) 本文内容参考: 《趣谈Linux操作系统》 —— 刘超,极客时间 《QEMU/KVM源码解析与应用》 —— 李强,机械工业出版社 QEMU内存管理模型...
【北京迅为】itop-3568 开发板openharmony鸿蒙烧写及测试-第1章 体验OpenHarmony—烧写镜像
瑞芯微RK3568芯片是一款定位中高端的通用型SOC,采用22nm制程工艺,搭载一颗四核Cortex-A55处理器和Mali G52 2EE 图形处理器。RK3568 支持4K 解码和 1080P 编码,支持SATA/PCIE/USB3.0 外围接口。RK3568内置独立NPU,可用于轻量级人工…...
TypeScript 类型声明
在 TypeScript 开发中简化类型声明,可以通过以下 7 种实用技巧 显著提升效率: 一、善用类型推断(30% 场景免声明) // ❌ 冗余写法 const user: { name: string; age: number } { name: Jack, age: 25 };// ✅ 自动推断ÿ…...
从0搭建Tomcat第二天:深入理解Servlet容器与反射机制
在上一篇博客中,我们从0开始搭建了一个简易的Tomcat服务器,并实现了基本的HTTP请求处理。今天,我们将继续深入探讨Tomcat的核心组件之一——Servlet容器,并介绍如何使用反射机制动态加载和管理Servlet。 1. Servlet容器的作用 S…...
【Python】yield函数
【Python】yield函数 1. yield介绍2.yield基本用法3.yield高级用法3.1 yield send() 方法3.2 yield from方法3.3 yield 和yield from叠加处理复杂情况下的叠加 4.yield主要应用场景5.总结 python官方api地址 1. yield介绍 在Python中,yield关键字主要用于生成器函…...
Android13修改多媒体默认音量
干就完了! 设置音量为最大音量,修改如下: /framework/base/media/java/android/media/AudioSystem.java/** hide */public static int[] DEFAULT_STREAM_VOLUME new int[] {4, // STREAM_VOICE_CALL7, // STREAM_SYSTEM5, // STREAM_RING-5, // STREAM_MUSIC15, // STREAM…...
nginx+keepalived负载均衡及高可用
一、环境准备 主机名ip地址备注openEuler-1 192.168.121.11(本机) 192.168.131.11(心跳连接) nginx主负载均衡调度器openEuler-2 192.168.121.12(本机) 192.168.131.12(心跳连接) n…...
SP导入智能材质球
智能材质球路径 ...\Adobe Substance 3D Painter\resources\starter_assets\smart-materials 放入之后就会自动刷新...
Kotlin语言特性(一):空安全、扩展函数与协程
Kotlin语言特性(一):空安全、扩展函数与协程 一、引言 Kotlin作为Android官方推荐的开发语言,相比Java具有诸多现代化特性。本文将重点介绍Kotlin三个最具特色的语言特性:空安全、扩展函数和协程,并结合A…...
Sqlserver安全篇之_启用TLS即配置SQL Server 数据库引擎以加密连接
官方文档 https://learn.microsoft.com/zh-cn/sql/database-engine/configure-windows/configure-sql-server-encryption?viewsql-server-ver16 https://learn.microsoft.com/zh-cn/sql/database-engine/configure-windows/manage-certificates?viewsql-server-ver15&pre…...
Python 爬虫 – BeautifulSoup
Python 爬虫(Web Scraping)是指通过编写 Python 程序从互联网上自动提取信息的过程。 爬虫的基本流程通常包括发送 HTTP 请求获取网页内容、解析网页并提取数据,然后存储数据。 Python 的丰富生态使其成为开发爬虫的热门语言,特…...
【星云 Orbit-STM32F4】07. 用判断数据尾来接收据的串口通用程序框架
【星云 Orbit-STM32F4】用判断数据尾来接收一串数据的串口通用程序框架 摘要 本文介绍了一种基于STM32F407微控制器的串口数据接收通用程序框架。该框架通过判断数据尾来实现一串数据的完整接收,适用于需要可靠数据传输的应用场景。本文从零开始,详细讲…...
授权与认证之jwt(一)创建Jwt工具类
JWT的Token要经过加密才能返回给客户端,包括客户端上传的Tokn,后端项目需要验证核 实。于是我们需要一个WT工具类,用来加密Token和验证Token的有效性。 一、导入依赖 <dependency><groupId>com.auth0</groupId><artifactId>jav…...
Kubernetes Service服务发现dns之CoreDNS
文章目录 背景什么是Service、服务发现、Endpoint什么是CoreDNSCoreDNS 的工作原理 常用命令coredns 运行状态根据服务名,判断某个服务dns解析是否正常 背景 Kubernetes 集群内部的服务发现是微服务架构的核心基础,而 DNS 服务则是实现这一机制的关键组…...
Spring Boot 测试:单元、集成与契约测试全解析
一、Spring Boot 分层测试策略 Spring Boot 应用采用经典的分层架构,不同层级的功能模块对应不同的测试策略,以确保代码质量和系统稳定性。 Spring Boot 分层架构: Spring Boot分层架构 A[客户端] -->|HTTP 请求| B[Controller 层] …...
用友NC系列漏洞检测利用工具
声明!本文章所有的工具分享仅仅只是供大家学习交流为主,切勿用于非法用途,如有任何触犯法律的行为,均与本人及团队无关!!! 目录标题 YongYouNcTool启动及适配环境核心功能界面预览一键检测命令执…...
PostgreSQL 创建表格
PostgreSQL 创建表格 在数据库管理中,表格(Table)是数据存储的基础。PostgreSQL作为一款强大的开源对象关系型数据库管理系统(ORDBMS),创建表格是其最基本的功能之一。本文将详细讲解如何在PostgreSQL中创…...
一周一个Unity小游戏2D反弹球游戏 - 球的死区及球重生
前言 本文将实现当球弹到球板下方的死亡区域后,球会被重置到球板上发射点,并且重置物理状态的逻辑。 创建球的死亡区 之前创建的在屏幕下方的空气墙碰撞体可以将其Is Trigger勾选上,让其成为一个触发器,用来检测球是否进入该区域,如下。 创建一个脚本名为Deadzone…...
本地部署 DeepSeek:从 Ollama 配置到 Spring Boot 集成
前言 随着人工智能技术的迅猛发展,越来越多的开发者希望在本地环境中部署和调用 AI 模型,以满足特定的业务需求。本文将详细介绍如何在本地环境中使用 Ollama 配置 DeepSeek 模型,并在 IntelliJ IDEA 中创建一个 Spring Boot 项目来调用该模型…...
“我35岁,年薪50万,却觉得自己是个‘废人’”
你有过那种感觉吗?回头一看,工作了十年,简历上好像什么都做过,但心里却虚得要命,觉得自己随时可以被替代。尤其是当“35岁”这个魔咒般的年龄落在你头上时,这种恐慌感在深夜会加倍袭来。凌晨两点࿰…...
爆仓价格系数推导
多仓 爆仓条件:账户权益 < 维持保证金 即: Equity Maintenance Margin对于一个仓位: 多仓 权益: 权益 初始权益 (当前价 - 开仓价) 数量因为: 价格上涨赚钱。 空仓 权益: 权益 初始权益 (开仓价 -…...
【扣子coze教程】0成本搭建自动生成公众号的飞书智能体(附实战工作流)
今天教大家0成本搭建自动生成公众号的飞书智能体,并部署至飞书。话不多说,咋们直接开始~ 1. 采集网站文章的工作流 如下是完整的工作流1.1 登录多维飞书表格 创建url、title、content、new_content列,为后续保存位置做准备其中url用以存放网页…...
大模型推理优化:激活稀疏性技术解析与实践
1. 大模型推理优化的核心挑战与机遇在自然语言处理领域,大型语言模型(LLM)的推理效率已成为制约其广泛应用的关键瓶颈。以GPT-3 175B为例,单次推理需要约350GB显存和数千亿次浮点运算,这对硬件资源提出了极高要求。传统…...
3步搞定M3U8视频下载:告别在线播放限制的终极方案
3步搞定M3U8视频下载:告别在线播放限制的终极方案 【免费下载链接】N_m3u8DL-CLI-SimpleG N_m3u8DL-CLIs simple GUI 项目地址: https://gitcode.com/gh_mirrors/nm3/N_m3u8DL-CLI-SimpleG 你是否曾遇到过这样的烦恼?在线观看的视频无法保存&…...
ESP32+DHT11快速搭建物联网试验台:30分钟实现无线数据采集与上报
1. 项目概述:为什么我们需要一个“快速试验台”?在硬件开发、嵌入式系统学习,或是物联网(IoT)项目原型验证阶段,我们常常会遇到一个尴尬的局面:想法很丰满,但验证环境很骨感。你可能…...
第37天:SQL详解之DDL
Python学习100天(从入门到精通系列文章) 文章目录 Python学习100天(从入门到精通系列文章) 前言 一、SQL概述 1.1 建库建表 1.2 DDL关键注意事项 二、存储引擎对比 三、数据类型选择 四、删除表和修改表 4.1 删除表 4.2 修改表 总结 前言 在前一篇文章中,我们了解了关系型…...
曼德勃罗集的 Three.js 实现
效果预览 经典的曼德勃罗集(Mandelbrot Set)分形渲染,配合动态缩放动画探索分形边界的无限细节。使用线性插值平滑着色,呈现出彩虹般的色彩过渡。 👉 点击查看《曼德勃罗集的》完整源码与效果演示 Shader 实现原理…...
DeepSeek V2安全对齐能力深度拆解(含对抗攻击测试报告+合规审计清单)
更多请点击: https://codechina.net 第一章:DeepSeek V2安全对齐能力深度拆解(含对抗攻击测试报告合规审计清单) DeepSeek V2 在设计阶段即嵌入多层安全对齐机制,涵盖输入过滤、策略蒸馏、响应重加权与后验校验四大核…...
Windows系统下Opensmile 3.0保姆级安装配置指南(含PATH环境变量设置与常见错误排查)
Windows系统下Opensmile 3.0保姆级安装配置指南(含PATH环境变量设置与常见错误排查) 引言 当你第一次接触语音特征提取工具时,Opensmile无疑是一个强大而友好的选择。作为一款开源的音频分析工具,它广泛应用于情感计算、语音识别等…...
