Yashan DB 体系结构
一、体系结构概况
1.1 线程管理
YashanDB采用多线程架构，线程分为两类：
• 工作线程（Worker Threads）：每个客户端连接到数据库实例时，会创建一个工作线程。工作线程负责处理客户端的SQL请求，执行SQL语句，并将结果返回给客户端。工作线程是数据库与客户端交互的核心。
• 后台线程（Background Threads）：由数据库实例自动创建，用于执行系统级任务，例如：
• TCP监听线程（TCP_LSNR）：监听指定的TCP端口，处理客户端的连接请求并创建会话。
• 数据脏块刷新线程（DBWR）：将内存中的脏数据块写回到磁盘上的数据文件。
• Redo日志刷盘线程（LOGW）：将内存中的Redo日志刷盘到Redo日志文件。
• 检查点任务调度线程（CKPT）：调度全量和增量检查点任务。
1.2 物理存储
物理存储是YashanDB存储数据的物理文件集合，主要包括以下几类文件：
• 控制文件（Control Files）：记录数据库的物理结构信息，如数据文件的位置、日志文件的位置等。控制文件是数据库启动和恢复的关键。
• 数据文件（Data Files）：存储实际的表数据、索引数据等用户数据。
• Redo日志文件（Redo Log Files）：记录数据库的所有修改操作，用于恢复和数据一致性保障。
• 归档日志文件（Archive Log Files）：当Redo日志文件写满后，会将其内容归档到归档日志文件中，用于数据库的完全恢复。
• Slice文件：用于存储特定的分区数据或其他优化存储的文件。
1.3 内存管理
内存管理是YashanDB性能优化的关键部分，主要分为两大区域：
• 共享内存区域（Shared Global Area,SGA）：这部分内存被所有数据库会话共享，用于存储全局信息，例如：
• 内存共享池（Share Pool）：用于缓存SQL语句的解析树、执行计划、存储过程、数据字典等。
• 数据缓存（Data Buffer）：缓存最近访问的数据块，减少磁盘I/O操作。
• 有界加速缓存（AC Buffer）：用于加速某些特定操作。
• 虚拟内存（Virtual Memory）：用于支持复杂的SQL操作，如排序、连接等。
• 私有内存区域（Session Private Area,SPA）：每个会话独占的内存区域，用于存储会话特定的数据，例如：
• 会话栈内存（Stack Memory）：存储局部变量等临时数据。
• 会话堆内存（Heap Memory）：存储生命周期较长的数据。
1.4 实例与数据库的关系
• 实例（Instance）：由线程（工作线程和后台线程）及其管理的内存结构组成。实例是数据库运行的载体，负责控制和管理数据库。
• 数据库（Database）：是数据的物理存储载体，由控制文件、数据文件、日志文件等组成。
• 关系：当数据库启动时，实例会加载数据库，并通过内存和线程管理来提供数据服务。一个实例最多只能加载一个数据库。
---
二、YashanDB基本概念
2.1 实例和数据库
• 实例：是数据库运行的载体，由线程和内存结构组成。
• 数据库：是数据的存储载体，由物理文件（如控制文件、数据文件、日志文件等）组成。
• 关系：实例启动时加载数据库，一个实例对应一个数据库。
2.2 内存体系
• 共享内存区域（SGA）：供多个会话或线程共享使用，包括内存共享池、数据缓存、有界加速缓存和虚拟内存。
• 私有内存区域（SPA）：每个会话独占的内存区域，用于满足SQL执行时的内存需求。
2.3 进程线程体系
• 服务端核心进程（YASDB）：实例启动后创建，用于处理连接请求。
• 工作线程（WORKER）：客户端连接时创建，负责会话业务执行调度。
• 后台线程：用于实现工作机制和保证数据一致性。
2.4 物理存储
• 包括控制文件、Redo日志文件、数据文件和归档日志文件等。
---
三、YashanDB内存管理详解
3.1 共享内存区域（SGA）
• 内存共享池（Share Pool）：
• 包括SQL缓存、日志缓存、PL池、数据字典缓存、大对象池等。
• 数据缓存（Data Buffer）：
• 缓存从磁盘读取的数据块拷贝，采用LRU算法管理，大小受`data_buffer_size`参数控制。
• 虚拟内存（Virtual Memory）：
• 用于物化数据的SQL算子，如`order by`、`hash join`等，不足时可交换到SWAP表空间，大小受`vm_buffer_size`参数控制。
• 有界加速缓存（AC Buffer）：
• 缓存AC对象。
3.2 私有内存区域（SPA）
• 会话栈内存（Stack Memory）：存放临时局部变量，大小由`WORK_AREA_STACK_SIZE`参数控制。
• 会话堆内存（Heap Memory）：存放生命周期较长的运行期数据，大小由`WORK_AREA_HEAP_SIZE`参数控制。
3.3 常用内存参数
• `DATA_BUFFER_SIZE`：指定数据缓存区大小，影响数据库整体性能，重启生效。
• `VM_BUFFER_SIZE`：指定SQL标准计算使用的内存大小，影响计算性能，重启生效。
---
四、YashanDB进程详解
4.1 服务端核心进程（YASDB）
• 实例启动后创建，用于处理连接请求。
4.2 工作线程（WORKER）
• 客户端连接时创建，负责会话业务执行调度，连接退出时线程退出，会话连接上限由`MAX_SESSIONS`参数控制。
4.3 后台线程
• TCP监听线程（TCP_LSNR）：监听TCP端口，处理连接请求并创建会话。
• 数据脏块刷新线程（DBWR）：将脏数据块写回磁盘数据文件。
• Redo日志刷盘线程（LOGW）：将Redo日志刷盘到Redo日志文件。
• 检查点任务调度线程（CKPT）：调度全量和增量检查点任务。
---
五、YashanDB事务和锁
5.1 事务概述
• 定义：事务是包含一个或一组SQL语句的工作单元。
• 特性：
• 原子性（Atomicity）：事务中的所有操作要么全部生效，要么全部不生效。
• 一致性（Consistency）：事务前后数据库的完整性不变。
• 隔离性（Isolation）：并发事务之间相互隔离，互不干扰。
• 持久性（Durability）：事务提交后，数据修改永久生效。
5.2 事务的隔离级别
• 支持的隔离级别：读已提交（Read Committed）和可串行化（Serializable），默认为读已提交。
• 隔离级别对比：
• 读未提交（Read Uncommitted）：可能出现脏读、不可重复读和幻读。
• 读已提交（Read Committed）：避免脏读，但可能出现不可重复读和幻读。
• 可重复读（Repeatable Read）：避免脏读和不可重复读，但可能出现幻读。
• 可串行化（Serializable）：避免脏读、不可重复读和幻读。
5.3 锁机制
• 作用：处理写写之间的并发，控制不同事务对同一数据的并发修改。
• 分类：
• 表锁：
• 共享锁（Share Lock,S）：允许DML并发执行，阻塞并发DDL。
• 排他锁（Exclusive Lock,X）：阻塞其他并发的DDL和DML。
• 行锁：DML语句修改数据时锁定要修改的行，只有排他锁一种类型。
5.4 锁相关视图
• `V$LOCK`：显示当前所有锁的信息。
• `V$LOCKED_OBJECT`：显示当前所有被锁定的对象信息。
这些视图可以帮助数据库管理员监控和分析锁的状态，以便优化并发性能和解决潜在的锁冲突问题。
---
六、小结
本章详细介绍了 YashanDB 数据库的体系结构及相关核心概念，主要包括以下几个方面：
1. 体系结构概况：
• YashanDB 的整体架构由线程管理、物理存储和内存管理三大模块组成。
• 线程管理包括工作线程和后台线程，分别负责处理客户端请求和执行系统级任务。
• 物理存储涉及控制文件、数据文件、Redo 日志文件等，是数据持久化的基础。
• 内存管理分为共享内存区域（SGA）和私有内存区域（SPA），用于优化性能和资源分配。
• 实例与数据库的关系明确，一个实例对应一个数据库，实例通过内存和线程管理为数据库提供服务。
2. YashanDB 基本概念：
• 实例是数据库运行的载体，数据库是数据存储的载体。
• 内存体系包括共享内存区域和私有内存区域，分别用于全局数据共享和会话级数据隔离。
• 进程线程体系涉及服务端核心进程、工作线程和后台线程，协同完成数据库的运行和维护。
• 物理存储是数据库的物理基础，包括控制文件、数据文件、日志文件等。
3. YashanDB 内存管理详解：
• 共享内存区域（SGA）包含内存共享池、数据缓存、有界加速缓存和虚拟内存，用于缓存和优化数据库操作。
• 私有内存区域（SPA）为每个会话独占，用于存储会话特定的数据和临时变量。
• 常用内存参数（如`DATA_BUFFER_SIZE`和`VM_BUFFER_SIZE`）对数据库性能有重要影响，需要根据实际需求进行合理配置。
4. YashanDB 进程详解：
• 服务端核心进程（YASDB）负责处理客户端连接请求。
• 工作线程（WORKER）是客户端连接的会话主线程，负责调度会话的业务执行。
• 后台线程包括 TCP 监听线程、数据脏块刷新线程、Redo 日志刷盘线程和检查点任务调度线程，用于执行数据库的系统级任务。
5. YashanDB 事务和锁：
• 事务是包含一个或多个 SQL 语句的工作单元，具有原子性、一致性、隔离性和持久性。
• YashanDB 支持读已提交和可串行化两种隔离级别，默认为读已提交。
• 锁机制用于处理并发操作中的写写冲突，包括表锁和行锁。
• 锁相关视图（如`V$LOCK`和`V$LOCKED_OBJECT`）可用于监控锁的状态。
相关文章：
Yashan DB 体系结构
一、体系结构概况 1.1 线程管理 YashanDB采用多线程架构，线程分为两类： • 工作线程（Worker Threads）：每个客户端连接到数据库实例时，会创建一个工作线程。工作线程负责处理客户端的SQL请求，执…...
测试工程师Deepseek实战之如何反向PUA它
问: 你是一名资深测试开发工程师 帮我设计一个提效工具，具有以下功能： 1.页面使用PYQT5设计，用两个输入控件，最好是日期类型的控件，第一个日期控件作为开始日期，第二个日期控件作为结束日期；前后…...
Windows系统中在VSCode上配置CUDA环境
前置步骤 安装符合GPU型号的CUDA Toolkit 配置好 nvcc 环境变量 安装 Visual Studio 参考https://blog.csdn.net/Cony_14/article/details/137510909 VSCode 安装插件 Nsight Visual Studio Code Editionvscode-cudacpp 安装 cmake 并配置好环境变量 注：Windows 端…...
React Native 0.76 升级后 APK 体积增大的原因及优化方案
在将 React Native 从 0.71 升级到 0.76 后，打包体积从 40 多 MB 增加到了 80 MB。经过一系列排查和优化，最终找到了解决方案，并将优化过程整理如下。 1. React Native 0.76 体积增大的可能原因 (1) 新架构默认启用 React Native 0.76 默认启用了 New Architecture（新架…...
pycharm找不到conda可执行文件
conda 24.9.2 在pycharm的右下角就可以切换python解释器了...
定时任务框架
常用定时任务框架 JDK 自带的 ScheduledExecutorService 适用于轻量级定时任务，基于线程池实现。API 简单，适用于小规模任务调度。 Quartz 强大的 Java 任务调度框架，支持 Cron 表达式、分布式集群、持久化等。适用于复杂调度场景࿰…...
ESP32S3读取数字麦克风INMP441的音频数据
ESP32S3 与 INMP441 麦克风模块的集成通常涉及使用 I2S 接口进行数字音频数据的传输。INMP441 是一款高性能的数字麦克风，它通过 I2S 接口输出音频数据。在 Arduino 环境中，ESP32S3 的开发通常使用 ESP-IDF（Espressif IoT Development Framew…...
利用后缀表达式构造表达式二叉树的方法
后缀表达式（逆波兰表达式）是一种将运算符放在操作数之后的表达式表示法。利用后缀表达式构造表达式二叉树的方法主要依赖于栈结构。 转换步骤 初始化 创建一个空栈。 遍历后缀表达式 对后缀表达式的每个符号依次处理： 遇到操作数 如果当前符…...
使用express创建服务器保存数据到mysql
创建数据库和表结构 CREATE DATABASE collect;USE collect;CREATE TABLE info (id int(11) NOT NULL AUTO_INCREMENT,create_date bigint(20) DEFAULT NULL COMMENT 时间,type varchar(20) DEFAULT NULL COMMENT 数据分类,text_value text COMMENT 内容,PRIMARY KEY (id) ) EN…...
YOLOv12本地部署教程——42%速度提升，让高效目标检测触手可及
YOLOv12 是“你只看一次”（You Only Look Once, YOLO）系列的最新版本，于 2025 年 2 月发布。它引入了注意力机制，提升了检测精度，同时保持了高效的实时性能。在保持速度的同时，显著提升了检测精度。例如&am…...
SQLAlchemy系列教程：如何防止SQL注入
SQL注入是一种常见的安全漏洞，它允许攻击者通过应用程序的SQL查询操纵数据库。使用ORM工具（如SQLAlchemy）提供的内置功能可以帮助减轻这些风险。本教程将指导您完成保护SQLAlchemy查询的实践。 了解SQL注入 当攻击者能够通过用户输入插入或操…...
1. 树莓派上配置机器人环境（具身智能机器人套件）
1. 安装树莓派系统 镜像下载地址（windows/Mac/Ubuntu)，安装Pi5. 2. 环境配置（登录Pi系统） 2.1 启用 SSH From the Preferences menu, launch Raspberry Pi Configuration. Navigate to the Interfaces tab. Select Enable…...
基于SpringBoot的智慧停车场小程序（源码+论文+部署教程）
运行环境 • 前端：小程序 Vue • 后端：Java • IDE工具：IDEA（可自行选择） HBuilderX 微信开发者工具 • 技术栈：小程序 SpringBoot Vue MySQL 主要功能 智慧停车场微信小程序主要包含小程序端和…...
【从零开始学习计算机科学】数字逻辑（九）有限状态机
【从零开始学习计算机科学】数字逻辑（九）有限状态机 有限状态机状态机的表示方法有限状态机的Verilog描述有限状态机 有限状态机(简称状态机)相当于一个控制器，它将一项功能的完成分解为若干步，每一步对应于二进制的一个状态，通过预先设计的顺序在各状态之间进行转换，状…...
HarmonyOS Next～鸿蒙系统ArkCompiler跨平台编译技术的革新实践
HarmonyOS Next~鸿蒙系统ArkCompiler跨平台编译技术的革新实践 引言 在万物互联时代，操作系统对编译技术的需求已从单纯的代码转换演变为跨设备协同、高效资源调度与极致性能优化的综合挑战。华为鸿蒙系统（HarmonyOS）自主研发的ArkCompiler…...
AI大模型概念知多少
什么是大模型？什么是模型参数 1）现在的大模型要解决的问题，就是一个序列数据转换的问题： 输入序列 X X[x1 ,x2 ,...,xm ]， 输出序列Y[y1 ,y2 ,…,yn ]，X和Y之间的关系是：YWX。 “大模型”这个词…...
powermock,mock使用笔记
介于日本的形式主义junit4单体测试，特记笔记，以下纯用手机打出来，因为电脑禁止复制粘贴。 pom文件 powermock-module-junit1.7.4 powermock-api-mokcito 1.7.4 spring-test 8 1，测试类头部打注解 RunWith(PowerMockRunner.class…...
基于置换对称性的模型融合：实现凸盆地单盆地理论
【摘要】 一种合并神经网络模型的新方法，通过置换对称性来合并模型。即使在大规模的非凸优化问题中，神经网络损失景观似乎通常只有一个（几乎）封闭的盆地，这在很大程度上归因于隐藏层单元置换对称性。作者介绍了三种算法，用于将一个模型的单元置换为与参考模型对齐，从而…...
把握好自己的节奏， 别让世界成为你的发条匠
我见过凌晨两点还在回复工作群消息的职场妈妈，也见过凌晨三点抱着手机刷短视频的年轻人。 地铁站台的上班族永远在狂奔，连刚会走路的小孩都被早教班塞满了日程表。 现如今生活节奏快，像一只巨大的发条，每个人都被拧得紧紧的&#…...
linux awk命令和awk语言
linux awk和awk语言 通常大家说的awk几乎都是在linux/unix中使用的awk命令，见下， https://www.geeksforgeeks.org/awk-command-unixlinux-examples/ 作为命令使用的话，存在下内容 Awk 是一个工具，使程序员能够编写小巧但有效的…...
(LeetCode 每日一题) 3442. 奇偶频次间的最大差值 I (哈希、字符串)
题目：3442. 奇偶频次间的最大差值 I 思路 ：哈希，时间复杂度0(n)。 用哈希表来记录每个字符串中字符的分布情况，哈希表这里用数组即可实现。 C版本： class Solution { public:int maxDifference(string s) {int a[26]…...
大话软工笔记—需求分析概述
需求分析，就是要对需求调研收集到的资料信息逐个地进行拆分、研究，从大量的不确定“需求”中确定出哪些需求最终要转换为确定的“功能需求”。 需求分析的作用非常重要，后续设计的依据主要来自于需求分析的成果，包括: 项目的目的…...
Golang dig框架与GraphQL的完美结合
将 Go 的 Dig 依赖注入框架与 GraphQL 结合使用，可以显著提升应用程序的可维护性、可测试性以及灵活性。 Dig 是一个强大的依赖注入容器，能够帮助开发者更好地管理复杂的依赖关系，而 GraphQL 则是一种用于 API 的查询语言，能够提…...
Vue2 第一节_Vue2上手_插值表达式{{}}_访问数据和修改数据_Vue开发者工具
文章目录 1.Vue2上手-如何创建一个Vue实例,进行初始化渲染2. 插值表达式{{}}3. 访问数据和修改数据4. vue响应式5. Vue开发者工具--方便调试 1.Vue2上手-如何创建一个Vue实例,进行初始化渲染 准备容器引包创建Vue实例 new Vue()指定配置项 ->渲染数据 准备一个容器,例如: …...
第25节 Node.js 断言测试
Node.js的assert模块主要用于编写程序的单元测试时使用，通过断言可以提早发现和排查出错误。 稳定性: 5 - 锁定 这个模块可用于应用的单元测试，通过 require(assert) 可以使用这个模块。 assert.fail(actual, expected, message, operator) 使用参数…...
【算法训练营Day07】字符串part1
文章目录 反转字符串反转字符串II替换数字 反转字符串 题目链接：344. 反转字符串 双指针法，两个指针的元素直接调转即可 class Solution {public void reverseString(char[] s) {int head 0;int end s.length - 1;while(head < end) {char temp …...
聊一聊接口测试的意义有哪些？
目录 一、隔离性 & 早期测试 二、保障系统集成质量 三、验证业务逻辑的核心层 四、提升测试效率与覆盖度 五、系统稳定性的守护者 六、驱动团队协作与契约管理 七、性能与扩展性的前置评估 八、持续交付的核心支撑 接口测试的意义可以从四个维度展开，首…...
#Uniapp篇：chrome调试unapp适配
chrome调试设备----使用Android模拟机开发调试移动端页面 Chrome://inspect/#devices MuMu模拟器Edge浏览器：Android原生APP嵌入的H5页面元素定位 chrome://inspect/#devices uniapp单位适配 根路径下 postcss.config.js 需要装这些插件 “postcss”: “^8.5.…...
短视频矩阵系统文案创作功能开发实践，定制化开发
在短视频行业迅猛发展的当下，企业和个人创作者为了扩大影响力、提升传播效果，纷纷采用短视频矩阵运营策略，同时管理多个平台、多个账号的内容发布。然而，频繁的文案创作需求让运营者疲于应对，如何高效产出高质量文案成…...
vulnyx Blogger writeup
信息收集 arp-scan nmap 获取userFlag 上web看看 一个默认的页面，gobuster扫一下目录 可以看到扫出的目录中得到了一个有价值的目录/wordpress，说明目标所使用的cms是wordpress，访问http://192.168.43.213/wordpress/然后查看源码能看到 这…...