[Linux]文件系统
[Linux]文件系统
文件系统是操作系统的一部分,负责组织、存储和管理存储在外部设备上的文件和目录,也就是操作系统管理外设中的文件的策略。本文讲解的是Ext2文件系统。Linux操作系统使用的就是Ext系列的文件系统。
文章目录
- [Linux]文件系统
- 了解磁盘结构
- 磁盘的物理结构
- 磁盘存储结构
- 磁盘逻辑结构
- EXT2文件系统的存储方案
- inode的具体应用
- 补充细节
- 软硬链接
- 创建软硬链接
- 软硬链接的区别
- 软硬链接的使用场景
- 文件的三个时间
了解磁盘结构
磁盘的物理结构
磁盘是计算机上的唯一的机械设备,作为外设用于存储大量的数据,磁盘内部的物理结构示意图如下:
- 磁盘(如上图的银色圆盘)-- 由多个盘片组成,每个盘片的每个面都能够存储数据
- 磁头 – 每个盘片的每个面都有一个磁头,磁头能够在对应的盘面中读写数据
磁盘存储数据的原理: 计算机中的数据本质就是0和1的区别,因此磁盘只需要利用磁性来代表数据的0和1。
磁盘存储结构
磁盘的每个盘片的盘面被划分成多个部分:
- 磁道: 磁盘表面被分为许多同心圆,每个同心圆称为一个磁道,每个磁道都有一个编号,最外面的是0磁道。
- 扇区: 每个磁道被划分成若干个扇区,每个扇区的存储容量为512字节,每个扇区都有一个编号。
磁盘以扇区为单位进行数据的存储,一个磁盘文件会占据一个或多个扇区的位置来存储,要想加载磁盘文件到内存中,需要定位到磁盘文件所在的一个或多个扇区。
定位扇区的方法:
- 定位数据所在的是哪一个盘面 – 也就是选择哪一个对应的磁头。
- 定位数据在所在盘面的哪一个的磁道。
- 定位数据在所在磁道中的哪一个扇区。
磁头(Heads)、柱面(Cylinder)(等价于磁道)、扇区(Sector)对应的编号。即可在磁盘上定位所要访问的扇区。这种磁盘数据定位方式叫做 CHS 。
磁盘逻辑结构
磁盘需要抽象成逻辑结构的原因:
- OS是软件,磁盘是硬件,磁盘作为外设是可能被改变的,为了防止由于外设的改变而导致物理结构寻址方式的失败,OS采用逻辑地址,将逻辑与物理的转换交给中间软件层驱动程序,实现OS与外设的解耦
- 磁盘存储的基本单位是512字节,OS为了减少IO次数,提高效率,一次IO操作的基本单位是4KB(可调整大小),OS将一次IO的基本单位看作为块,因此需要一套块级别地址进行访问
磁盘的逻辑结构就类似于拉开的磁带,将一个盘片抽象成被拉开的磁带,一圈磁带就类似于一个磁道。逻辑结构示意图如下:
扇区的大小是512字节,而OS一次IO操作的基本单位是4KB,因此OS将一次IO操作的数据抽象成数据块。逻辑结构示意图如下:
OS将整个磁盘最终抽象成了多个连续的数据块,也就是将物理结构转换成了线性逻辑结构,因此OS能够将磁盘看作是有对应下标的数组结构,每个下标指向的是一个数据块,每一个下标也被称作逻辑块地址,简称LBA。OS将磁盘看作是数组结构后,每次IO操作就是找到数据块的首地址,然后从该地址开始读取对应个数的扇区。
EXT2文件系统的存储方案
OS将磁盘看作是由数组结构组织起来的数据块,由于数据块的数量众多,OS将该数组结构划分成多个分区。逻辑结构示意图如下:
将磁盘进行分区后,OS为了更方便的管理,还将每个分区划分成多个分组。逻辑结构示意图如下:
- 磁盘众多分区中,一般第一个分区存在一个
Boot Block
区域,该区域存储着OS的开启相关信息,计算机进行开机操作时,会加载磁盘数据,并使用该区域的数据完成开机操作。
将磁盘划分为若干个分组后,OS将一个分组的管理策略运用到每个分组中,实现对整个磁盘的管理。OS的具体管理策略如下:
-
Super Block: 记录该分区文件系统的重要信息,使得操作系统能够正确地使用和管理文件系统。
- Linux系统采用Ext系列的文件系统。
- Super Block在各个分组都可能存在,并且统一更新,是为了防止其损坏后,导致整个文件系统无法使用。
-
Group Descriptor Table: 记录改组的详细属性信息。
-
Block Bitmap: 每个bit表示一个Data Blocks中的数据块是否空闲可用,每个bit对应中的一个Data Blocks中的数据块。
-
inode Bitmap: 每个bit表示一个inode是否空闲可用,每个bit对应inode table中的一个inode。
-
inode Table: 记录该组所有文件的索引节点。
- inode内部的记录的是对应的一个文件的所有属性,由于文件属性的可预见性,一个inode大小为128字节。
- 每一个inode都有自己的inode编号,inode编号也数据对应文件的属性编号。
- inode内部记录了对应文件内容存储的数据块编号。
-
Data blocks: 记录了文件的内容。
- Data blocks区域内部被划分成了若干个大小为4KB的数据块。
- 一个的文件的内容会根据大小使用若干个数据块。
分组中的以上每个区域都可能会使用若干个数据块。
inode的具体应用
-
Linux操作系统是通过文件的inode编号来区分文件的,inode节点中不记录文件名。
-
目录作为文件也有自己的inode节点。
-
目录文件中记录的是该目录下的文件的inode编号和文件名的映射关系。
-
Linux操作系统查询文件的过程:
- 在文件的对应目录下,找到对应文件的inode编号。
- 在对应目录所在的分区下找到对应inode编号所在的分组,结合inode table,找到文件的inode节点。
- 通过inode节点找到对应的数据块。
-
Linux操作系统删除文件的过程:
- 在文件的对应目录下,找到对应文件的inode编号。
- 在对应目录所在的分区下找到对应inode编号所在的分组,结合inode table,找到文件的inode节点。
- 将inode节点中记录的数据块对应在Block Bitmap中的位图置为0。
- 将inode节点对应在inode Bitmap中位图置为0。
-
Linux操作系统添加文件的过程:
- 在要创建文件所在的目录所在的分组中查询inode bitmap,找到未被使用inode。
- 将文件的属性写入新创建的inode。
- 将文件名和inode编号的映射关系追加到所处目录的文件数据块中。
-
Linux操作系统修改文件的过程:
- 在文件的对应目录下,找到对应文件的inode编号。
- 在对应目录所在的分区下找到对应inode编号所在的分组,结合inode table,找到文件的inode节点。如果是空文件会根据写入数据的大小分配相应的数据块,并将数据块对应位图置为1,将数据块信息写入inode。
- 将修改后的数据刷新写入到对应的数据块中。
-
Linux使用
ls
指令时带-i
选项就可以查看到文件对应的inode编号:
补充细节
文件的恢复
如果文件被误删后,首先要避免文件操作,以防被删除的文件数据被覆盖,然后通过日志记录等技术,找到被删除的文件对应的inode编号将inode编号对应位图置为1,对应数据块置为1,从而完成文件的恢复。
inode编号寻找对应分组的策略
在一个分区中,每个分组所使用的inode编号是有范围的,通过inode编号所在范围能够快速确定inode所在的分组。
分区和分组的完成
在安装操作系统时,会根据用户指定的各分区大小进行分区的设置,然后对会对每个分区进行格式化,格式化就是操作系统向分区写入文件系统管理信息的。
inode记录对应数据块的策略
inode节点中采用数组记录对应数据块,以至于inode节点的大小得以确定,但是如果数组中的一个数据只能对应一个数据块那么,一个inode节点能指向的数据块是有限的,因此inode节点采用三级索引的策略来映射对应的数据块,将该数组划分成三个部分,每个部分采用不同的索引方式。
- 直接索引: 数组记录的数据块编号对应的数据块中就是文件内容。
- 二级索引: 数组记录的编号对应的数据块中记录的是其他数据块的编号,这些被记录在数据块中的数据块编号对应的数据块中存储的是文件内容。
- 三级索引: 数组记录的编号对应的数据块中记录的是其他数据块的编号,这些被记录在数据块中的数据块编号对应的数据块中存储的也是其他数据块的编号并且这些编号指向存储文件内容的数据块。
inode映射的存在的问题
EXT2存储方案存在一个分组,数据块用完、inode没用完或者inode用完、数据块没用完的问题并且如果出现这种情况是无法解决的。
软硬链接
创建软硬链接
- 创建软链接: 在Linux系统下
ln -s 被链接的文件名 软链接名字
指令能够创建软连接。
- 创建硬链接: 在Linux系统下
ln 被链接的文件名 硬链接名字
指令能够创建硬连接。
软硬链接的区别
-
软链接:
- 软链接有自己的inode编号,是一个独立的文件
- 软链接中存储的是链接文件的路径信息
-
硬链接:
- 硬链接和链接的文件共用同一个inode编号,硬链接和链接文件使用同一个inode
- 硬链接创建的本质是在目录下添加一组inode编号和文件名的映射,并且在对应的inode中的引用计数进行+1操作
- 当inode中引用计数为0代表该文件没有文件名和其inode编号映射,将删除该文件
软硬链接的使用场景
- 软链接适用于某一文件所在路径比较繁琐,可以不用进入路径或打出路径就可以访问文件,功能类似于Windows系统中的快捷方式。
- 硬链接使得Linux系统能够使用相对路径进行操作。
实际上每个目录中的.
就是一个硬链接,链接是当前目录,.
硬链接实现了以相对路径访问当前目录文件的功能。
在目录下创建一个新目录后,Linux系统会为新目录创建一个..
硬链接,链接的就是上级目录,..
硬链接实现了以相对路径访问上级目录文件的功能。
可以看出一个目录的硬链接数(目录中的..
) = 目录下的目录数量 + 2(目录本身和目录中的.
):
注意: 用户不能给目录创建硬链接,避免出现路径环路问题,系统自己维护目录硬链接。
文件的三个时间
- Access 最后访问时间
- Modify 文件内容最后修改时间
- Change 属性最后修改时间
stat 文件名
查看文件信息,其中就有文件的这三个时间:
访问文件时 ,Access时间就会进行更新:
注意: 在最新的Linux版本中,为了节省IO操作造成的时间浪费,如果只是单纯的查看数据不一定会立刻修改Access时间。
修改文件内容时 ,Modify和Change时间都会进行更新:
修改文件属性时 ,Change时间会进行更新:
相关文章:

[Linux]文件系统
[Linux]文件系统 文件系统是操作系统的一部分,负责组织、存储和管理存储在外部设备上的文件和目录,也就是操作系统管理外设中的文件的策略。本文讲解的是Ext2文件系统。Linux操作系统使用的就是Ext系列的文件系统。 文章目录 [Linux]文件系统了解磁盘结构…...
常见面试题记录
记录下java的常见面试题 文章目录 记录如下 记录如下 记录如下 hashmap原理lock原理synchronized锁优化过程线程状态以及创建方式线程池(执行过程,参数,淘汰策略)jvm(gc优化和OOM)volatile(可见…...

Android 系统源码目录frameworks/base/packages和packages/apps下的APP区别
概要 在 Android Open Source Project (AOSP) 源代码中,frameworks/base/packages 和 packages/apps 目录都包含 Android 系统中的应用程序,但它们在性质和用途上有一些区别: 1,frameworks/base/packages frameworks/base 目录…...

2023年数维杯数学建模A题河流-地下水系统水体污染研求解全过程文档及程序
2023年数维杯数学建模 A题 河流-地下水系统水体污染研 原题再现: 河流对地下水有着直接地影响,当河流补给地下水时,河流一旦被污染,容易导致地下水以及紧依河流分布的傍河水源地将受到不同程度的污染,这将严重影响工…...

Java测试(10)--- selenium
1.定位一组元素 (1)如何打开本地的HTML页面 拼成一个URL :file: /// 文件的绝对路径 import os os.path.abspath(文件的绝对路径) (2)先定位出同一类元素(tag name,name&…...

【文末送书】Matlab科学计算
欢迎关注博主 Mindtechnist 或加入【智能科技社区】一起学习和分享Linux、C、C、Python、Matlab,机器人运动控制、多机器人协作,智能优化算法,滤波估计、多传感器信息融合,机器学习,人工智能等相关领域的知识和技术。关…...
ElementUI浅尝辄止30:PageHeader 页头
如果页面的路径比较简单,推荐使用页头组件而非面包屑组件。 1.如何使用? <el-page-header back"goBack" content"详情页面"> </el-page-header><script>export default {methods: {goBack() {console.log(go bac…...

[Qt]基础数据类型和信号槽
文章目录 1. Qt基本结构1.1 Qt本有项目1.1.1 项目文件(.pro)1.1.2 main.cpp1.1.3 mainwindow.ui1.1.4 mainwindow.h1.1.5 mainwindow.cpp 1.2 Qt中的窗口类1.2.1基础窗口类1.2.2 窗口的显示 1.3 内存回收 2. Qt中的基础数据类型2.1 基础类型2.2 log输出2…...

UIStackView入门使用两个问题
项目中横向一排元素,竖向一排元素,可以使用UIStackView。UIStackView的原理不做介绍,这里主要讲两个初次使用容易出现的两个问题。 首先创建一个stackview -(UIStackView*)titleStackView{if(_titleStackView nil){_titleStackView [UISta…...

【Sentinel】Sentinel与gateway的限流算法
文章目录 1、Sentinel与Hystrix的区别2、限流算法3、限流算法对比4、Sentinel限流与Gateway限流 1、Sentinel与Hystrix的区别 线程隔离有两种方式实现: 线程池隔离(Hystrix默认采用)信号量隔离(Sentinel默认采用) 服…...

python实现对excel表中的某列数据进行排序
如下需要对webCms中的B列数据进行升序排序,且不能影响到其他列、工作表中的数据和格式。 import pandas as pd import openpyxl from openpyxl.utils.dataframe import dataframe_to_rows# 读取 Excel 文件 file_path 1.xlsx sheet_name webCms# 读取 Excel 文件并…...

CMS指纹识别
一.什么是指纹识别 常见cms系统 通过关键特征,识别出目标的CMS系统,服务器,开发语言,操作系统,CDN,WAF的类别版本等等 1.识别对象 1.CMS信息:比如Discuz,织梦,帝国CMS࿰…...
STL- 常用算法
概述: 算法主要是由头文件<algorithm> <functional> <numeric>组成。 <algorithm>是所有STL头文件中最大的一个,范围涉及到比较、 交换、查找、遍历操作、复制、修改等等 <numeric>体积很小,只包括几个在序列上面进行简…...

苹果铃声怎么设置?3招教你设置个性化铃声!
苹果手机因其颜值、性能与生态吸引了一大批粉丝用户。在拿到新手机后,大家第一时间就是给手机设置好听的铃声。那么,苹果铃声怎么设置呢?手机铃声能设置成自己喜欢的歌曲吗?当然可以了!本文将给大家介绍3种轻松设置苹果…...

LRTimelapse 6 for Mac(延时摄影视频制作软件)
LRTimelapse 是一款适用于macOS 系统的延时摄影视频制作软件,可以帮助用户创建高质量的延时摄影视频。该软件提供了直观的界面和丰富的功能,支持多种时间轴摄影工具和文件格式,并具有高度的可定制性和扩展性。 LRTimelapse 的主要特点如下&am…...
数据结构和算法(4):栈与队列
栈 ADT 及实现 栈(stack)是存放数据对象的一种特殊容器,其中的数据元素按线性的逻辑次序排列,故也可定义首、末元素。 尽管栈结构也支持对象的插入和删除操作,但其操作的范围仅限于栈的某一特定端。 也就是说…...

pdf怎么转换成dwg格式?简单转换方法分享
当我们需要在CAD中编辑PDF文件中的向量图形时,将PDF转换成DWG格式是一个非常好的选择。因为PDF是一种非常流行的文档格式,很多时候我们会接收到PDF文件,但是PDF文件中的向量图形无法直接在CAD中编辑。而将PDF转换成DWG格式后,就可…...

uniapp使用H5实现预览pdf文件
下载后把压缩包解压到自己的项目的static文件夹下的pdf文件下,如图 新建一个文件名为filePreview.vue <template><view><web-view :src"allUrl"></web-view></view> </template><script>export default {dat…...
Studio 3T for MongoDB的介绍及语法简单介绍
用法介绍 Studio 3T是一款用于MongoDB数据库管理和开发的图形化工具,它提供了许多功能来简化MongoDB的操作和开发过程。以下是一些常见的Studio 3T用法: 连接到MongoDB服务器: 打开Studio 3T并创建一个新连接配置。输入MongoDB服务器的主机名…...

MySQL数据库——存储引擎(1)-MySQL体系结构、存储引擎简介
目录 MySQL体系结构 连接层 服务层 引擎层 存储层 存储引擎简介 概念 语句 演示 下面开始学习进阶篇的第一个内容——存储引擎 分为四点学习: MySQL体系结构存储引擎简介存储引擎特点存储引擎选择 MySQL体系结构 连接层 最上层是一些客户端和链接服务&am…...

学习STC51单片机31(芯片为STC89C52RCRC)OLED显示屏1
每日一言 生活的美好,总是藏在那些你咬牙坚持的日子里。 硬件:OLED 以后要用到OLED的时候找到这个文件 OLED的设备地址 SSD1306"SSD" 是品牌缩写,"1306" 是产品编号。 驱动 OLED 屏幕的 IIC 总线数据传输格式 示意图 …...
【android bluetooth 框架分析 04】【bt-framework 层详解 1】【BluetoothProperties介绍】
1. BluetoothProperties介绍 libsysprop/srcs/android/sysprop/BluetoothProperties.sysprop BluetoothProperties.sysprop 是 Android AOSP 中的一种 系统属性定义文件(System Property Definition File),用于声明和管理 Bluetooth 模块相…...

Mac软件卸载指南,简单易懂!
刚和Adobe分手,它却总在Library里给你写"回忆录"?卸载的Final Cut Pro像电子幽灵般阴魂不散?总是会有残留文件,别慌!这份Mac软件卸载指南,将用最硬核的方式教你"数字分手术"࿰…...

ardupilot 开发环境eclipse 中import 缺少C++
目录 文章目录 目录摘要1.修复过程摘要 本节主要解决ardupilot 开发环境eclipse 中import 缺少C++,无法导入ardupilot代码,会引起查看不方便的问题。如下图所示 1.修复过程 0.安装ubuntu 软件中自带的eclipse 1.打开eclipse—Help—install new software 2.在 Work with中…...

k8s业务程序联调工具-KtConnect
概述 原理 工具作用是建立了一个从本地到集群的单向VPN,根据VPN原理,打通两个内网必然需要借助一个公共中继节点,ktconnect工具巧妙的利用k8s原生的portforward能力,简化了建立连接的过程,apiserver间接起到了中继节…...
Rapidio门铃消息FIFO溢出机制
关于RapidIO门铃消息FIFO的溢出机制及其与中断抖动的关系,以下是深入解析: 门铃FIFO溢出的本质 在RapidIO系统中,门铃消息FIFO是硬件控制器内部的缓冲区,用于临时存储接收到的门铃消息(Doorbell Message)。…...
C++.OpenGL (14/64)多光源(Multiple Lights)
多光源(Multiple Lights) 多光源渲染技术概览 #mermaid-svg-3L5e5gGn76TNh7Lq {font-family:"trebuchet ms",verdana,arial,sans-serif;font-size:16px;fill:#333;}#mermaid-svg-3L5e5gGn76TNh7Lq .error-icon{fill:#552222;}#mermaid-svg-3L5e5gGn76TNh7Lq .erro…...

【C++特殊工具与技术】优化内存分配(一):C++中的内存分配
目录 一、C 内存的基本概念 1.1 内存的物理与逻辑结构 1.2 C 程序的内存区域划分 二、栈内存分配 2.1 栈内存的特点 2.2 栈内存分配示例 三、堆内存分配 3.1 new和delete操作符 4.2 内存泄漏与悬空指针问题 4.3 new和delete的重载 四、智能指针…...

elementUI点击浏览table所选行数据查看文档
项目场景: table按照要求特定的数据变成按钮可以点击 解决方案: <el-table-columnprop"mlname"label"名称"align"center"width"180"><template slot-scope"scope"><el-buttonv-if&qu…...
Python实现简单音频数据压缩与解压算法
Python实现简单音频数据压缩与解压算法 引言 在音频数据处理中,压缩算法是降低存储成本和传输效率的关键技术。Python作为一门灵活且功能强大的编程语言,提供了丰富的库和工具来实现音频数据的压缩与解压。本文将通过一个简单的音频数据压缩与解压算法…...