当前位置: 首页 > news >正文

chapter-1数据管理技术的发展

以下课程来源于MOOC学习—原课程请见:数据库原理与应用

数据管理技术的发展

发展三阶段

  • 人工管理【1950前】

采用批处理;主要用于科学计算;外部设备只有磁带,卡片,纸带等

特点:1.数据面向应用2.数据不保(内)存3.数据不能共享4.不具有数据独立性

1.数据需要由应用程序自己 设计、说明(定义)和管 理,程序员在编写程序时 自己规定数据的存储结构、 存取方法和输入方式等。比如编写C语言,定义一个数组;不同程序的数组元素即使相同也不可以调用;程序结束运行后,内存清空;

2.数据独立性是指用户的应用程序与数据的 逻辑结构和物理结构是相互独立的;数据逻辑结构变化时,应用程序不变

  • 文件系统管理【1950-1960】

采用批处理+联机实时处理;【计算机大量用于数据管理;硬件包含磁盘等直接存取设备,软件有OS】

特点:1、数据可以长期保存2. 数据面向应用3.文件系统管理数据4.虽具有数据独立性,只是设备独立性,不具有数据独立性;5.数据具有一定的共享性,但是存在冗余存储

数据只是以文件的形式存储在磁盘或者存储器中,因此可以单独存储重复使用,但是文件建立更新等需要应用程序完成,并且对文件中相同的数据不能共享

  • 数据库系统管理【1960-】

管理的数据对象、应用范围、数据量等发生变化

数据处理要求更高的联机实时处理,出现分布处理

硬件:大容量磁盘、光盘等价格下降;软件价格升,维护成本增加;

数据库

  1. 数据库

长期存储在计算机内,有组织、统一管理、可共享的相关数据的集合

特点:采用数据模型组织数据:不仅描述数据本身特征,而且描述之间联系

特点:数据可采用数据模型将整个组织所涉及的数据集成在一个全局的数据库中,被不同组织的应用共享

特点:由数据库管理系统统一管理

特点:数据具有独立性,无需修改应用程序,实现程序与数据的分离


  1. 数据库管理系统DBMS 【数据库系统的核心/最重要的软件】

提供访问数据的方法,包括DB建立,查询,更新及时控制,比如MYSQL

定义:提供数据定义语言 来对数据库中数据对象进行定义,指定其结构和约束

提供数据操纵语言,对数据的基本操作

数据的组织、存储和管理

数据库的事务管理和运行管理 安全性,完整性,多用户并发操纵和系统恢复

数据库的维护 数据的载入,转换,恢复,重组,性能监视等


  1. 数据库系统

采用数据库技术存储,维护数据,向应用系统提供数据支撑

image-20210114231208802


  1. 数据库管理员 DBA

    五种职责

    image-20210114231420767

数据库体系结构【三级模式】

数据库先驱Charles w.bachaman ;1978年提出美国ANSI提出

三级模式好处

1.不同使用者有不同的视图,外部无需理解内部的复杂,减轻用户使用负担

2.实现数据的独立性[需要修改的是三层模式之间的两级映射]

模式和实例:

  • 数据库的描述称为模式———模式反应的是数据库中数据的结构和其联系,相对稳定

  • 一个特定时刻 数据库中的即时数据称为实例——不断变化【添加删除某列】

概念模式【模式】:

仅一个 概念级数据视图的描述;是全体数据的逻辑结构和特征;简称模式

外模式【子/用户模式】

可以有多个 数据库用户能够看见和使用的局部数据的逻辑结构和特征;外部级用户数据视图

内模式【存储模式】

只有一个 数据库的物理存储结构和存储方法,独立于具体的存储设备

image-20210114232811731

image-20210114232939516

请求检索数据库,在数据库三级模式中,完成各层间请求和结果转换,形成二级映射

1、外模式/概念模式之间的映射

2、概念模式/内模式之间的映射

数据独立性

  1. 数据
  • 信息是现实世界事物存在的方式或者运动状态等

  • 数据是信息的符号表示;信息是数据所表达的语义

  1. 数据结构:数据对象在计算机的组织方式
  • 逻辑结构是用户可见 的数据组织方式

  • 物理结构是在物理存储空间的存储方式和存放方法

  1. 数据独立性

用户的应用程序与数据的 逻辑结构和物理结构是相互独立的;

当数据逻辑结构或者物理结构变化时,应用程序不变

  • 物理独立性:用户的应用程序存储磁盘上的数据是相互独立
    • 数据的物理存储发生变化时,应用程序不变
  • 逻辑独立性:用户的应用程序数据库的逻辑结构是相互独立
    • 数据的逻辑结构发生变化时,应用程序不变

三级模式中将数据的结构区分用户的局部逻辑结构、数据的整体逻辑结构和物理逻辑结构

概念模式/内模式 保证数据的物理独立性[中下层]

当数据库的存储结构发生**改变[内模式]**时,只需要修改 概念模式/内模式 的映射 ,保持概念模式不变,内模式的变化隔离开概念模式的

外模式/概念模式 保证数据的逻辑独立性[中上层]

当数据库的逻辑结构发生**改变[模式]**时,只需要修改 外模式/概念模式 的映射 ,保持外模式不变,模式的变化隔离开概念模式的


其实,数据独立性可以定义为:

在修改数据库系统的某个层次模式,而无需修改上一层模式

比如:修改内模式无需修改概念模式,保持数据的物理独立性

当数据库的逻辑结构发生**改变[模式]**时,只需要修改 外模式/概念模式 的映射 ,保持外模式不变,模式的变化隔离开概念模式的


其实,数据独立性可以定义为:

在修改数据库系统的某个层次模式,而无需修改上一层模式

比如:修改内模式无需修改概念模式,保持数据的物理独立性

比如:修改概念模式无需修改外模式,保持数据的逻辑独立性

相关文章:

chapter-1数据管理技术的发展

以下课程来源于MOOC学习—原课程请见:数据库原理与应用 数据管理技术的发展 发展三阶段 人工管理【1950前】 采用批处理;主要用于科学计算;外部设备只有磁带,卡片,纸带等 特点:1.数据面向应用2.数据不保…...

23.Spring练习(spring、springMVC)

目录 一、Spring练习环境搭建。 (1)设置服务器启动的展示页面。 (2)创建工程步骤。 (3)applicationContext.xml配置文件。 (4)spring-mvc.xml配置文件。 (5&#x…...

【数据库原理 • 七】数据库并发控制

前言 数据库技术是计算机科学技术中发展最快,应用最广的技术之一,它是专门研究如何科学的组织和存储数据,如何高效地获取和处理数据的技术。它已成为各行各业存储数据、管理信息、共享资源和决策支持的最先进,最常用的技术。 当前…...

内部人员或给企业造成毁灭性损失

全球每年有近百万企业因数据丢失而倒闭。而媒体几乎每个月都会报道数百起恶意和无意的内部威胁事件,导致的企业机构名誉损失、巨额赔款甚至于面临运营危机。 内部威胁主要有三个来源: 1、疏忽或无意的员工; 2、有意识或恶意的内部人员&…...

【技巧】Word“只读方式”的设置与取消

如果你担心在阅读Word文档的时候,不小心修改并保存了内容,那就给文档设置“只读方式”吧,这样就算不小心做了修改也不能随意保存。 Word文档的“只读方式”有两种模式,对此不清楚的小伙伴,来看看如何设置和取消吧。 模…...

【软考备战·希赛网每日一练】2023年4月12日

文章目录一、今日成绩二、错题总结第一题三、知识查缺题目及解析来源:2023年04月12日软件设计师每日一练 一、今日成绩 二、错题总结 第一题 解析: 依据题目画出PERT图如下: 关键路径长度(从起点到终点的路径中最长的一条&#x…...

算法记录 | Day28 回溯算法

93.复原IP地址 思路: 1.确定回溯函数参数:定义全局遍历存放res集合和单个path,还需要 s字符 startindex(int)为下一层for循环搜索的起始位置。 2.终止条件:当len(path)4且遍历到字符串最末尾&#xff…...

气象历史数据和空气质量历史数据资源汇总免费

气象数据和空气质量数据资源汇总 1.全球气象数据资源 WorldClim 网址:Global climate and weather data — WorldClim 1 documentation WorldClim是一个全球高分辨率气候数据分享平台。截止2021年03月,其包括以下数据: •Climate数据&am…...

【区块链】走进web3的世界-对于前端来说,web2与web3的区别

web3离不开几个概念,智能合约、区块链、前端交互 1、智能合约可以直接与区块链中的区块进行交互; 2、前端通过web3.js/ethers.js等npm库可以和智能合约进行交互; 说的直白点,web3与web2对于前端来说,只是对接的对象发生…...

深拷贝和浅拷贝

目录 一.Java的Cloneable和clone()方法 1.Object类中的clone() 2.实现Cloneable接口的类 3.通过clone()生成对象的特点 二.深拷贝和浅拷贝 1.浅拷贝 2.深拷贝 3.实现深拷贝的两种方法 1.一种是递归的进行拷贝 2.Json字符串的方式进行深拷贝 一.Java的Cloneable和clone…...

【回眸】ChatGPT Plus(GPT4体验卡)

前言 没忍住诱惑,开了个GPT4.0的会员,给大家表演一波 开通成功 开始问问题 写一个CNN疲劳驾驶监测代码,要求{使用Python语言,使用包,能成功运行,需要调用电脑摄像头,要求GUI界面有一些参数…...

走进小程序【七】微信小程序【常见问题总结】

文章目录🌟前言🌟小程序登录🌟unionid 和 openid🌟关键Api🌟登录流程设计🌟利用现有登录体系🌟利用OpenId 创建用户体系🌟利用 Unionid 创建用户体系🌟授权获取用户信息流…...

光电隔离转换器 直流信号放大器 导轨安装DIN11 IPO OC系列

概述: 导轨安装DIN11 IPO OC系列模拟信号隔离放大器是一种将输入信号隔离放大、转换成按比例输出的直流信号混合集成厚模电路。产品广泛应用在电力、远程监控、仪器仪表、医疗设备、工业自控等需要直流信号隔离测控的行业。此系列产品内部采用了线性光电隔离技术相…...

语聊房app的开发以及运营思路

语聊房app是一种基于实时语音交流的社交应用,用户可以通过该应用结识新朋友、交流经验、分享兴趣爱好等,因此备受年轻用户的青睐。以下是语聊房app的开发以及运营思路: 一、开发思路 功能设计 语聊房app的核心功能是实时语音聊天&#xff0…...

目标检测基础之IOU计算

目标检测基础之IOU计算概念理解——什么是IOUdemo后记概念理解——什么是IOU IOU 交并比(Intersection over Union),从字面上很容易理解:计算交集在并集的比重。从网上截张图看看 IOUA∩BA∪BIOU \frac{A \cap B}{A \cup B} IO…...

从spring boot泄露到接管云服务器平台

0x1前言 在打野的时候意外发现了一个站点存在spring boot信息泄露,之前就有看到一些文章可以直接rce啥的,今天刚好试试。通过敏感信息发现存在accesskey泄露,就想直接通过解密,获取敏感信息,接管云平台。 首先说下这个…...

大数据技术——spark集群搭建

目录 spark概述 spark集群搭建 1.Spark安装 2.环境变量配置 3.Spark集群配置 4.启动Spark集群 存在问题及解决方案 请参考以下文章 spark概述 Spark是一个开源的大数据处理框架,它可以在分布式计算集群上进行高效的数据处理和分析。Spark的特点是速度快、易…...

嵌入式学习笔记汇总

本文整理STM32、STM8和uCOS-III的所有文章链接。 STM32学习笔记目录 源码:mySTM32-learn STM32学习笔记(1)——LED和蜂鸣器 STM32学习笔记(2)——按键输入实验 STM32学习笔记(3)——时钟系统 …...

Python 全栈系列220 Tornado的服务搭建

说明 想法变的真快 本来是没打算用Tornado的,主要是想节约时间。但是现在看来不用还是不行:目前用gevent flask部署的时候,启动多核的worker似乎存在问题。 另外,有很多内部基础的数据服务,其实并不需要flask的各种组…...

ESXi安装CentOS

ESXi安装 参考:https://blog.csdn.net/tongxin_tongmeng/article/details/129466704 CentOS安装 镜像:http://mirrors.aliyun.com/centos/7/isos/x86_64-->CentOS-7-x86_64-DVD-2009.iso CentOS配置 FinalShell连接 ESXi简介 1.ESXi是由VMware公司…...

WebTest搭建

0.前言 此框架为真实项目实战,所以有些数据不便展示,只展示架构和思想 工具:pythonseleniumddtunittest 1.架构说明 2.代码封装 Commom层 base_page.py #__author__19044168 #date2021/8/26 import logging import datetime from sele…...

什么性格的人适合报考机械类专业?(高考志愿填报选专业)

机械类专业 是指涉及机械设计、制造、加工、维护等方面的专业,是工程类专业中的一类。机械类专业的学生主要学习机械工程的基础知识,包括机械设计、力学、材料力学、热力学、流体力学等,同时也会学习机械制造、机电一体化、机器人技术等实践性…...

进程概念详解

目录 进程是什么? 描述进程:进程控制块-PCB task_struct task_struct 是什么? task_struct内容分类 组织进程 查看进程 fork创建子进程 进程状态 僵尸进程 孤儿进程 进程优先级 其他概念 进程是什么? 一般书上…...

C语言基础——指针

文章目录一、指针1.指针的意义2.指针类型表示3.一些操作3.1打印1个变量地址3.2通过地址查看改地址的内容以及修改改地址的内容3.3操作某个空间 -- 4个字节,给他赋值为100,只知道该空间的地址0x8000 00004.指针变量的定义5.指针类型的大小6.指针变量的使用6.1 指针变…...

反序列化渗透与攻防(二)之Java反序列化漏洞

Java反序列化漏洞 反序列化漏洞 JAVA反序列化漏洞到底是如何产生的? 1、由于很多站点或者RMI仓库等接口处存在java的反序列化功能,于是攻击者可以通过构造特定的恶意对象序列化后的流,让目标反序列化,从而达到自己的恶意预期行为,包括命令执行,甚至 getshell 等等。 …...

优先级队列的模拟实现(仿函数)

目录: 1.priority_queue接口的实现(先建大堆) 1.push 加 向上调整的实现 2.pop 3.迭代器区间的构造 2.仿函数 3.仿函数优化我们的优先级队列 -------------------------------------------------------------------------------------------…...

Python pandas和numpy用法参考(转)

以下是转载:Python pandas用法 - 简书介绍 在Python中,pandas是基于NumPy数组构建的,使数据预处理、清洗、分析工作变得更快更简单。pandas是专门为处理表格和混杂数据设计的,而NumPy更适合处...https://www.jianshu.com/p/840ba1…...

mysql数据库的在线数据备份与数据恢复

MySQL是一种常用的关系型数据库管理系统,它支持在线备份和恢复数据。在线备份指的是在MySQL数据库运行时备份数据,而不会中断或影响现有的数据库服务。在本文中,我们将介绍MySQL数据库的在线数据备份和恢复的原理和操作步骤。 一、备份原理 …...

Vue3自定义指令之前端水印功能实现

一、前置知识 — Vue 中的自定义指令 先来说说 vue2和vue3中自定义全局指令的区别 相同点:指令的应用场景,原理是一致的; 不同点:生命周期钩子函数名,指令定义的格式不一样。 vue2中自定义全局指令: 定义…...

文章生成器写出来的原创文章

文章生成机器人 文章生成机器人是一种基于人工智能技术和自然语言处理算法的程序,可以自动地生成高质量、原创的文章。 文章生成机器人的优点如下: 提高工作效率:文章生成机器人能够在较短的时间内自动帮助用户生成大量的文章,提…...