当前位置： 首页 > news >正文

【Hive】——数据仓库

news 2026/5/23 20:27:04

1.1 数仓概念

数据仓库（data warehouse）：是一个用于存储，分析，报告的数据系统
目的：是构建面向分析的集成化数据环境，分析结果为企业提供决策支持
特点：
数据仓库本身不产生任何数据，其数据来源于不同外部系统
数据仓库也不需要消费任何的书，其结果开放给各个外部应用使用
这也是为什么叫仓库，而不叫工厂的原因
在这里插入图片描述

1.2 案例

在这里插入图片描述

1.3 数仓特征

在这里插入图片描述

1.3.1 面向主题性

在这里插入图片描述

1.3.2 集成性

在这里插入图片描述

1.3.3 非易性、非异变性

在这里插入图片描述

1.3.4 时变性

在这里插入图片描述

1.4 OLTP、OLAP

1.4.1 OLTP：联机事务处理

在这里插入图片描述

1.4.2 OLAP：联机分析处理

在这里插入图片描述
在这里插入图片描述

1.4.3 OLAP对比OLTP

在这里插入图片描述

在这里插入图片描述

1.5 数据仓库、数据库的区别

在这里插入图片描述
在这里插入图片描述

1.6 数据仓库、数据集市的区别

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

1.7 数据仓库思想与架构

1.7.1 分层思想和标准

操作型数据层（ODS）
数据仓库层（DW）
数据应用层（DA）
在这里插入图片描述

1.7.2 ODS层（Operation Data Store）

在这里插入图片描述

1.7.2 DW层（Data Warehouse）

在这里插入图片描述

1.7.3 DA层（或ADS层）

在这里插入图片描述

1.8 分层作用

在这里插入图片描述
在这里插入图片描述

1.9 ETL、ELT

ETL：抽取Extra、转化Transfer、装载Load
具体顺序基于业务实际灵活选择

1.9.1 ETL

在这里插入图片描述
在这里插入图片描述

1.9.2 ELT

在这里插入图片描述

在这里插入图片描述

相关文章：

【Hive】——数据仓库

1.1 数仓概念 数据仓库（data warehouse）：是一个用于存储，分析，报告的数据系统 目的：是构建面向分析的集成化数据环境，分析结果为企业提供决策支持 特点： 数据仓库本身不产生任何数据…...

编程日记 2023/12/10 21:53:40

算法基础九

螺旋矩阵2 给你一个正整数 n ，生成一个包含 1 到 n2 所有元素，且元素按顺时针顺序螺旋排列的 n x n 正方形矩阵 matrix。 示例 1： 输入：n 3 输出：[[1,2,3],[8,9,4],[7,6,5]] 示例 2： 输入：n …...

编程日记 2023/12/10 21:51:38

QT-在ui界面中给QWidget增加Layout布局的两种方法

2023-12-05 QT-在ui界面中给QWidget增加Layout布局的两种方法 方式一 在UI界面，用拖拽的方式加入Layout方式二 用notepad软件打开.ui文件，手动加入Layout代码 目标：去除右下角红标，给tab标签增加Layout属性。 方式一 在UI界面&am…...

编程日记 2023/12/10 21:49:35

免费的网页数据抓取工具有哪些？【2024附下载链接】

在网络上，有许多网页数据抓取工具可供选择。本文将探讨其如何全网采集数据并支持指定网站抓取。我们将比较不同的数据采集工具，帮助您找到最适合您需求的工具。 网页数据抓取工具种类 在选择网页数据抓取工具之前，让我们先了解一下这些工具…...

编程日记 2023/12/10 21:48:34

报错：Parsed mapper file: ‘file mapper.xml 导致无法启动

报错 ： Logging initialized using class org.apache.ibatis.logging.stdout.StdOutImpl adapter. Registered plugin: com.github.yulichang.interceptor.MPJInterceptor3b2c8bda Parsed mapper file: file [/Mapper.xml] application无法启动 我这边产生原因是项…...

编程日记 2023/12/10 21:45:32

Linux驱动开发学习笔记2《LED驱动开发试验》

目录 一、Linux下LED灯驱动原理 1.地址映射 二、硬件原理图分析 三、实验程序编写 1.LED 灯驱动程序编写 2.编写测试APP 四、运行测试 1.编译驱动程序和测试APP （1）编译驱动程序 （2）编译测试APP 2.运行测试 一、Linux下…...

编程日记 2023/12/10 21:44:30

hive数据库查看参数/hive查看当前环境配置

文章目录 一、hive查看当前环境配置命令 在一次hive数据库执行命令 set ngmr.exec.modecluster时，想看一下 ngmr.exec.mode参数原先的值是什么，所以写一下本篇博文，讲一下怎么查看hive中的参数。 一、hive查看当前环境配置命令 set &#…...

编程日记 2023/12/10 21:43:29

ajax中get和post的区别，datatype返回的数据类型有哪些？web开发中数据提交的几种方式，有什么区别。百度使用哪种方式？

在Ajax中，GET和POST是两种常见的HTTP请求方法。它们有以下区别： GET请求：使用GET请求时，参数数据会附加在URL的末尾，以查询字符串的形式发送给服务器。GET请求是幂等的，也就是说多次发送相同的GET请求&…...

编程日记 2023/12/10 21:42:28

STM32用flash保存参数实现平衡擦写的一种方法

#FLASH平衡擦写# 一、概述 简易示意图如下： 写参数前要擦除对应的扇区 全为0XFFFFFFFF操作的最小单位为32位 uint32_t; 当一块扇区写完时，将所有有用参数复制到第二块扇区，开始写新的参数，如果所有参数写完，又重第…...

编程日记 2023/12/10 21:40:26

Aho Corasick Algorithm

文章目录 前言介绍实现参考 前言 Aho Corasick Algorithm又叫AC自动机，该算法是一个匹配算法，用来匹配文本Text中多个patterns分别出现的次数； 我们定义n为patterns的总长度；m为Text的长度； 问题：在ahis…...

编程日记 2023/12/10 21:39:25

用户管理 --汇总

一、第一节课 1.1 本人写的 前端： 鱼皮 --＞ 用户中心 第1节课-CSDN博客 中期： 一、用户管理 第1节课中间-CSDN博客 后端： 一、用户管理-CSDN博客 其他的链接 亿图脑图MindMaster 1.2 优秀球友，推荐 Docs 另…...

编程日记 2023/12/10 21:36:23

Flutter视频播放器在iOS端和Android端都能实现全屏播放

Flutter开发过程中，对于视频播放的三方组件有很多，在Android端适配都挺好，但是在适配iPhone手机的时候，如果设置了UIInterfaceOrientationLandscapeLeft和UIInterfaceOrientationLandscapeRight都为false的情况下，无法…...

编程日记 2023/12/10 21:33:21

面试遇到的一些问题（二）

1、v-if v-show 区别，他们的生命周期区别 v-show: (类似于display:none/black 的切换)不管初始值是true 或false 都会进行渲染，状态改变也不会销毁和重新生成。不会影响生命周期 v-if : 是根据条件，dom进行删除插入操作。 依附于普通元素时：会触发父组件的beforeUpdate和u…...

编程日记 2023/12/10 21:32:20

JDK8新特性：Lambda表达式规则及用法，方法引用

目录 Lambda表达式是JDK8新增的一种语法格式 1.作用 2.用法规则： 3.方法引用 Lambda表达式是JDK8新增的一种语法格式 1.作用 简化匿名内部类的代码写法 Lambad用法前提：只能简化函数式接口（一般加有Funcationallnterface）&a…...

编程日记 2023/12/10 21:31:19

【GIS】JDK版本升级到17后，GeoServer的图层无法通过openLayer预览

JDK版本升级到17后，图层无法通过openLayer预览 1. 错误图示 终端输出的错误 网页端无法显示图层，并且输出错误提示 2.原因猜测 估计可能是由于java17的模块化，Java被分成了多个独立部署和运行的模块，这使得Java应用能够更快…...

编程日记 2023/12/10 21:30:18

vue 批量下载文件，不走后端接口的方法

今天ld提了一个需求&#xff0c;说页面的列表里面有要下载的地址,然后点击批量下载。我思索片刻&#xff0c;给出了代码 1.这个是列表页面的代码 <!-- 这个是列表页面的代码 --> <el-table :data"userListShow" align"center"border highlight-…...

编程日记 2023/12/10 21:29:17

科技云报道：AI+PaaS，中国云计算市场迎来新“变量”？

科技云报道原创。 没有小的市场&#xff0c;只有还没有被发现的大生意。 随着企业数字化转型的逐级深入&#xff0c;市场需求进一步向PaaS和SaaS层进发&#xff0c;使之成为公有云服务市场增长的主要动力。 根据IDC最新发布的报告显示&#xff0c;2022-2027五年间中国公有云…...

编程日记 2023/12/10 21:27:14

Windows Service Name重复问题

Windows Service Name重复问题 1&#xff0c;问题 2&#xff0c;打开命令提示符&#xff0c;管理员身份运行 3&#xff0c;输入命令&#xff1a;sc delete MYSQL57 4&#xff0c;验证一下&#xff0c;可以看见已经没有感叹号啦 &#xff0c;可以看见已经没有感叹号啦...

编程日记 2023/12/10 21:24:11

BBS项目

一.BBS项目介绍 1.项目开发流程 项目立项 ------> 公司高层决定需求调研和分析 ------> 市场人员&#xff0c;技术人员参与 -需求文档说明开发部门开会 ------> 确定项目架构&#xff0c;技术选型&#xff0c;数据库设计UI&#xff0c;UD团队&#xff08;产品经…...

编程日记 2023/12/10 21:20:08

Java基础——对象类型转换（向上、向下转型）

非继承关系的类之间对象类型不可以互相类型转换&#xff0c;只有继承关系才可以互相转换。 简单说&#xff0c;对象类型转换的前提要是继承关系。 对象类型转换分为&#xff1a;向上转型和向下转型。多态就是一种自动向上转型。 向上转型&#xff1a;子类对象用父类类型接收…...

编程日记 2023/12/10 21:19:07

博德之门3 2026最新免费下载 一键转存 永久更新 （看到速转存 资源随时走丢）

下载链接 电子角色扮演游戏的范式革新&#xff1a;博德之门3的技术架构与玩法机制剖析 在现代电子游戏工业中&#xff0c;古典角色扮演游戏&#xff08;CRPG&#xff09;曾因其高昂的学习门槛与繁复的规则体系&#xff0c;一度被视为分众市场的垂类产品。然而&#xff0c;2023…...

编程新知 2026/5/23 18:22:58

RV1126B开发板GPIO实战：libgpiod驱动与安全操作指南

1. 项目概述与核心思路 最近在折腾一块基于瑞芯微RV1126B芯片的EASY-EAI开发板&#xff0c;项目里需要用到几个GPIO口来控制外部继电器和读取传感器状态。虽然官方文档和网上资料不少&#xff0c;但真上手时发现&#xff0c;关于如何在这块板子上正确、安全地操作GPIO&#xff…...

编程新知 2026/5/23 18:22:58

【AI Agent审计实战白皮书】：20年审计专家亲授7大高危场景识别法与合规落地路径

更多请点击&#xff1a; https://intelliparadigm.com 第一章&#xff1a;AI Agent审计的核心范式演进 传统软件系统审计聚焦于代码合规性、日志完整性与权限边界&#xff0c;而AI Agent的自主决策、多步推理与动态工具调用能力&#xff0c;正推动审计范式从静态验证转向“意图…...

编程新知 2026/5/23 17:33:01

【计算机毕业设计】基于Springboot的高校教师科研管理系统设计与实现+万字文档

博主介绍&#xff1a;✌全网粉丝3W,csdn特邀作者、CSDN新星计划导师、Java领域优质创作者,掘金/华为云/阿里云/InfoQ等平台优质作者、专注于Java技术领域和学生毕业项目实战,高校老师/讲师/同行前辈交流✌ 技术范围&#xff1a;SpringBoot、Vue、SSM、HLMT、Jsp、PHP、Nodejs、…...

编程新知 2026/5/23 17:26:52

7个革命性策略：戴森球计划工厂蓝图全生命周期管理指南

7个革命性策略&#xff1a;戴森球计划工厂蓝图全生命周期管理指南 【免费下载链接】FactoryBluePrints 游戏戴森球计划的**工厂**蓝图仓库 项目地址: https://gitcode.com/GitHub_Trending/fa/FactoryBluePrints 想要在戴森球计划中建立高效工厂却总是遭遇物流瓶颈&…...

编程新知 2026/5/23 16:58:49

3步解锁GTA V无限可能：ScriptHookV脚本注入核心技术深度解析

3步解锁GTA V无限可能&#xff1a;ScriptHookV脚本注入核心技术深度解析 【免费下载链接】ScriptHookV An open source hook into GTAV for loading offline mods 项目地址: https://gitcode.com/gh_mirrors/sc/ScriptHookV 想象一下&#xff0c;你正在玩《侠盗猎车手V》…...

编程新知 2026/5/23 16:54:49

python入门教程(非常详细),python和c++哪个更值得学

python入门教程(非常详细),python和c哪个更值得学 这篇文章主要介绍了python入门教程(非常详细)&#xff0c;具有一定借鉴价值&#xff0c;需要的朋友可以参考下。希望大家阅读完这篇文章后大有收获&#xff0c;下面让小编带着大家一起了解一下。 python 怎么读 python&…...

编程新知 2026/5/23 16:52:45

为什么我总是想很多，却很难开始做？

为什么我总是想很多&#xff0c;却很难开始做&#xff1f; 有一种人&#xff0c;脑子从来停不下来。 走路在想&#xff0c;洗澡在想&#xff0c;睡前还在想。 想人生方向&#xff0c;想技术路线&#xff0c;想项目结构&#xff0c;想商业模式&#xff0c;想内容选题&#xff0c…...

编程新知 2026/5/23 16:32:16

企业从 Excel 管理转向系统化管理的关键步骤

企业从 Excel 管理转向系统化管理的关键步骤 几乎每家中小企业都经历过 Excel 管理阶段。客户表、合同表、项目表、库存表、资产表、员工表、回款表&#xff0c;一个个表格撑起了企业早期管理。Excel 的优势很明显&#xff1a;灵活、低成本、人人会用。 但企业规模一旦扩大&…...

编程新知 2026/5/23 16:14:02

终极突破指南：三步解锁原神PC版帧率限制，让你的显卡火力全开

终极突破指南&#xff1a;三步解锁原神PC版帧率限制&#xff0c;让你的显卡火力全开 【免费下载链接】genshin-fps-unlock unlocks the 60 fps cap 项目地址: https://gitcode.com/gh_mirrors/ge/genshin-fps-unlock 你是否曾经在提瓦特大陆上驰骋时&#xff0c;感觉自己…...

编程新知 2026/5/23 16:03:02