当前位置： 首页 > news >正文

Hive介绍及DDL

news 2025/10/15 3:57:44
1.OLTP和OLAP
  • OLTP： 联机事务处理系统。在前台接收的用户数据可以立即传送到后台进行处理，并在很短的时间内给出处理结果。
  • 关系型数据库是OLTP典型应用，如MySQL

OLTP环境开展数据分析是否可行？
在这里插入图片描述

为了更好的开展数据分析，于是有了数据仓库的建立。即联机分析处理系统OLAP，面向分析，支持分析。
在这里插入图片描述

2.数据仓库的主要特征

在这里插入图片描述

3.结构化数据与非结构化数据
  • 结构化数据就是指用二维表结构来逻辑表达和实现的数据
    在这里插入图片描述
4.SQL语法分类

在这里插入图片描述

5.Hive：SQL For Hadoop
  • 建立在Hadoop上的一款开源数据仓库系统，可以将存储在Hadoop文件中的结构化、半结构化数据映射为一张数据库表
  • Hive核心是将HQL转换为MapReduce程序，然后将程序提交到Hadoop集群上执行
  • Hive利用HDFS存储数据，利用MapReduce查询分析数据
  • Hive最大的好处就是用户可以专注于编写HQL，Hive帮我们转换成MapReduce程序完成对数据的分析，相当于一个接口
6.Hive的功能

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

7.Hive的架构

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

8.Hive建库、切换库、删除库

在这里插入图片描述
建库：
在这里插入图片描述
切换数据库：
在这里插入图片描述
删除数据库：
在这里插入图片描述

9.Hive建表（数据类型，分隔符）

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

10.show语法

在这里插入图片描述

相关文章：

Hive介绍及DDL

1.OLTP和OLAP OLTP： 联机事务处理系统。在前台接收的用户数据可以立即传送到后台进行处理，并在很短的时间内给出处理结果。关系型数据库是OLTP典型应用，如MySQL OLTP环境开展数据分析是否可行？ 为了更好的开展数据分析&#x…...

编程日记 2023/3/12 21:53:41

Simulink 自动代码生成电机控制：在某国产ARM0定点MCU上实现自动代码生成无感电机控制

目录 前言 开发流程 定点化的技巧 代码生成运行演示 总结 前言 这次尝试了在国产arm0内核的MCU上实现Simulink自动代码生成永磁同步电机无传感控制。机缘巧合之下拿到了一块国产MCU的电机控制板和一个5000RPM的小电机。最后实现了无传感控制，在这里总结下一些经…...

编程日记 2023/3/12 21:48:39

MySQL基本查询

文章目录表的增删查改Create（创建）单行数据 全列插入多行数据 指定列插入插入否则更新替换Retrieve（读取）SELECT列全列查询指定列查询查询字段为表达式查询结果指定别名结果去重WHERE 条件基本比较BETWEEN AND 条件连接OR 条件连…...

编程日记 2023/3/12 21:43:38

你需要知道的 7 个 Vue3 技巧

VNode 钩子在每个组件或html标签上，我们可以使用一些特殊的（文档没写的）钩子作为事件监听器。这些钩子有：onVnodeBeforeMountonVnodeMountedonVnodeBeforeUpdateonVnodeUpdatedonVnodeBeforeUnmountonVnodeUnmounted我主要是在组件…...

编程日记 2023/3/12 21:38:36

行政区划获取

行政区划获取一、导入jar包二、代码展示背景：公司的行政区划代码有问题，有的没有街道信息，有的关联信息有误，然后找到了国家的网站国家统计局-行政区划，这个里面是包含了所有的行政信息，但是全是html页面&a…...

编程日记 2023/3/12 21:33:35

让ChatGPT介绍一下ChatGPT

申请新必应内测通过了，我在New Bing中使用下ChatGPT，让ChatGPT介绍一下ChatGPT 问题1：帮我生成一篇介绍chatGPT的文章，不少于2000字 回答： chatGPT是什么？它有什么特点和用途？ chatGPT是一种…...

编程日记 2023/3/12 21:28:31

【Redis】Redis 主从复制 + 读写分离

Redis 主从复制 读写分离1. Redis 主从复制 读写分离介绍1.1 从数据持久化到服务高可用1.2 主从复制1.3 如何保证主从数据一致性？1.4 为何采用读写分离模式？2. 一主两从环境准备2.1 配置文件2.2 启动 Redis3. 主从复制原理3.1 全量同步3.1.1 建立连接3…...

编程日记 2023/3/12 21:23:29

2023届秋招，鬼知道我经历了什么

仅记录个人经历，充满主观感受，甚至纯属虚构，仅供参考，杠就是你对 本想毕业再写，但是考虑到等毕业了，24秋招的提前批就快开始了，大概就来不及了，正好现在有点时间，陆陆续…...

编程日记 2023/3/12 21:18:27

ChatGPT助力校招----面试问题分享(一)

1 ChatGPT每日一题：期望薪资是多少 问题：面试官问期望薪资是多少，如何回答 ChatGPT：当面试官问及期望薪资时，以下是一些建议的回答方法： 1、调查市场行情：在回答之前，可以先调查一…...

编程日记 2023/3/12 21:13:25

CSS媒体查询@media (prefers-color-scheme:dark)判断系统白天黑夜模式

前言 在最近学习中突然看到了在媒体查询中prefers-color-scheme:dark监听的使用，然后就模仿里边写了个简单例子，代码如下： body {background-color: #f5f5f5;}media (prefers-color-scheme: dark) {body {background-color: #666;}}然后通过…...

编程日记 2023/3/12 21:08:21

运行YOLOv8实现识别

https://github.com/ultralytics/ultralyticshttps://docs.ultralytics.com/环境配置官方环境要求Python>3.7（我是python3.8也是可以用的） environment with PyTorch>1.7.这是ultralyticsCommand Line Interface命令行接口运行输入参数的格式yolo …...

编程日记 2023/3/12 21:03:19

如何在Linux中优雅的使用 head 命令，用来看日志简直溜的不行

当您在 Linux 的命令行上工作时，有时希望快速查看文件的第一行，例如，有个日志文件不断更新，希望每次都查看日志文件的前 10 行。很多朋友使用文本编辑的命令是vim，但还有个命令head也可以让轻松查看文件的第一行。 在…...

编程日记 2023/3/12 20:58:17

Nginx.conf 配置详解

#安全问题，建议用nobody,不要用root. #user nobody; #worker数和服务器的cpu数相等是最为适宜 worker_processes 2; #work绑定cpu(4 work绑定4cpu) worker_cpu_affinity 0001 0010 0100 1000 #error_log path(存放路径) level(日志等级) path表示日志路径&…...

编程日记 2023/3/12 20:53:15

剖析NLP历史，看chatGPT的发展

1、NLP历史演进 1.1 NLP有监督范式 ​ NLP里的有监督任务的范式，可以归纳成如下的样子。 输入是字词序列，中间一步关键的是语义表征，有了语义表征之后，然后交给下游的模型学习。所以预训练技术的发展，都是在围绕怎么…...

编程日记 2023/3/12 20:48:14

20个Python使用小技巧，建议收藏~

1、易混淆操作 本节对一些 Python 易混淆的操作进行对比。 1.1 有放回随机采样和无放回随机采样 import random random.choices(seq, k1) # 长度为k的list，有放回采样 random.sample(seq, k) # 长度为k的list，无放回采样1.2 lambda 函数的参数 …...

编程日记 2023/3/12 20:43:11

Kafka 主题管理

Kafka 主题管理创建主题查看主题修改主题内部主题异常主题删除失败创建主题 创建 Kafka 主题 create : 创建主题partitions : 主题的分区数replication-factor : 每个分区下的副本数 bin/kafka-topics.sh \ --bootstrap-server broker_host:port \ --create --topic my_topi…...

编程日记 2023/5/30 14:37:30

【深度学习】GPT系列模型：语言理解能力的革新

GPT-1🏡 自然语言理解包括一系列不同的任务，例如文本蕴涵、问答、语义相似度评估和文档分类。尽管大量的未标记文本语料库很充足，但用于学习这些特定任务的标记数据却很稀缺，使得判别式训练模型难以达到良好的表现。我们证明&…...

编程日记 2023/3/12 20:33:04

【Vue.js】全局状态管理模式插件vuex

文章目录全局状态管理模式Vuexvuex是什么？什么是“状态管理模式”？vuex的应用场景Vuex安装开始核心概念一、State1、单一状态树2、在 Vue 组件中获得 Vuex 状态3、mapState辅助函数二、Getter三、Mutation1、提交载荷（Payload）2、…...

编程日记 2023/3/12 20:28:02

JPA 之 Hibernate EntityManager 使用指南

Hibernate EntityManager 专题 参考： JPA – EntityManager常用API详解EntityManager基本概念 基本概念及获得 EntityManager 对象 基本概念 在使用持久化工具的时候，一般都有一个对象来操作数据库，在原生的Hibernate中叫做Session&…...

编程日记 2023/3/12 20:23:01

英语作文提示（持续更新）

星期（介词on）Monday星期一Tuesday星期二Wednesday星期三Thursday星期四Friday星期五Saturday星期六Sunday星期日月份（介词in）lunar calendar农历on the second day of the second lunar农历初二January1月February2月March3月Apri…...

编程日记 2023/3/12 20:18:00

RestClient

什么是RestClient RestClient 是 Elasticsearch 官方提供的 Java 低级 REST 客户端，它允许HTTP与Elasticsearch 集群通信，而无需处理 JSON 序列化/反序列化等底层细节。它是 Elasticsearch Java API 客户端的基础。 RestClient 主要特点 轻量级&#xff…...

编程新知 2025/9/11 12:55:08

多云管理“拦路虎”：深入解析网络互联、身份同步与成本可视化的技术复杂度​

一、引言：多云环境的技术复杂性本质​​ 企业采用多云策略已从技术选型升维至生存刚需。当业务系统分散部署在多个云平台时，​​基础设施的技术债呈现指数级积累​​。网络连接、身份认证、成本管理这三大核心挑战相互嵌套：跨云网络构建数据…...

编程新知 2025/10/13 2:13:06

ES6从入门到精通：前言

ES6简介 ES6（ECMAScript 2015）是JavaScript语言的重大更新，引入了许多新特性，包括语法糖、新数据类型、模块化支持等，显著提升了开发效率和代码可维护性。 核心知识点概览 变量声明 let 和 const 取代 var&#xf…...

编程新知 2025/8/18 16:42:44

GitHub 趋势日报 (2025年06月06日)

📊 由 TrendForge 系统生成 | 🌐 https://trendforge.devlive.org/ 🌐 本日报中的项目描述已自动翻译为中文 📈 今日获星趋势图 今日获星趋势图 590 cognee 551 onlook 399 project-based-learning 348 build-your-own-x 320 ne…...

编程新知 2025/9/7 2:12:04

在 Spring Boot 项目里，MYSQL中json类型字段使用

前言&#xff1a; 因为程序特殊需求导致&#xff0c;需要mysql数据库存储json类型数据&#xff0c;因此记录一下使用流程 1.java实体中新增字段 private List<User> users 2.增加mybatis-plus注解 TableField(typeHandler FastjsonTypeHandler.class) private Lis…...

编程新知 2025/7/9 16:55:37

Easy Excel

Easy Excel 一、依赖引入二、基本使用1. 定义实体类&#xff08;导入/导出共用&#xff09;2. 写 Excel3. 读 Excel 三、常用注解说明&#xff08;完整列表&#xff09;四、进阶&#xff1a;自定义转换器&#xff08;Converter&#xff09; 其它自定义转换器没生效 Easy Excel在…...

编程新知 2025/10/13 13:22:49

生产管理系统开发：专业软件开发公司的实践与思考

生产管理系统开发的关键点 在当前制造业智能化升级的转型背景下&#xff0c;生产管理系统开发正逐步成为企业优化生产流程的重要技术手段。不同行业、不同规模的企业在推进生产管理数字化转型过程中&#xff0c;面临的挑战存在显著差异。本文结合具体实践案例&#xff0c;分析…...

编程新知 2025/10/7 13:25:14

多模态大语言模型arxiv论文略读（110）

CoVLA: Comprehensive Vision-Language-Action Dataset for Autonomous Driving ➡️ 论文标题&#xff1a;CoVLA: Comprehensive Vision-Language-Action Dataset for Autonomous Driving ➡️ 论文作者&#xff1a;Hidehisa Arai, Keita Miwa, Kento Sasaki, Yu Yamaguchi, …...

编程新知 2025/9/28 5:19:53

git删除本地分支和远程分支

删除本地分支 git branch -d 分支名删除远程分支 git push origin --delete 分支名...

编程新知 2025/8/1 20:41:41

SeaweedFS S3 Spring Boot Starter

SeaweedFS S3 Spring Boot Starter 源码特性环境要求快速开始1. 添加依赖2. 配置文件3. 使用方式方式一&#xff1a;注入服务类方式二&#xff1a;使用工具类 API 文档SeaweedFsS3Service 主要方法SeaweedFsS3Util 工具类方法 配置参数运行测试构建项目注意事项集成应用更多项目…...

编程新知 2025/10/5 21:18:57