hive 中最常用日期处理函数
hive 常用日期处理函数
在工作中,日期函数是提取数据计算数据必须要用到的环节。哪怕是提取某个时间段下的明细数据也得用到日期函数。今天和大家分享一下常用的日期函数。为什么说常用呢?其实这些函数在数据运营同学手上是几乎每天都在使用的。
技术交流
技术要学会分享、交流,不建议闭门造车。一个人可以走的很快、一堆人可以走的更远。
相关文件及代码都已上传,均可加交流群获取,群友已超过2000人,添加时最好的备注方式为:来源+兴趣方向,方便找到志同道合的朋友。
方式①、添加微信号:dkl88194,备注:来自CSDN + 加群
方式②、微信搜索公众号:Python学习与数据挖掘,后台回复:加群

| 序号 | hive日期函数 | 函数用法 | 含参方式 | 备注 |
| 1 | to_date | 转化成日期 | to_date('string time') | to_date('2023-5-20 05:20:00') 输出:2023-5-20 |
| 2 | from_unixtime | 转化unix时间戳到当前时区的时间格式 | from_unixtime(bigint unixtime,[string format]) | select from_unixtime(1684559640,'yyyyMMdd'); 输出:20230520 |
| 3 | unix_timestamp | 日期转化为unix时间戳 | unix_timestamp(string format) | select unix_timestamp(); 输出:1684559640 select unix_timestamp('2023-05-20 13:14:00'); 输出:1684559640 |
| 4 | date2datekey | date格式转化成datekey | date2datekey(string date/time) | date2datekey('2023-05-20') 输出:20230520 |
| 5 | datekey2date | datekey格式转化为date | datekey2date(string datekey) | datekey2date('20230520') 输出:2023-05-20 |
| 6 | datediff | 返回开始日期减去结束日期的天数 | datediff(string enddate ,string begindate) | select datediff('2023-05-20','2023-05-18'); 输出:2 |
| 7 | date_sub | 返回日期前n天的日期 | date_sub(string startdate,int days ) | date_sub('2023-05-20',2 ) 输出:2023-05-18 |
| 8 | date_add | 返回日期后n天的日期 | date_add(string startdate,int days ) | date_add('2023-05-20',2 ) 输出:2023-05-22 |
| 9 | year | 返回日期中的年 | year(string date) | year('2023-05-20 11:32:12'); 输出:2023 |
| 10 | month | 返回日期中的月份 | month(string date) | month('2023-05-20 11:32:12'); 输出:05 |
| 11 | day | 返回日期中的天 | day(string date) | day('2023-05-20 11:32:12'); 输出:20 |
| 12 | hour | 返回日期中的小时 | hour(string date) | hour('2023-05-20 11:32:12'); 输出:11 |
| 13 | minute | 返回日期中的分钟 | minute(string date) | minute('2023-05-20 11:32:12'); 输出:32 |
| 14 | second | 返回日期中的秒 | second(string date) | second('2023-05-20 11:32:12'); 输出:12 |
| 15 | weekofyear | 返回日期在当前周数 | weekofyear(string date) | weekofyear('2023-05-20 11:32:12'); 输出:20 |
| 16 | unix_timestamp | 格式是timestamp,精确到秒 | unix_timestamp(ymdhms2) - unix_timestamp(ymdhms1) | -- 计算2个时间相差的秒数 (unix_timestamp(time1)-unix_timestamp(time2)) -- 同理,若是计算相差的分钟,就在以上基础再除以60,小时,天数也是同理 (unix_timestamp(time1)-unix_timestamp(time2))/60 -- 根据上述的函数计算后,发现有小数点,可用cast优化为以下 cast((unix_timestamp(time1)-unix_timestamp(time2))/60 as int) -- 相差的秒数。 CAST((unix_timestamp() - unix_timestamp(ymdhms)) % 60 AS int) -- 相差的分钟数。 CAST((unix_timestamp() - unix_timestamp(ymdhms)) / 60 AS int) % 60 -- 相差的小时数。 CAST((unix_timestamp() - unix_timestamp(ymdhms)) / (60 * 60) AS int) % 24 -- 相差的天数。 concat(CAST((unix_timestamp() - unix_timestamp(ymdhms)) / (60 * 60 * 24) AS int) |
相关文章:
hive 中最常用日期处理函数
hive 常用日期处理函数 在工作中,日期函数是提取数据计算数据必须要用到的环节。哪怕是提取某个时间段下的明细数据也得用到日期函数。今天和大家分享一下常用的日期函数。为什么说常用呢?其实这些函数在数据运营同学手上是几乎每天都在使用的。 技术交…...
记录一下Java实体转json字段顺序问题
特殊需求,和C交互他们那边要求字段顺序要和他们定义的一致(批框架) 如下: Data public class UserDto {private String name;private Integer age;private String addr; }未转换前打印: 转换后打印: 可以看到转换为json顺序打印…...
微积分入门:总结归纳汇总(一)
基础 标准符号约定: ( s i n x ) n (sinx)^n (sinx)...
ubuntu python虚拟环境venv搭配systemd服务实战(禁用缓存下载--no-cache-dir)
文章目录 参考文章目录结构步骤安装venv查看python版本创建虚拟环境激活虚拟环境运行我们程序看缺少哪些依赖库,依次安装它们接下来我们配置python程序启动脚本,脚本中启动python程序前需先激活虚拟环境配置.service文件然后执行部署脚本,成功…...
案例15 Spring Boot入门案例
1. 选择Spring Initializr快速构建项目 2. 设置项目信息 3. 选择依赖 4. 设置项目名称 5. 项目结构 6. 项目依赖 自动配置了Spring MVC、内置了Tomcat、配置了Logback(日志)、配置了JSON。 7. 创建HelloController类 com.wfit.boot.hello目录下创建HelloCo…...
物联网是下一个风口吗?
随着科技的持续进步,物联网行业正在迅速兴起,展现出巨大的潜力。那么,物联网行业的未来是什么样的呢? 1. 5G技术的广泛应用和普及 随着5G技术的快速发展和商业化推广,物联网行业将迎来一个巨大的飞跃。5G技术的高速传…...
8月9日上课内容 nginx反向代理与负载均衡
负载均衡工作当中用的很多的,也是面试会问的很重要的一个点 负载均衡:通过反向代理来实现(nginx只有反向代理才能做负载均衡) 正向代理的配置方法(用的较少) 反向代理的方式:四层代理与七层代…...
易服客工作室:Elementor AI简介 – 彻底改变您创建网站的方式
Elementor 作为领先的 WordPress 网站构建器,是第一个添加本机 AI 集成的。Elementor AI 的第一阶段将使您能够生成和改进文本和自定义代码(HTML、自定义代码和自定义 CSS)。我们还已经在进行以下阶段的工作,其中将包括基于人工智…...
ClickHouse的数据类型
1.整数型 固定长度的整型,包括有符号整型或无符号整型。整型范围(-2n-1~2n-1-1): Int8 - [-128 : 127] Int16 - [-32768 : 32767] Int32 - [-2147483648 : 2147483647] Int64 - [-9223372036854775808 : 9223372036854775807]无符…...
计算机网络—IP
这里写目录标题 IP的基本认识网络层与数据链路层有什么关系IP地址基础知识IP 地址的分类什么是A、B、C类地址广播地址用来做什么什么是D、E类广播多播地址用于什么IP分类的优点IP分类的缺点 无分类地址CIDR如何划分网络号和主机号怎么进性子网划分 公有 IP 地址与私有 IP 地址公…...
Java 的 Stream
一、创建 Stream 1.1、创建 Stream 流 1.1.1、List 集合获取 Stream 流 Collection<String> list new ArrayList<>(); Stream<String> s1 list.stream(); 1.1.2、Map 集合获取 stream 流 Map<String, Integer> map new HashMap<>(); // …...
SolidUI社区-Discord
背景 随着文本生成图像的语言模型兴起,SolidUI想帮人们快速构建可视化工具,可视化内容包括2D,3D,3D场景,从而快速构三维数据演示场景。SolidUI 是一个创新的项目,旨在将自然语言处理(NLP)与计算机图形学相…...
Spring MVCSpring Boot
文章目录 Spring MVC什么是MVC模式Spring MVC优点SpringMVC 运行流程SpringMVC组件SpringMVC常用的注解有哪些SpringMVC的拦截器和过滤器有什么区别?执行顺序是什么 SpringBoot对SpringBoot的理解Spring和SpringBoot的关系?SpringBoot有哪些核心注解Spri…...
01-集群安装JDK(普通用户)
机器部署 集群规划 我们准备三台服务器kk01、kk02、kk03,内存4G、硬盘50G、处理器4核心2内核(总8) kk01使用 192.168.188.128 kk02使用 192.168.188.129 kk03使用 192.168.188.130 模板机准备 我们先创建一台作为模板机,后…...
小龟带你妙写排序之选择排序
选择排序 一. 原理二. 题目三. 思路分析四. 代码 一. 原理 选择排序(Selection-sort)是一种简单直观的排序算法。 工作原理:首先在未排序序列中找到最小(大)元素,存放到排序序列的起始位置,然后,再从剩余未…...
深入解析 SOCKS5 代理及其在网络安全与爬虫中的应用
在当今数字化时代,网络安全和数据获取成为了互联网时代的重要课题。为了实现安全的网络连接和高效的数据采集,各种代理技术应运而生。本文将深入探讨 SOCKS5 代理及其在网络安全和爬虫领域的应用,同时比较其与其他代理方式的优势与劣势。 1.…...
day9 10-牛客67道剑指offer-JZ66、19、20、75、23、76、8、28、77、78
文章目录 1. JZ66 构建乘积数组暴力解法双向遍历 2. JZ19 正则表达式匹配3. JZ20 表示数值的字符串有限状态机遍历 4. JZ75 字符流中第一个不重复的字符5. JZ23 链表中环的入口结点快慢指针哈希表 6. JZ76 删除链表中重复的结点快慢指针三指针如果只保留一个重复结点 7. JZ8 二…...
气体检测仪语音报警芯片,可自行烧录的音频芯片,WT588F02B-8S
近年来,安全问题备受关注,特别是涉及气体泄漏的危险场景。 为了进一步增强气体检测仪的安全功能,市面上便研发出了一款有害气体报警器,并采用WT588F02B-8S语音提示芯片为元器件,为产品赋予更多声音,更多警示…...
gdb 调试汇编
starti 从第一条指令开始执行并停止. nexti 执行完当前指令; 当前指令可能是call一个函数, 但是仍然下一条指令才停止; stepi 下一条指令, 如果跳转也跟着跳转; 查看寄存器值 info registers 查看通用寄存器 info registers {register_name ...}指定寄存器的值 info reg…...
WebRTC音视频通话-新增或修改SDP中的码率Bitrate限制
WebRTC音视频通话-新增或修改SDP中的码率Bitrate限制参数 之前搭建ossrs服务,可以查看:https://blog.csdn.net/gloryFlow/article/details/132257196 之前实现iOS端调用ossrs音视频通话,可以查看:https://blog.csdn.net/gloryFlo…...
3个核心痛点:UABEA如何帮你彻底解决Unity资源管理难题
3个核心痛点:UABEA如何帮你彻底解决Unity资源管理难题 【免费下载链接】UABEA c# uabe for newer versions of unity 项目地址: https://gitcode.com/gh_mirrors/ua/UABEA UABEA(Unity Asset Bundle Extractor Avalonia)是一款专为现代…...
我的模型在测试集上翻车了?可能是数据增强的‘幻觉’在捣鬼(避坑指南)
模型泛化陷阱:当数据增强成为"双刃剑"时的解决方案 在计算机视觉项目的最后冲刺阶段,团队里的气氛往往像过山车一样起伏。记得去年参与一个医疗影像分析项目时,我们在验证集上达到了令人振奋的98.5%的准确率,整个团队已…...
Win11Debloat:终极Windows系统清理工具,3分钟告别臃肿与广告
Win11Debloat:终极Windows系统清理工具,3分钟告别臃肿与广告 【免费下载链接】Win11Debloat A simple, lightweight PowerShell script that allows you to remove pre-installed apps, disable telemetry, as well as perform various other changes to…...
HJ180 游游的最长稳定子数组
题目题解(30)讨论(15)排行 中等 通过率:51.28% 时间限制:1秒 空间限制:256M 知识点双指针 校招时部分企业笔试将禁止编程题跳出页面,为提前适应,练习时请使用在线自测,而非本地IDE。 描述 定义一个数…...
终极指南:用Chinese-ERJ LaTeX模板轻松搞定经济研究期刊论文排版
终极指南:用Chinese-ERJ LaTeX模板轻松搞定经济研究期刊论文排版 【免费下载链接】Chinese-ERJ 《经济研究》杂志 LaTeX 论文模板 - LaTeX Template for Economic Research Journal 项目地址: https://gitcode.com/gh_mirrors/ch/Chinese-ERJ 还在为《经济研…...
轻量化语义分割实践:用MobileNet重构UNet的编码器
1. 为什么需要轻量化语义分割模型 语义分割是计算机视觉领域的核心任务之一,它需要为图像中的每个像素分配类别标签。在实际应用中,比如自动驾驶、医疗影像分析、工业质检等场景,模型往往需要部署在资源受限的设备上。这时候传统的UNet架构就…...
SeleniumBase + Python 自动化工作流优化
在自动化工作流的过程中,如何高效处理网页上的下拉菜单选择问题是许多开发者遇到的挑战。今天,我将结合 SeleniumBase 和 Python 的实例,探讨如何优化自动化脚本以应对网页表单中的下拉选择操作。 背景 在使用 SeleniumBase 进行自动化测试时,我们经常需要与各种类型的表…...
Applite:让Mac应用管理效率倍增的图形化工具终极指南
Applite:让Mac应用管理效率倍增的图形化工具终极指南 【免费下载链接】Applite User-friendly GUI macOS application for Homebrew Casks 项目地址: https://gitcode.com/gh_mirrors/ap/Applite 你是否还在为Mac上繁琐的软件安装和管理而烦恼?告…...
基恩士PLC通信避坑大全:从IP配置到批量读写,我用HSL踩过的坑都在这了
基恩士PLC通信实战避坑指南:从IP配置到批量读写的深度解析 凌晨三点,生产线突然停机,监控系统显示PLC通信中断。作为现场工程师,你必须在半小时内恢复生产——这不是演习,而是去年我在汽车装配线上真实遇到的危机场景。…...
万象视界灵坛环境部署:OpenShift平台容器化部署与RBAC权限控制
万象视界灵坛环境部署:OpenShift平台容器化部署与RBAC权限控制 1. 项目概述与技术背景 万象视界灵坛(Omni-Vision Sanctuary)是一款基于OpenAI CLIP模型构建的多模态智能感知平台。该平台通过创新的像素风格界面设计,将复杂的语…...
