当前位置： 首页 > news >正文

【音视频】H264视频压缩格式

news 2025/7/3 16:18:17

H264简介

H.264从1999年开始，到2003年形成草案，最后在2007年定稿有待核实。在ITU的标准里称为H.264,
在MPEG的标准里是MPEG-4的一个组成部分-MPEG-4 Part 10，又叫Advanced Video Codec，因此常常称为MPEG-4AVC或直接叫AVC。

压缩算法

帧内编码

解决空间冗余

帧内有空间冗余

一帧图像，每8*8/16*16个像素点划分为一个块；

存储左边上边的像素点+一个预测方向（比如上下左右，平均）；

预测方向就是为了解码出其他的像素点，插值算法，类似渐变算法

帧间编码

解决时间冗余

帧间有时间冗余，连续图像必然有大量重复像素（连续画面）

引出I帧、P帧、B帧、GOP序列的概念

在这里插入图片描述

I帧

  • 帧内编码帧

  • 自身可以独立通过解压算法形成一张完整的图片

  • 每个GOP序列的第一个帧

  • 随机访问的参考点

  • 数据量最大

P帧

  • 前向预测编码帧

  • 将当前帧和前I帧、P帧比较，存储前帧没有的宏块，相似宏块记录索引

  • 和I帧相似率25%左右

B帧

  • 双向预测帧

  • 当前帧和I帧、前后P帧比较，存储不相似的宏块，相似宏块记录索引

  • 和I帧相似率75%左右

  • 数据量最少

这样通过双向索引机制，就可以大大提高压缩效率

GOP序列

GOP图像序列 可以理解成一个场景，场景的物体都是相似的
一般都是I帧到下一个I帧之间的所有帧序列

在这里插入图片描述

解码顺序

B帧解码需要等待后一个P帧出来，才能结合I帧+后一个P帧解码出一帧

  • 编码帧顺序：I B … B P B…B

  • 解码顺序：I P B B … B B

播放时会按照pts对帧排序

H264码流结构

H264原始码流是由一个接一个的NALU包组成

在这里插入图片描述
注意：

  • 传输码流之前要带上SPS、PPS，至少要发一次，然后发I帧，不然解码器解不出来

NALU结构

NALU由分割符（00 00 00 01）、头信息、编码数据构成

在这里插入图片描述注意

  • 对于FFmpeg解复用后，MP4文件读取出来的packet是不带startcode，但TS文件读取出来的packet带了startcode

  • 播放MP4文件，其中的H264码流的每个NALU里面必须带startcode才能播放

头信息说明

在这里插入图片描述
T为负荷数据类型，占5bit

nal_unit_type：这个NALU单元的类型,1～12由H.264使⽤，24～31由H.264以外的应⽤

一般只需要关注T的5678即可

在这里插入图片描述

举例：

0x00 00 00 01 67...说明：分隔符：0x00 00 00 0167 二进制：0 11 00111F: 0R: 11T: 00111 = 7  --->表示该NALU单元是序列参数集

annexb模式

H264有两种封装结构

  • 一种是annexb模式，传统模式，有startcode，SPS和PPS是在ES中，就是每个NALU=分割符+头信息+data
  • 一种是mp4模式，一般mp4 mkv都是mp4模式，没有startcode，SPS和PPS以及其它信息被封装在container中，每一个frame前面是这个frame的长度

很多解码器只支持annexb模式，所以如果要解析码流，需要将MP4模式做转换,就是加上分割符和sps+pps

相关文章：

【音视频】H264视频压缩格式

H264简介 H.264从1999年开始，到2003年形成草案，最后在2007年定稿有待核实。在ITU的标准里称为H.264, 在MPEG的标准里是MPEG-4的一个组成部分-MPEG-4 Part 10，又叫Advanced Video Codec，因此常常称为MPEG-4AVC或直接叫AVC。 压缩算…...

编程日记 2023/9/20 16:58:55

Windows【工具 04】WinSW官网使用说明及实例分享（将exe和jar注册成服务）实现服务器重启后的服务自动重启

官方Github；官方下载地址。没有Git加速的话很难下载，分享一下发布日期为2023.01.29的当前最新稳定版v2.12.0网盘连接。 包含文件： WinSW-x64.exesample-minimal.xmlsample-allOptions.xml 链接：https://pan.baidu.com/s/1sN3hL5H…...

编程日记 2023/9/20 16:56:53

【C++面向对象侯捷】3.构造函数

文章目录 class 的声明inline（内联）函数access level（访问级别）构造函数构造函数可以有多个- 重载！ class 的声明 inline（内联）函数 access level（访问级别） 构造函数 构…...

编程日记 2023/9/20 16:52:50

GE WESDAC D20ME 模拟输入电子模块

GE WESDAC D20ME 是一款模拟输入电子模块，通常用于工业自动化和控制系统中，用于采集模拟信号和传感器数据。以下是该模块的一些主要产品功能： 模拟输入通道：WESDAC D20ME 模块通常具有多个模拟输入通道，用于接收模拟信…...

编程日记 2023/9/20 16:50:48

GE WES5302-150 数字量控制模块

GE WES5302-150 是一款数字量控制模块，通常用于工业自动化和控制系统中，主要用于数字信号的输入和输出控制。以下是该模块的一些主要产品功能： 数字量输入：WES5302-150 模块通常具有多个数字输入通道，用于接收数字信号…...

编程日记 2023/9/20 16:49:47

Redis-渐进式遍历scan的使用

目录 1、为什么使用渐进式遍历？ 2、scan的使用 3、渐进式遍历的缺点 4、补充知识点：redis中也区分database 1、为什么使用渐进式遍历？ 前面的博客中，我们有提到使用keys *来获取所有的key，但这种办法，…...

编程日记 2023/9/20 16:48:46

数据结构——查找

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录 前言一、查找的基本概念二、顺序查找&&折半查找顺序查找顺序表的查找折半查找折半查找算法例题总结前言 查找的基本概念 顺序查找 折半查找 一、查找的基本概念 1.基本概念 查找：指定某…...

编程日记 2023/9/20 16:47:44

设计模式六大原则

设计模式6大原则 1. 单一职责原则 单一职责原则定义：一个对象应该只包含单一的职责，并且该职责被完整地封装在一个类中。另外一种定义：就一个类而言，应该仅有一个引起它变化的原因自己理解: 也就一个类只能是一个物体的抽象&…...

编程日记 2023/9/20 16:46:42

Docker 安装

Docker 官网：Docker: Accelerated Container Application Development Docker Hub官网：https://hub.docker.com/ 前提说明 CentOS Docker 安装 前提条件 目前，CentOS 仅发行版本中的内核支持 Docker。Docker 运行在CentOS 7 (64-bit)上&…...

编程日记 2023/9/20 16:45:41

国外发达国家码农是真混得好么?

来看看花旗工作十多年的码农怎么说吧! 美国最大的论坛 Reddit，之前有一个热帖： 一个程序员说自己喝醉了，软件工程师已经当了10年，心里有 好多话想说，“我可能会后悔今天说了这些话。”他洋洋洒洒写了 一大堆&#xff…...

编程日记 2023/9/20 16:44:41

构造函数不能做为虚函数

引用：windows程序员面试指南 构造函数不能做为虚函数 从存储空间角度 虚函数对应一个虚函数表，这大家都知道，可是这个虚函数表其实是存储在对象的内存空间的。问题出来了，如果构造函数是虚的，就需要通过虚函数表来调…...

编程日记 2023/9/20 16:37:34

持续集成实战 —— Jenkins自动化测试环境搭建

1.目的 在日常的项目测试过程中，搭建与维护测试环境是广大测试同学的一个基础技能，相信也很少会有公司完全不让测试去碰自己的测试环境。那么工作中大量的创建、部署、管理、维护等一系列的重复操作就成为了整个测试项目中一个巨大的工作量。 面对这样…...

编程日记 2023/9/20 16:36:32

ajax上传文件

背景 采用ajax传递表单内容和上传的文件 实现原理 使用FormData模拟表单数据，实现异步上传图片 代码 var formData new FormData(); formData.append("serviceId", param.serviceId); formData.append("keyId", param.keyId); formData.a…...

编程日记 2023/9/20 16:34:31

使用jib-maven-plugin插件构建镜像并推送至私服Harbor

jib-maven-plugin 插件配置 <?xml version"1.0" encoding"UTF-8"?> <project xmlns"http://maven.apache.org/POM/4.0.0"xmlns:xsi"http://www.w3.org/2001/XMLSchema-instance"xsi:schemaLocation"http://maven.apa…...

编程日记 2023/9/20 16:33:30

道路空间功率谱密度与时间功率谱密度（笔记）

0.随机路面 仿真时间200秒 车速15m/s 采样间隔0.25秒&#xff08;4Hz&#xff09; A级路面平均振幅&#xff1a;0.0044米 B级路面平均振幅&#xff1a;0.0087米 C级路面平均振幅&#xff1a;0.0173米 D级路面平均振幅&#xff1a;0.0346米 1.先上代码其中之一 clc clear clo…...

编程日记 2023/9/20 16:31:27

JMeter接口测试之文件上传

最近用JMeter做接口测试&#xff0c;频繁遇到了文件上传的接口&#xff0c;与其他一般接口的处理方式不一样&#xff0c;想着分享下&#xff0c;希望能给测试同学一点启发。 文章将围绕三个部分进行展开&#xff1a; 一、用户场景 二、接口请求参数 三、JMeter脚本编写步骤…...

编程日记 2023/9/20 16:30:26

自动化测试需知的4项测试工具！

一般来说学自动化会建议大家先学selenium&#xff0c;因为最早的时候&#xff0c;自动化就代表selenium&#xff0c;进入测试行业就开始做接口测试&#xff0c;而且现在基本每个公司都需要接口测试。今天就和大家聊一下接口测试的工具。 一、Robot Framework 机器人框架。之所…...

编程日记 2023/9/20 16:29:25

【深度学习】clip-interrogator clip docker 容器启动过程

文章目录 dockerfile备忘ENTRYPOINT ["bash", "/app/startProject.sh"]常用docker指令web服务脚本访问接口文件 给一张图片&#xff0c;输出图片描述。 dockerfile备忘 只有从dockerfile制作的镜像才有分层结构&#xff0c;加速传输&#xff0c;故第一步…...

编程日记 2023/9/20 16:28:24

Linux设备驱动之gpio-keys

Linux设备驱动之gpio-keys 前两个章节介绍了Linux字符设备和platform设备的注册&#xff0c;他们都是比较基础的&#xff0c;让大家理解Linux内核的设备驱动是如何注册、使用的。但在工作中&#xff0c;个人认为完全手写一个字符设备驱动的机会比较少&#xff0c;更多的都是基…...

编程日记 2023/9/20 16:27:23

【vue3页面展示代码】展示代码codemirror插件

技术版本&#xff1a; vue 3.2.40、codemirror 6.0.1、less 4.1.3、vue-codemirror 6.1.1、 codemirror/lang-vue 0.1.2、codemirror/theme-one-dark 6.1.2 效果图&#xff1a; 1.安装插件 yarn add codemirror vue-codemirror codemirror/lang-vue codemirror/theme-one-dar…...

编程日记 2023/9/20 16:26:20

日语AI面试高效通关秘籍：专业解读与青柚面试智能助攻

在如今就业市场竞争日益激烈的背景下&#xff0c;越来越多的求职者将目光投向了日本及中日双语岗位。但是&#xff0c;一场日语面试往往让许多人感到步履维艰。你是否也曾因为面试官抛出的“刁钻问题”而心生畏惧&#xff1f;面对生疏的日语交流环境&#xff0c;即便提前恶补了…...

编程新知 2025/6/29 12:41:00

K8S认证|CKS题库+答案| 11. AppArmor

目录 11. AppArmor 免费获取并激活 CKA_v1.31_模拟系统 题目 开始操作&#xff1a; 1&#xff09;、切换集群 2&#xff09;、切换节点 3&#xff09;、切换到 apparmor 的目录 4&#xff09;、执行 apparmor 策略模块 5&#xff09;、修改 pod 文件 6&#xff09;、…...

编程新知 2025/7/2 19:20:58

SciencePlots——绘制论文中的图片

文章目录 安装一、风格二、1 资源 安装 # 安装最新版 pip install githttps://github.com/garrettj403/SciencePlots.git# 安装稳定版 pip install SciencePlots一、风格 简单好用的深度学习论文绘图专用工具包–Science Plot 二、 1 资源 论文绘图神器来了&#xff1a;一行…...

编程新知 2025/6/17 19:00:28

在rocky linux 9.5上在线安装 docker

前面是指南&#xff0c;后面是日志 sudo dnf config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo sudo dnf install docker-ce docker-ce-cli containerd.io -y docker version sudo systemctl start docker sudo systemctl status docker …...

编程新知 2025/6/17 6:27:36

如何在看板中体现优先级变化

在看板中有效体现优先级变化的关键措施包括&#xff1a;采用颜色或标签标识优先级、设置任务排序规则、使用独立的优先级列或泳道、结合自动化规则同步优先级变化、建立定期的优先级审查流程。其中&#xff0c;设置任务排序规则尤其重要&#xff0c;因为它让看板视觉上直观地体…...

编程新知 2025/6/30 22:05:59

css的定位（position）详解：相对定位 绝对定位 固定定位

在 CSS 中&#xff0c;元素的定位通过 position 属性控制&#xff0c;共有 5 种定位模式&#xff1a;static&#xff08;静态定位&#xff09;、relative&#xff08;相对定位&#xff09;、absolute&#xff08;绝对定位&#xff09;、fixed&#xff08;固定定位&#xff09;和…...

编程新知 2025/6/20 15:30:35

Map相关知识

数据结构 二叉树 二叉树&#xff0c;顾名思义&#xff0c;每个节点最多有两个“叉”&#xff0c;也就是两个子节点&#xff0c;分别是左子 节点和右子节点。不过&#xff0c;二叉树并不要求每个节点都有两个子节点&#xff0c;有的节点只 有左子节点&#xff0c;有的节点只有…...

编程新知 2025/6/30 16:35:40

使用 Streamlit 构建支持主流大模型与 Ollama 的轻量级统一平台

🎯 使用 Streamlit 构建支持主流大模型与 Ollama 的轻量级统一平台 📌 项目背景 随着大语言模型（LLM）的广泛应用，开发者常面临多个挑战： 各大模型（OpenAI、Claude、Gemini、Ollama）接口风格不统一；缺乏一个统一平台进行模型调用与测试；本地模型 Ollama 的集成与前…...

编程新知 2025/7/2 14:16:01

HarmonyOS运动开发：如何用mpchart绘制运动配速图表

##鸿蒙核心技术##运动开发##Sensor Service Kit&#xff08;传感器服务&#xff09;# 前言 在运动类应用中&#xff0c;运动数据的可视化是提升用户体验的重要环节。通过直观的图表展示运动过程中的关键数据&#xff0c;如配速、距离、卡路里消耗等&#xff0c;用户可以更清晰…...

编程新知 2025/7/1 4:51:19

视频行为标注工具BehaviLabel（源码+使用介绍+Windows.Exe版本）

前言&#xff1a; 最近在做行为检测相关的模型&#xff0c;用的是时空图卷积网络&#xff08;STGCN&#xff09;&#xff0c;但原有kinetic-400数据集数据质量较低&#xff0c;需要进行细粒度的标注&#xff0c;同时粗略搜了下已有开源工具基本都集中于图像分割这块&#xff0c…...

编程新知 2025/6/21 12:22:29