一、rv1126开发之视频输入和视频编码
RV1126 H264/HEVC编码流程
一、RV1126编码的流程图:

二、每个代码模块详细讲解
2.1. VI模块的创建
VI模块的初始化:关键在于VI_CHN_ATTR_S结构体,这个结构体是VI设置的结构体。这个结构体的成员变量包括:pcVideoNode(video节点路径)、u32BufCnt(VI捕获视频缓冲区计数)、u32Width(分辨率宽度)、u32Height(分辨率高度)、 enPixFmt(VI格式)、enBufType(映射类型默认是:MMAP)、enWorkMode(VI通道模式)等成员变量。设置完成之后,则使用RK_MPI_VI_SetChnAttr进行设置VI操作,设置完成之后使用RK_MPI_VI_EnableChn使能VI层。
2.2. VENC模块的初始化
VENC的初始化:关键在于VENC_CHN_ATTR_S结构体,这个结构体是VENC设置的结构体。这个结构体包含以下成员变量:enType(编码类型)、enRcMode()、u32Gop(关键帧间隔)、u32Bitrate(编码码率)、u32SrcFrameRateDen(原始帧率分母)、u32SrcFrameRateNum(目标帧率分子)、 fr32DstFrameRateNum(目标帧率分母)、 fr32DstFrameRateDen(目标帧率分子)、 imageType(流格式)、u32PicWidth(分辨率长度)、u32PicHeight(分辨率高度)、u32VirWidth(分辨率虚长度)、u32VirHeight(分辨率虚高度)、u32Profile(编码等级)。
设置完上述成员变量后,则使用RK_MPI_VENC_CreateChn创建编码层。
2.3. 绑定VI和VENC模块
设置完VI模块和VENC模块后,需要进行绑定VI和VENC才能够正常采集到编码数据。采集的时候用到的结构体·MPP_CHN_S,其中MPP_CHN_S的enModId是模块的ID、 s32ChnId是通道id。 这里分别创建两个MPP_CHN_S结构体,一个是VI的MPP_CHN_S,它的enModId选择的是RK_ID_VI,s32Id应该和VI创建的ID进行适配;另外一个则是VENC的MPP_CHN_S,它的enModId选择的是RK_ID_VENC,s32ChnId和VENC创建的Id对应。创建完两个MPP_CHN_S结构体后,利用RK_MPI_SYS_BIND把VI和VENC进行绑定。
2.4. 创建线程采集VENC数据

从collect_venc_thread线程主要作用是获取VENC编码的码流数据,并实时保存到H264文件。在这个线程里面,有几个重要的API需要讲解:RK_MPI_SYS_GetMediaBuffer的作用是获取对应通道的数据,这个API第一个参数是模块ID,第二个参数是通道ID,第三个参数阻塞时间这里默认是-1不阻塞。获取VENC通道的数据后,这其中RK_MPI_MB_GetPtr是获取VENC缓冲区数据,RK_MPI_MB_GetSize是获取VENC的缓冲区长度,并把缓冲区数据fwrite写到H264文件。
#include <stdio.h>
#include "rkmedia_config.h"void * collect_venc_thread(void * args)
{pthread_detach(pthread_self()); //线程取消和主线程的绑定,当结束时自动销毁MEDIA_BUFFER mb;FILE * h264_file = fopen("./test_output.h264", "w+");while (1){mb = RK_MPI_SYS_GetMediaBuffer(RK_ID_VENC, 0 , -1); //从编码器中获取一帧数据放到缓冲区 参数(模块(venc),通道号,-1(非阻塞,>=0:阻塞等待的时间)),if(!mb){printf("Get Venc Buffer Break....\n");break;}printf("mmmmmm\n");//这里的mb只是一个地址,也就是指针//从缓冲区读取数据RK_MPI_MB_GetPtr(mb),大小RK_MPI_MB_GetSize(mb)也就是一帧编码的大小fwrite(RK_MPI_MB_GetPtr(mb), RK_MPI_MB_GetSize(mb), 1, h264_file); }return NULL;
}int main()
{RK_U32 u32Width = 1920;RK_U32 u32Height = 1080;RK_CHAR *pDeviceName = "rkispp_scale0"; //最大宽度3264,可进行缩放1-8倍,这部分去看rv1126的手册中的VI视频节点部分RK_CHAR *pOutPath = NULL;RK_CHAR *pIqfilesPath = NULL;CODEC_TYPE_E enCodecType = RK_CODEC_TYPE_H264; //编码类型RK_CHAR *pCodecName = "H264";RK_S32 s32CamId = 0; //vi管道号,一般为0RK_U32 u32BufCnt = 3;#if 0rk_aiq_working_mode_t hdr_mode = RK_AIQ_WORKING_MODE_NORMAL;SAMPLE_COMM_ISP_Init(hdr_mode, RK_FALSE);SAMPLE_COMM_ISP_Run();SAMPLE_COMM_ISP_SetFrameRate(30);
#endifint ret;RK_MPI_SYS_Init();VI_CHN_ATTR_S vi_chn_attr;vi_chn_attr.pcVideoNode = pDeviceName; //设置 VI的视频节点,比如“/dev/video0”,这部分去看rv1126的手册中的VI视频节点部分vi_chn_attr.u32BufCnt = u32BufCnt; //vi捕获视频缓冲区计数vi_chn_attr.u32Width = u32Width; //分辨率设置vi_chn_attr.u32Height = u32Height;vi_chn_attr.enPixFmt = IMAGE_TYPE_NV12; //视频的格式vi_chn_attr.enBufType = VI_CHN_BUF_TYPE_MMAP; //映射的方式vi_chn_attr.enWorkMode = VI_WORK_MODE_NORMAL;//通道号这里应该设置为0ret = RK_MPI_VI_SetChnAttr(s32CamId, 1, &vi_chn_attr); //设置vi设备属性,参数(vi管道号,vi通道号,vi通道属性结构体指针),管道号对应了sensor的个数ret |= RK_MPI_VI_EnableChn(s32CamId, 1);if (ret){printf("ERROR: create VI[0] error! ret=%d\n", ret);return 0;}VENC_CHN_ATTR_S venc_chn_attr;memset(&venc_chn_attr, 0, sizeof(venc_chn_attr));/*编码属性结构体之编码器属性*/venc_chn_attr.stVencAttr.enType = RK_CODEC_TYPE_H264; //设置编码器属性的编码类型为H264venc_chn_attr.stVencAttr.imageType = IMAGE_TYPE_NV12; //输入图形类型//下面这部分是分辨率,设置为想要的分辨率即可 venc_chn_attr.stVencAttr.u32PicWidth = u32Width; venc_chn_attr.stVencAttr.u32PicHeight = u32Height;venc_chn_attr.stVencAttr.u32VirWidth = u32Width;venc_chn_attr.stVencAttr.u32VirHeight = u32Height;venc_chn_attr.stVencAttr.u32Profile = 77; //编码等级,这块查看文档/*编码属性结构体之码率控制属性*/venc_chn_attr.stRcAttr.enRcMode = VENC_RC_MODE_H264CBR; //编码协议类型,H264//H264编码通道Cbr模式属性,此外还有H265,Mjpeg的模式属性venc_chn_attr.stRcAttr.stH264Cbr.u32Gop = 30; //GOP,I帧间隔 venc_chn_attr.stRcAttr.stH264Cbr.u32BitRate = u32Width * u32Height; //平均比特率,取值[2000-98000000],比特率设置,单位bps// frame rate: in 30/1, out 30/1. 这样的设置实际输入帧率是30,输出帧率为30venc_chn_attr.stRcAttr.stH264Cbr.fr32DstFrameRateDen = 1; //目标帧率分母venc_chn_attr.stRcAttr.stH264Cbr.fr32DstFrameRateNum = 30; //目标帧率分子venc_chn_attr.stRcAttr.stH264Cbr.u32SrcFrameRateDen = 1; //数据源帧率分母venc_chn_attr.stRcAttr.stH264Cbr.u32SrcFrameRateNum = 30; //数据源帧率分子ret = RK_MPI_VENC_CreateChn(0, &venc_chn_attr); //参数(通道号,视频编码属性结构体)if (ret){printf("ERROR: create VENC[0] error! ret=%d\n", ret);return 0;}/* vi视频输入通道和venc视频编码通道绑定 */MPP_CHN_S stSrcChn;stSrcChn.enModId = RK_ID_VI; //属性设置为vistSrcChn.s32DevId = 0; //vi设备号,其实就是上面的管道号stSrcChn.s32ChnId = 1; //vi设备的通道号,与上面设置的属性对应MPP_CHN_S stDestChn;stDestChn.enModId = RK_ID_VENC; //属性设置为vencstDestChn.s32DevId = 0; // 视频编码设备号默认0stDestChn.s32ChnId = 0; //视频编码通道ret = RK_MPI_SYS_Bind(&stSrcChn, &stDestChn);if (ret){printf("ERROR: Bind VI[0] and VENC[0] error! ret=%d\n", ret);return 0;}pthread_t pid;ret = pthread_create(&pid, NULL, collect_venc_thread, NULL);if(ret != 0){printf("Create Venc Thread Failed....\n");}while (1){sleep(20);}return 0;
}
相关文章:
一、rv1126开发之视频输入和视频编码
RV1126 H264/HEVC编码流程 一、RV1126编码的流程图: 二、每个代码模块详细讲解 2.1. VI模块的创建 VI模块的初始化:关键在于VI_CHN_ATTR_S结构体,这个结构体是VI设置的结构体。这个结构体的成员变量包括:pcVideoNode࿰…...
4.1 用源文件写汇编代码
汇编语言 1. 源程序 1.1 伪指令 汇编指令是有对应的机器码的指令,可以被编译为机器指令,最终为CPU所执行伪指令没有对应的机器指令,最终不被CPU所执行伪指令是由编译器来执行的指令,编译器根据伪指令来进行相关的编译工作 1.2…...
Linux TCP参数——tcp_abort_on_overflow
文章目录 tcp_abort_on_overflow全连接队列是什么?如何改变队列大小?内核源码流程命令查看总结 tcp_abort_on_overflow 英文翻译理解:溢出中止 所以,溢出指的是什么溢出? Linux中会维护socket全连接队列,所…...
jupyter notebook设置代码提示方法
在命令行运行以下代码: pip install jupyter_contrib_nbextensionsjupyter contrib nbextension install --userpip install jupyter_nbextensions_configuratorjupyter nbextensions_configurator enable --user (有时安装第一行后会自动执行第二行&a…...
Linux 一点查询资料
Linux 一点查询资料 Linux101 Linux入门教程 鸟哥的Linux私房菜 Harley Hahn’s Guide to Unix and Linux 文件管理 - cd, pwd, mkdir, rmdir, ls, cp, rm, mv, tar 文件检索 - cat, more, less, head, tail, file, find 输入输出控制 - 重定向, 管道, tee, xargs 文本处理 -…...
如何快速搭建一个完整的vue2+element-ui的项目-二
技术细节-继续配置 提示:你以为这样就完了吗,其实还有很多东西需要我们自己手写的 例如: element-ui的配置样式重置配置src使用的配置elinst配置axios异步请求的二次封转配置语言国际化配置(这个看需求,我这里就不用配置了)vuex的配置mixins的配置开发环…...
多语言LLM的状态:超越英语
多语言大语言模型的发展现状:超越英语 引言 据微软研究院的数据显示,世界上大约88%的语言,即12亿人的母语,缺乏对大型语言模型(LLM)的访问。这是因为大多数LLM都是以英语为中心的,即它们大多是…...
kafka什么情况下会认为发送失败进而去重试
在Kafka中,发送消息的过程是异步的,即消息后不会立即得到发送结果。Kafka会将消息添加到发送缓冲区,并立即返回一个成功的响应。因此,Kafka并不会直接知道消息是否成功发送到了目标主题的分区。 Kafka在以下情况下会认为发送失败…...
不满足软件包要求‘transformers==4.30.2‘, ‘sse-starlette
transformers4.30.2支持的SSE-Starlette版本是0.14.0...
C# 设置AutoScroll为true没效果的原因分析和解决办法
C#中添加tabControl 分页,将autoscroll设置为true发现缩小窗口没有滚动条效果。该问题出现后,检索发现也有很多人询问了该问题,但是都没有给出解决方案。 原因是内部button的属性Anchor设置为top、left、right、bottom导致的缩小界面窗口也没…...
<Senior High School Math>: inequality question
( 1 ) . o m i t (1). omit (1).omit ( 2 ) . ( a 2 − b 2 ) ( x 2 a 2 − y 2 b 2 ) ( x 2 y 2 ) − ( a 2 y 2 b 2 b 2 x 2 a 2 ) ≤ x 2 y 2 − 2 x y ( x − y ) 2 (2). (a^2-b^2)(\frac{x^2}{a^2} - \frac{y^2}{b^2})(x^2y^2)-(\frac{a^2y^2}{b^2}\frac{b^2x^2}{a^…...
详解Python中Pytest和Unittest的区别
昨天在群里面,有两个新手的小伙伴提问:Pytest 和 Unittest是Python中属于最常用的两个测试框架。那么他们有些什么区别呢? Playwright 为什么只给了Pytest的深度支持,而不是Unittest呢? 这是个好问题, 田辛…...
零基础入门多媒体音频(1)-音频基础
声音的本质是波动,波形图能直观体现声音的特征。我们常用于描述音频的属性有下面这些: 1.采样率:声音中每秒包含的采样点个数。 2.位宽:每个采样点需要多少个bit进行存储。 3.声道数:声音进行回放需要喇叭的个数。 4.频…...
40 道高频 C++ 面试、笔试题及答案
1. 什么是多态? 答案: 多态允许对象在运行时表现出不同的行为,具体取决于其类型。 2. 虚函数和纯虚函数之间的区别是什么? 答案: 虚函数可以被派生类重写,而纯虚函数必须被派生类实现,否则派生…...
【07】进阶html5
HTML5 包含两个部分的更新,分别是文档和web api 文档 HTML5 元素表 元素语义化 元素语义化是指每个 HTML 元素都代表着某种含义,在开发中应该根据元素含义选择元素 元素语义化的好处: 利于 SEO(搜索引擎优化)利于无障碍访问利于浏览器的插件分析网页新增元素 多媒体…...
Linux|centos7|postgresql数据库|yum和编译方式安装总结(全系版本)
一、 yum方式安装postgresql 这个是官方的yum源,包括postgresql的开发包,lib库什么的,很齐全,关键是包括pgbackrest yum install -y https://download.postgresql.org/pub/repos/yum/reporpms/EL-7-x86_64/pgdg-redhat-repo-la…...
C++提高笔记(五)---STL容器(set/multiset、map/multimap)
1、set / multiset容器 1.1set基本概念 简介:所有元素都会在插入时自动被排序 本质:set和multiset属于关联式容器,底层结构是用二叉树实现 set和multiset区别: set不允许容器中有重复的元素 multiset允许容器中有重复的元素 …...
详解main函数参数argc、argv及如何传参
目录 1、main()函数参数 2、main函数如何传参 2.1 环境准备 2.2 通过 Powershell 窗口传参 2.3 通过vs界面传参 3、int main() 和 int main(int argc, char *argv[]) 特点 1、main()函数参数 在C语言中,main函数可以带参数。main函数的原型通常为以下两种形式…...
解释什么是Web组件化开发及其优势
解释什么是Web组件化开发及其优势 Web组件化开发,是一种将Web应用的界面和功能拆分为独立、可复用的组件的开发方法。这种方法的核心思想是将大型、复杂的Web应用拆分为一系列小型、功能单一的组件,每个组件都负责处理特定的业务逻辑或界面表现。通过组…...
那些场景需要额外注意线程安全问题
主要学习那些场景需要额外注意线程安全问题,在这里总结了四中场景。 访问共享变量或资源 第一种场景是访问共享变量或共享资源的时候,典型的场景有访问共享对象的属性,访问static静态变量,访问共享的缓存,等等。因为…...
日语AI面试高效通关秘籍:专业解读与青柚面试智能助攻
在如今就业市场竞争日益激烈的背景下,越来越多的求职者将目光投向了日本及中日双语岗位。但是,一场日语面试往往让许多人感到步履维艰。你是否也曾因为面试官抛出的“刁钻问题”而心生畏惧?面对生疏的日语交流环境,即便提前恶补了…...
椭圆曲线密码学(ECC)
一、ECC算法概述 椭圆曲线密码学(Elliptic Curve Cryptography)是基于椭圆曲线数学理论的公钥密码系统,由Neal Koblitz和Victor Miller在1985年独立提出。相比RSA,ECC在相同安全强度下密钥更短(256位ECC ≈ 3072位RSA…...
盘古信息PCB行业解决方案:以全域场景重构,激活智造新未来
一、破局:PCB行业的时代之问 在数字经济蓬勃发展的浪潮中,PCB(印制电路板)作为 “电子产品之母”,其重要性愈发凸显。随着 5G、人工智能等新兴技术的加速渗透,PCB行业面临着前所未有的挑战与机遇。产品迭代…...
Debian系统简介
目录 Debian系统介绍 Debian版本介绍 Debian软件源介绍 软件包管理工具dpkg dpkg核心指令详解 安装软件包 卸载软件包 查询软件包状态 验证软件包完整性 手动处理依赖关系 dpkg vs apt Debian系统介绍 Debian 和 Ubuntu 都是基于 Debian内核 的 Linux 发行版ÿ…...
IGP(Interior Gateway Protocol,内部网关协议)
IGP(Interior Gateway Protocol,内部网关协议) 是一种用于在一个自治系统(AS)内部传递路由信息的路由协议,主要用于在一个组织或机构的内部网络中决定数据包的最佳路径。与用于自治系统之间通信的 EGP&…...
sqlserver 根据指定字符 解析拼接字符串
DECLARE LotNo NVARCHAR(50)A,B,C DECLARE xml XML ( SELECT <x> REPLACE(LotNo, ,, </x><x>) </x> ) DECLARE ErrorCode NVARCHAR(50) -- 提取 XML 中的值 SELECT value x.value(., VARCHAR(MAX))…...
让回归模型不再被异常值“带跑偏“,MSE和Cauchy损失函数在噪声数据环境下的实战对比
在机器学习的回归分析中,损失函数的选择对模型性能具有决定性影响。均方误差(MSE)作为经典的损失函数,在处理干净数据时表现优异,但在面对包含异常值的噪声数据时,其对大误差的二次惩罚机制往往导致模型参数…...
视频行为标注工具BehaviLabel(源码+使用介绍+Windows.Exe版本)
前言: 最近在做行为检测相关的模型,用的是时空图卷积网络(STGCN),但原有kinetic-400数据集数据质量较低,需要进行细粒度的标注,同时粗略搜了下已有开源工具基本都集中于图像分割这块,…...
C++:多态机制详解
目录 一. 多态的概念 1.静态多态(编译时多态) 二.动态多态的定义及实现 1.多态的构成条件 2.虚函数 3.虚函数的重写/覆盖 4.虚函数重写的一些其他问题 1).协变 2).析构函数的重写 5.override 和 final关键字 1&#…...
【JVM面试篇】高频八股汇总——类加载和类加载器
目录 1. 讲一下类加载过程? 2. Java创建对象的过程? 3. 对象的生命周期? 4. 类加载器有哪些? 5. 双亲委派模型的作用(好处)? 6. 讲一下类的加载和双亲委派原则? 7. 双亲委派模…...
