当前位置: 首页 > news >正文

一、rv1126开发之视频输入和视频编码

RV1126 H264/HEVC编码流程

一、RV1126编码的流程图:

在这里插入图片描述

二、每个代码模块详细讲解

2.1. VI模块的创建

在这里插入图片描述VI模块的初始化:关键在于VI_CHN_ATTR_S结构体,这个结构体是VI设置的结构体。这个结构体的成员变量包括:pcVideoNode(video节点路径)、u32BufCnt(VI捕获视频缓冲区计数)、u32Width(分辨率宽度)、u32Height(分辨率高度)、 enPixFmt(VI格式)、enBufType(映射类型默认是:MMAP)、enWorkMode(VI通道模式)等成员变量。设置完成之后,则使用RK_MPI_VI_SetChnAttr进行设置VI操作,设置完成之后使用RK_MPI_VI_EnableChn使能VI层。

2.2. VENC模块的初始化

在这里插入图片描述VENC的初始化:关键在于VENC_CHN_ATTR_S结构体,这个结构体是VENC设置的结构体。这个结构体包含以下成员变量:enType(编码类型)、enRcMode()、u32Gop(关键帧间隔)、u32Bitrate(编码码率)、u32SrcFrameRateDen(原始帧率分母)、u32SrcFrameRateNum(目标帧率分子)、 fr32DstFrameRateNum(目标帧率分母)、 fr32DstFrameRateDen(目标帧率分子)、 imageType(流格式)、u32PicWidth(分辨率长度)、u32PicHeight(分辨率高度)、u32VirWidth(分辨率虚长度)、u32VirHeight(分辨率虚高度)、u32Profile(编码等级)。
设置完上述成员变量后,则使用RK_MPI_VENC_CreateChn创建编码层。

2.3. 绑定VI和VENC模块

在这里插入图片描述设置完VI模块和VENC模块后,需要进行绑定VI和VENC才能够正常采集到编码数据。采集的时候用到的结构体·MPP_CHN_S,其中MPP_CHN_S的enModId是模块的ID、 s32ChnId是通道id。 这里分别创建两个MPP_CHN_S结构体,一个是VI的MPP_CHN_S,它的enModId选择的是RK_ID_VI,s32Id应该和VI创建的ID进行适配;另外一个则是VENC的MPP_CHN_S,它的enModId选择的是RK_ID_VENC,s32ChnId和VENC创建的Id对应。创建完两个MPP_CHN_S结构体后,利用RK_MPI_SYS_BIND把VI和VENC进行绑定。

2.4. 创建线程采集VENC数据

在这里插入图片描述在这里插入图片描述从collect_venc_thread线程主要作用是获取VENC编码的码流数据,并实时保存到H264文件。在这个线程里面,有几个重要的API需要讲解:RK_MPI_SYS_GetMediaBuffer的作用是获取对应通道的数据,这个API第一个参数是模块ID,第二个参数是通道ID,第三个参数阻塞时间这里默认是-1不阻塞。获取VENC通道的数据后,这其中RK_MPI_MB_GetPtr是获取VENC缓冲区数据,RK_MPI_MB_GetSize是获取VENC的缓冲区长度,并把缓冲区数据fwrite写到H264文件。

#include <stdio.h>
#include "rkmedia_config.h"void * collect_venc_thread(void * args)
{pthread_detach(pthread_self());  //线程取消和主线程的绑定,当结束时自动销毁MEDIA_BUFFER mb;FILE * h264_file = fopen("./test_output.h264", "w+");while (1){mb = RK_MPI_SYS_GetMediaBuffer(RK_ID_VENC, 0 , -1);   //从编码器中获取一帧数据放到缓冲区  参数(模块(venc),通道号,-1(非阻塞,>=0:阻塞等待的时间)),if(!mb){printf("Get Venc Buffer Break....\n");break;}printf("mmmmmm\n");//这里的mb只是一个地址,也就是指针//从缓冲区读取数据RK_MPI_MB_GetPtr(mb),大小RK_MPI_MB_GetSize(mb)也就是一帧编码的大小fwrite(RK_MPI_MB_GetPtr(mb), RK_MPI_MB_GetSize(mb), 1, h264_file); }return NULL;
}int main()
{RK_U32 u32Width = 1920;RK_U32 u32Height = 1080;RK_CHAR *pDeviceName = "rkispp_scale0";  //最大宽度3264,可进行缩放1-8倍,这部分去看rv1126的手册中的VI视频节点部分RK_CHAR *pOutPath = NULL;RK_CHAR *pIqfilesPath = NULL;CODEC_TYPE_E enCodecType = RK_CODEC_TYPE_H264;  //编码类型RK_CHAR *pCodecName = "H264";RK_S32 s32CamId = 0;  //vi管道号,一般为0RK_U32 u32BufCnt = 3;#if 0rk_aiq_working_mode_t hdr_mode = RK_AIQ_WORKING_MODE_NORMAL;SAMPLE_COMM_ISP_Init(hdr_mode, RK_FALSE);SAMPLE_COMM_ISP_Run();SAMPLE_COMM_ISP_SetFrameRate(30);
#endifint ret;RK_MPI_SYS_Init();VI_CHN_ATTR_S vi_chn_attr;vi_chn_attr.pcVideoNode = pDeviceName;  //设置 VI的视频节点,比如“/dev/video0”,这部分去看rv1126的手册中的VI视频节点部分vi_chn_attr.u32BufCnt = u32BufCnt;  //vi捕获视频缓冲区计数vi_chn_attr.u32Width = u32Width;    //分辨率设置vi_chn_attr.u32Height = u32Height;vi_chn_attr.enPixFmt = IMAGE_TYPE_NV12;     //视频的格式vi_chn_attr.enBufType = VI_CHN_BUF_TYPE_MMAP;     //映射的方式vi_chn_attr.enWorkMode = VI_WORK_MODE_NORMAL;//通道号这里应该设置为0ret = RK_MPI_VI_SetChnAttr(s32CamId, 1, &vi_chn_attr);  //设置vi设备属性,参数(vi管道号,vi通道号,vi通道属性结构体指针),管道号对应了sensor的个数ret |= RK_MPI_VI_EnableChn(s32CamId, 1);if (ret){printf("ERROR: create VI[0] error! ret=%d\n", ret);return 0;}VENC_CHN_ATTR_S venc_chn_attr;memset(&venc_chn_attr, 0, sizeof(venc_chn_attr));/*编码属性结构体之编码器属性*/venc_chn_attr.stVencAttr.enType = RK_CODEC_TYPE_H264; //设置编码器属性的编码类型为H264venc_chn_attr.stVencAttr.imageType = IMAGE_TYPE_NV12;  //输入图形类型//下面这部分是分辨率,设置为想要的分辨率即可 venc_chn_attr.stVencAttr.u32PicWidth = u32Width; venc_chn_attr.stVencAttr.u32PicHeight = u32Height;venc_chn_attr.stVencAttr.u32VirWidth = u32Width;venc_chn_attr.stVencAttr.u32VirHeight = u32Height;venc_chn_attr.stVencAttr.u32Profile = 77; //编码等级,这块查看文档/*编码属性结构体之码率控制属性*/venc_chn_attr.stRcAttr.enRcMode = VENC_RC_MODE_H264CBR;  //编码协议类型,H264//H264编码通道Cbr模式属性,此外还有H265,Mjpeg的模式属性venc_chn_attr.stRcAttr.stH264Cbr.u32Gop = 30;   //GOP,I帧间隔        venc_chn_attr.stRcAttr.stH264Cbr.u32BitRate = u32Width * u32Height;   //平均比特率,取值[2000-98000000],比特率设置,单位bps// frame rate: in 30/1, out 30/1.  这样的设置实际输入帧率是30,输出帧率为30venc_chn_attr.stRcAttr.stH264Cbr.fr32DstFrameRateDen = 1;   //目标帧率分母venc_chn_attr.stRcAttr.stH264Cbr.fr32DstFrameRateNum = 30;  //目标帧率分子venc_chn_attr.stRcAttr.stH264Cbr.u32SrcFrameRateDen = 1;    //数据源帧率分母venc_chn_attr.stRcAttr.stH264Cbr.u32SrcFrameRateNum = 30;   //数据源帧率分子ret = RK_MPI_VENC_CreateChn(0, &venc_chn_attr);   //参数(通道号,视频编码属性结构体)if (ret){printf("ERROR: create VENC[0] error! ret=%d\n", ret);return 0;}/* vi视频输入通道和venc视频编码通道绑定 */MPP_CHN_S stSrcChn;stSrcChn.enModId = RK_ID_VI;  //属性设置为vistSrcChn.s32DevId = 0;  //vi设备号,其实就是上面的管道号stSrcChn.s32ChnId = 1;  //vi设备的通道号,与上面设置的属性对应MPP_CHN_S stDestChn;stDestChn.enModId = RK_ID_VENC;  //属性设置为vencstDestChn.s32DevId = 0;   // 视频编码设备号默认0stDestChn.s32ChnId = 0;     //视频编码通道ret = RK_MPI_SYS_Bind(&stSrcChn, &stDestChn);if (ret){printf("ERROR: Bind VI[0] and VENC[0] error! ret=%d\n", ret);return 0;}pthread_t pid;ret = pthread_create(&pid, NULL, collect_venc_thread, NULL);if(ret != 0){printf("Create Venc Thread Failed....\n");}while (1){sleep(20);}return 0;
}

相关文章:

一、rv1126开发之视频输入和视频编码

RV1126 H264/HEVC编码流程 一、RV1126编码的流程图&#xff1a; 二、每个代码模块详细讲解 2.1. VI模块的创建 VI模块的初始化&#xff1a;关键在于VI_CHN_ATTR_S结构体&#xff0c;这个结构体是VI设置的结构体。这个结构体的成员变量包括&#xff1a;pcVideoNode&#xff0…...

4.1 用源文件写汇编代码

汇编语言 1. 源程序 1.1 伪指令 汇编指令是有对应的机器码的指令&#xff0c;可以被编译为机器指令&#xff0c;最终为CPU所执行伪指令没有对应的机器指令&#xff0c;最终不被CPU所执行伪指令是由编译器来执行的指令&#xff0c;编译器根据伪指令来进行相关的编译工作 1.2…...

Linux TCP参数——tcp_abort_on_overflow

文章目录 tcp_abort_on_overflow全连接队列是什么&#xff1f;如何改变队列大小&#xff1f;内核源码流程命令查看总结 tcp_abort_on_overflow 英文翻译理解&#xff1a;溢出中止 所以&#xff0c;溢出指的是什么溢出&#xff1f; Linux中会维护socket全连接队列&#xff0c;所…...

jupyter notebook设置代码提示方法

在命令行运行以下代码&#xff1a; pip install jupyter_contrib_nbextensionsjupyter contrib nbextension install --userpip install jupyter_nbextensions_configuratorjupyter nbextensions_configurator enable --user &#xff08;有时安装第一行后会自动执行第二行&a…...

Linux 一点查询资料

Linux 一点查询资料 Linux101 Linux入门教程 鸟哥的Linux私房菜 Harley Hahn’s Guide to Unix and Linux 文件管理 - cd, pwd, mkdir, rmdir, ls, cp, rm, mv, tar 文件检索 - cat, more, less, head, tail, file, find 输入输出控制 - 重定向, 管道, tee, xargs 文本处理 -…...

如何快速搭建一个完整的vue2+element-ui的项目-二

技术细节-继续配置 提示&#xff1a;你以为这样就完了吗,其实还有很多东西需要我们自己手写的 例如&#xff1a; element-ui的配置样式重置配置src使用的配置elinst配置axios异步请求的二次封转配置语言国际化配置(这个看需求,我这里就不用配置了)vuex的配置mixins的配置开发环…...

多语言LLM的状态:超越英语

多语言大语言模型的发展现状&#xff1a;超越英语 引言 据微软研究院的数据显示&#xff0c;世界上大约88%的语言&#xff0c;即12亿人的母语&#xff0c;缺乏对大型语言模型&#xff08;LLM&#xff09;的访问。这是因为大多数LLM都是以英语为中心的&#xff0c;即它们大多是…...

kafka什么情况下会认为发送失败进而去重试

在Kafka中&#xff0c;发送消息的过程是异步的&#xff0c;即消息后不会立即得到发送结果。Kafka会将消息添加到发送缓冲区&#xff0c;并立即返回一个成功的响应。因此&#xff0c;Kafka并不会直接知道消息是否成功发送到了目标主题的分区。 Kafka在以下情况下会认为发送失败…...

不满足软件包要求‘transformers==4.30.2‘, ‘sse-starlette

transformers4.30.2支持的SSE-Starlette版本是0.14.0...

C# 设置AutoScroll为true没效果的原因分析和解决办法

C#中添加tabControl 分页&#xff0c;将autoscroll设置为true发现缩小窗口没有滚动条效果。该问题出现后&#xff0c;检索发现也有很多人询问了该问题&#xff0c;但是都没有给出解决方案。 原因是内部button的属性Anchor设置为top、left、right、bottom导致的缩小界面窗口也没…...

<Senior High School Math>: inequality question

( 1 ) . o m i t (1). omit (1).omit ( 2 ) . ( a 2 − b 2 ) ( x 2 a 2 − y 2 b 2 ) ( x 2 y 2 ) − ( a 2 y 2 b 2 b 2 x 2 a 2 ) ≤ x 2 y 2 − 2 x y ( x − y ) 2 (2). (a^2-b^2)(\frac{x^2}{a^2} - \frac{y^2}{b^2})(x^2y^2)-(\frac{a^2y^2}{b^2}\frac{b^2x^2}{a^…...

详解Python中Pytest和Unittest的区别

昨天在群里面&#xff0c;有两个新手的小伙伴提问&#xff1a;Pytest 和 Unittest是Python中属于最常用的两个测试框架。那么他们有些什么区别呢&#xff1f; Playwright 为什么只给了Pytest的深度支持&#xff0c;而不是Unittest呢&#xff1f; 这是个好问题&#xff0c; 田辛…...

零基础入门多媒体音频(1)-音频基础

声音的本质是波动&#xff0c;波形图能直观体现声音的特征。我们常用于描述音频的属性有下面这些&#xff1a; 1.采样率&#xff1a;声音中每秒包含的采样点个数。 2.位宽&#xff1a;每个采样点需要多少个bit进行存储。 3.声道数&#xff1a;声音进行回放需要喇叭的个数。 4.频…...

40 道高频 C++ 面试、笔试题及答案

1. 什么是多态&#xff1f; 答案&#xff1a; 多态允许对象在运行时表现出不同的行为&#xff0c;具体取决于其类型。 2. 虚函数和纯虚函数之间的区别是什么&#xff1f; 答案&#xff1a; 虚函数可以被派生类重写&#xff0c;而纯虚函数必须被派生类实现&#xff0c;否则派生…...

【07】进阶html5

HTML5 包含两个部分的更新,分别是文档和web api 文档 HTML5 元素表 元素语义化 元素语义化是指每个 HTML 元素都代表着某种含义,在开发中应该根据元素含义选择元素 元素语义化的好处: 利于 SEO(搜索引擎优化)利于无障碍访问利于浏览器的插件分析网页新增元素 多媒体…...

Linux|centos7|postgresql数据库|yum和编译方式安装总结(全系版本)

一、 yum方式安装postgresql 这个是官方的yum源&#xff0c;包括postgresql的开发包&#xff0c;lib库什么的&#xff0c;很齐全&#xff0c;关键是包括pgbackrest yum install -y https://download.postgresql.org/pub/repos/yum/reporpms/EL-7-x86_64/pgdg-redhat-repo-la…...

C++提高笔记(五)---STL容器(set/multiset、map/multimap)

1、set / multiset容器 1.1set基本概念 简介&#xff1a;所有元素都会在插入时自动被排序 本质&#xff1a;set和multiset属于关联式容器&#xff0c;底层结构是用二叉树实现 set和multiset区别&#xff1a; set不允许容器中有重复的元素 multiset允许容器中有重复的元素 …...

详解main函数参数argc、argv及如何传参

目录 1、main()函数参数 2、main函数如何传参 2.1 环境准备 2.2 通过 Powershell 窗口传参 2.3 通过vs界面传参 3、int main() 和 int main(int argc, char *argv[]) 特点 1、main()函数参数 在C语言中&#xff0c;main函数可以带参数。main函数的原型通常为以下两种形式…...

解释什么是Web组件化开发及其优势

解释什么是Web组件化开发及其优势 Web组件化开发&#xff0c;是一种将Web应用的界面和功能拆分为独立、可复用的组件的开发方法。这种方法的核心思想是将大型、复杂的Web应用拆分为一系列小型、功能单一的组件&#xff0c;每个组件都负责处理特定的业务逻辑或界面表现。通过组…...

那些场景需要额外注意线程安全问题

主要学习那些场景需要额外注意线程安全问题&#xff0c;在这里总结了四中场景。 访问共享变量或资源 第一种场景是访问共享变量或共享资源的时候&#xff0c;典型的场景有访问共享对象的属性&#xff0c;访问static静态变量&#xff0c;访问共享的缓存&#xff0c;等等。因为…...

英雄联盟终极助手:如何用League Akari工具包提升游戏体验

英雄联盟终极助手&#xff1a;如何用League Akari工具包提升游戏体验 【免费下载链接】League-Toolkit An all-in-one toolkit for LeagueClient. Gathering power &#x1f680;. 项目地址: https://gitcode.com/gh_mirrors/le/League-Toolkit League Akari是一款基于L…...

贾子成功定理(普通完整版):德能 × 投入 ÷ 内耗——人生与AI时代的成功底盘法则

贾子成功定理&#xff08;普通完整版&#xff09;&#xff1a;德能 投入 内耗——人生与AI时代的成功底盘法则摘要&#xff1a; 贾子成功定理普通完整版以公式S kT/I为核心&#xff1a;S为成功量级&#xff0c;k为德能&#xff08;承载力、信用、格局、伦理底线&#xff09;…...

Java SPI实战:从零实现一个可插拔的日志框架(附完整代码)

Java SPI实战&#xff1a;构建可插拔日志框架的深度探索 在当今快速迭代的软件开发领域&#xff0c;模块化和可扩展性已成为架构设计的核心诉求。想象一下这样的场景&#xff1a;你的应用需要同时支持控制台日志、文件日志和网络日志&#xff0c;但又不希望将具体实现硬编码在…...

Noto字体:告别豆腐块困扰,打造完美多语言显示体验

Noto字体&#xff1a;告别豆腐块困扰&#xff0c;打造完美多语言显示体验 【免费下载链接】noto-fonts Noto fonts, except for CJK and emoji 项目地址: https://gitcode.com/gh_mirrors/no/noto-fonts 你是否曾在浏览多语言网站时&#xff0c;看到过那些令人困惑的&q…...

基于PointNet++的3D点云分割与体积计算实战指南

1. 为什么选择PointNet处理3D点云 在计算机视觉领域&#xff0c;3D点云处理一直是个棘手的问题。传统的卷积神经网络&#xff08;CNN&#xff09;擅长处理规则网格数据&#xff08;比如2D图像&#xff09;&#xff0c;但面对无序、稀疏的点云数据时就显得力不从心。我最早接触这…...

第九篇:内容组织——知识图谱与实体关系:让AI像专家一样“理解”你

副标题:从“字符串”到“事物”——构建品牌在AI认知世界中的知识网络 引言:当AI只记得你的“名字”,却不知道你“是谁” 陆薇在智联优品的GEO监测报告中,发现了一个让她困惑的现象。 品牌在AI答案中的提及率已经提升了近三倍,AI开始引用智联优品的品牌名称和产品参数。…...

UART接收机设计:如何通过过采样策略提升波特率容错性

1. UART通信的波特率容差挑战 第一次用STM32做UART通信时&#xff0c;我遇到过这样的问题&#xff1a;明明发送端和接收端都设置了相同的115200波特率&#xff0c;但收到的数据总是出现乱码。后来用逻辑分析仪抓波形才发现&#xff0c;原来是两边的时钟源存在0.5%的偏差。这个经…...

Ubuntu22.04新系统下MVS V3.0.1驱动海康威视工业相机实战

1. 环境准备与系统迁移背景 最近把开发环境从Ubuntu16.04升级到了22.04&#xff0c;主要原因是新项目需要使用ROS2 Humble。说实话&#xff0c;系统迁移这事儿看着简单&#xff0c;实际操作起来还是有不少坑要踩的。特别是像我们这种用海康威视工业相机的&#xff0c;驱动兼容性…...

虎贲等考 AI:以智能赋能学术,做更可靠的全流程论文写作助手

在学术研究与论文写作日益规范化、高效化的今天&#xff0c;从开题、撰写、实证到答辩&#xff0c;每一步都考验着研究者的时间、耐心与专业能力。虎贲等考 AI 智能写作&#xff08;https://www.aihbdk.com/&#xff09;作为一款基于人工智能技术的论文写作辅助工具&#xff0c…...

告别手写UI!用Gui Guider 1.6 + LVGL 8.3,5分钟拖拽出你的第一个嵌入式界面

从零到一&#xff1a;用Gui Guider 1.6与LVGL 8.3快速构建嵌入式UI的实战指南 在嵌入式开发领域&#xff0c;用户界面(UI)设计往往是最耗时的环节之一。传统的手写代码方式不仅效率低下&#xff0c;还需要开发者深入掌握图形库的复杂API。而如今&#xff0c;借助Gui Guider这样…...