SpringBoot 集成 FFmpeg 解析音视频
文章目录
- 1 摘要
- 2 核心 Maven 依赖
- 3 核心代码
- 3.1 FFmpeg 解析音视频工具类
- 3.2 音视频文件信息参数
- 3.3 音视频文件上传Controller
- 3.4 application 配置文件
- 4 测试数据
- 4.1 视频文件解析
- 4.2 音频文件解析
- 5 注意事项
- 5.1 文件必须在本地
- 6 推荐参考文档
- 7 Github 源码
1 摘要
FFmpeg 是最常用的跨平台的音频、视频处理软件,但是其通过命令行的方式进行操作对于普通用户而言上手难度大,同时 FFmpeg 只是函数库,对于不同的编程语言,需要自行适配API接口,以便于操作文件。本文介绍SpringBoot 集成 FFmpeg 实现对音视频文件的解析。
FFmpeg 官网: https://ffmpeg.org
FFmpeg Java 平台常用适配仓库:
JavaCV : https://github.com/bytedeco/javacv
JavaCV 是一个集成第三方函数库的平台,包括 OpenCV、FFmpeg 等知名函数库,提供统一的 API 操作,应用广泛。在不考虑应用程序体积大小的情况下推荐使用 JavaCV 作为集成方案。
JAVE2: https://github.com/a-schild/jave2
JAVE2 是将 FFmpeg 进行封装,并提供 Java API 以供用户操作音视频文件的依赖库。用户可以根据软件运行的操作系统来自由选择所需平台的依赖。
本文是基于 JAVE2 依赖来实现解析音视频文件的功能。
2 核心 Maven 依赖
demo-ffmpeg-media/pom.xml
<!-- ffmpeg 音视频处理 --><dependency><groupId>ws.schild</groupId><artifactId>jave-core</artifactId><version>${schild-ffmpeg.version}</version></dependency><dependency><groupId>ws.schild</groupId><artifactId>jave-nativebin-win64</artifactId><version>${schild-ffmpeg.version}</version></dependency><dependency><groupId>ws.schild</groupId><artifactId>jave-nativebin-linux64</artifactId><version>${schild-ffmpeg.version}</version></dependency><dependency><groupId>ws.schild</groupId><artifactId>jave-nativebin-osx64</artifactId><version>${schild-ffmpeg.version}</version></dependency><dependency><groupId>ws.schild</groupId><artifactId>jave-nativebin-osxm1</artifactId><version>${schild-ffmpeg.version}</version></dependency>
其中 schild-ffmpeg 版本为:
<schild-ffmpeg.version>3.5.0</schild-ffmpeg.version>
这里分别引入了 Windows、Linux、macOS 系统的依赖,可根据软件运行环境进行删减。
3 核心代码
3.1 FFmpeg 解析音视频工具类
demo-ffmpeg-media/src/main/java/com/ljq/demo/springboot/ffmpeg/common/util/FFmpegMediaUtil.java
package com.ljq.demo.springboot.ffmpeg.common.util;import com.ljq.demo.springboot.ffmpeg.model.response.AudioInfoResponse;
import com.ljq.demo.springboot.ffmpeg.model.response.VideoInfoResponse;
import lombok.extern.slf4j.Slf4j;
import org.springframework.util.DigestUtils;
import ws.schild.jave.MultimediaObject;
import ws.schild.jave.info.AudioInfo;
import ws.schild.jave.info.MultimediaInfo;
import ws.schild.jave.info.VideoInfo;import java.io.File;
import java.nio.file.Files;
import java.util.Objects;/*** @Description: FFmpeg 音视频工具类* @Author: junqiang.lu* @Date: 2024/5/10*/
@Slf4j
public class FFmpegMediaUtil {/*** 获取视频信息** @param videoPath 视频路径* @return 视频信息*/public static VideoInfoResponse getVideoInfo(String videoPath) {VideoInfoResponse response = null;try {// 解析文件File videoFile = new File(videoPath);MultimediaObject multimediaObject = new MultimediaObject(videoFile);MultimediaInfo multimediaInfo = multimediaObject.getInfo();VideoInfo videoInfo = multimediaInfo.getVideo();// 判断是否为视频if (Objects.isNull(videoInfo) || videoInfo.getBitRate() < 0) {return null;}response = new VideoInfoResponse();response.setFormat(multimediaInfo.getFormat()).setDuration(multimediaInfo.getDuration() / 1000).setSize(videoFile.length()).setMd5(DigestUtils.md5DigestAsHex(Files.readAllBytes(videoFile.toPath())));response.setBitRate(videoInfo.getBitRate()).setFrameRate(videoInfo.getFrameRate()).setWidth(videoInfo.getSize().getWidth()).setHeight(videoInfo.getSize().getHeight());return response;} catch (Exception e) {log.warn("Error processing video file", e);}return response;}/*** 获取音频信息** @param audioPath 音频路径* @return 音频信息*/public static AudioInfoResponse getAudioInfo(String audioPath) {AudioInfoResponse response = null;try {// 解析文件File videoFile = new File(audioPath);MultimediaObject multimediaObject = new MultimediaObject(videoFile);MultimediaInfo multimediaInfo = multimediaObject.getInfo();AudioInfo audioInfo = multimediaInfo.getAudio();// 判断是否为音频if (Objects.isNull(audioInfo) || Objects.nonNull(multimediaInfo.getVideo())) {return null;}response = new AudioInfoResponse();response.setFormat(multimediaInfo.getFormat()).setDuration(multimediaInfo.getDuration() / 1000).setSize(videoFile.length()).setMd5(DigestUtils.md5DigestAsHex(Files.readAllBytes(videoFile.toPath())));response.setSamplingRate(audioInfo.getSamplingRate()).setBitRate(audioInfo.getBitRate()).setChannels(audioInfo.getChannels()).setBitDepth(audioInfo.getBitDepth());return response;} catch (Exception e) {log.warn("Error processing audio file", e);}return response;}}
3.2 音视频文件信息参数
音视频文件公共信息参数
demo-ffmpeg-media/src/main/java/com/ljq/demo/springboot/ffmpeg/model/response/MediaInfoResponse.java
package com.ljq.demo.springboot.ffmpeg.model.response;import lombok.Data;
import lombok.experimental.Accessors;import java.io.Serializable;/*** @Description: 多媒体信息* @Author: junqiang.lu* @Date: 2024/5/10*/
@Data
@Accessors(chain = true)
public class MediaInfoResponse implements Serializable {private static final long serialVersionUID = -326368230008457941L;/*** 文件格式*/private String format;/*** 时长,单位:秒*/private Long duration;/*** 文件大小,单位:字节数*/private Long size;/*** 文件md5值*/private String md5;}
视频文件参数信息对象
demo-ffmpeg-media/src/main/java/com/ljq/demo/springboot/ffmpeg/model/response/VideoInfoResponse.java
package com.ljq.demo.springboot.ffmpeg.model.response;import lombok.Data;
import lombok.ToString;
import lombok.experimental.Accessors;/*** @Description: 视频文件信息返回对象* @Author: junqiang.lu* @Date: 2024/5/10*/
@Data
@Accessors(chain = true)
@ToString(callSuper = true)
public class VideoInfoResponse extends MediaInfoResponse {private static final long serialVersionUID = -9016123624628502571L;/*** 比特率,单位: bps*/private Integer bitRate;/*** 帧率,单位: FPS*/private Float frameRate;/*** 宽度,单位: px*/private Integer width;/*** 高度,单位: px*/private Integer height;}
音频文件参数信息对象
demo-ffmpeg-media/src/main/java/com/ljq/demo/springboot/ffmpeg/model/response/AudioInfoResponse.java
package com.ljq.demo.springboot.ffmpeg.model.response;import lombok.Data;
import lombok.ToString;
import lombok.experimental.Accessors;/*** @Description: 音频文件信息返回对象* @Author: junqiang.lu* @Date: 2024/5/10*/
@Data
@Accessors(chain = true)
@ToString(callSuper = true)
public class AudioInfoResponse extends MediaInfoResponse {private static final long serialVersionUID = 3573655613715240188L;/*** 采样率*/private Integer samplingRate;/*** 音频通道数量,1-单声道,2-立体声*/private Integer channels;/*** 比特率,单位: bps*/private Integer bitRate;/*** 位深度*/private String bitDepth;}
3.3 音视频文件上传Controller
demo-ffmpeg-media/src/main/java/com/ljq/demo/springboot/ffmpeg/controller/FFmpegMediaController.java
package com.ljq.demo.springboot.ffmpeg.controller;import com.ljq.demo.springboot.ffmpeg.common.config.UploadConfig;
import com.ljq.demo.springboot.ffmpeg.common.util.FFmpegMediaUtil;
import com.ljq.demo.springboot.ffmpeg.model.response.AudioInfoResponse;
import com.ljq.demo.springboot.ffmpeg.model.response.VideoInfoResponse;
import lombok.extern.slf4j.Slf4j;
import org.springframework.http.MediaType;
import org.springframework.http.ResponseEntity;
import org.springframework.web.bind.annotation.PostMapping;
import org.springframework.web.bind.annotation.RequestMapping;
import org.springframework.web.bind.annotation.RestController;
import org.springframework.web.multipart.MultipartFile;import javax.annotation.Resource;
import java.io.File;
import java.io.IOException;/*** @Description: FFmpeg 媒体文件处理控制层* @Author: junqiang.lu* @Date: 2024/5/10*/
@Slf4j
@RestController
@RequestMapping(value = "/api/ffmpeg/media")
public class FFmpegMediaController {@Resourceprivate UploadConfig uploadConfig;/*** 视频上传** @param file* @return* @throws IOException*/@PostMapping(value = "/upload/video", produces = {MediaType.APPLICATION_JSON_VALUE})public ResponseEntity<VideoInfoResponse> uploadVideo(MultipartFile file) throws IOException {// 文件上传保存String videoFilePath = uploadConfig.getUploadPath() + File.separator + file.getOriginalFilename();log.info("videoFilePath: {}", videoFilePath);File videoFile = new File(videoFilePath);if (!videoFile.getParentFile().exists()) {videoFile.getParentFile().mkdirs();}file.transferTo(videoFile);// 获取视频信息VideoInfoResponse videoInfoResponse = FFmpegMediaUtil.getVideoInfo(videoFilePath);return ResponseEntity.ok(videoInfoResponse);}/*** 音频上传** @param file* @return* @throws IOException*/@PostMapping(value = "/upload/audio", produces = {MediaType.APPLICATION_JSON_VALUE})public ResponseEntity<AudioInfoResponse> uploadAudio(MultipartFile file) throws IOException {// 文件上传保存String audioFilePath = uploadConfig.getUploadPath() + File.separator + file.getOriginalFilename();log.info("audioFilePath: {}", audioFilePath);File audioFile = new File(audioFilePath);if (!audioFile.getParentFile().exists()) {audioFile.getParentFile().mkdirs();}file.transferTo(audioFile);// 获取音频信息AudioInfoResponse audioInfoResponse = FFmpegMediaUtil.getAudioInfo(audioFilePath);return ResponseEntity.ok(audioInfoResponse);}}
3.4 application 配置文件
# config
server:port: 9250# spring
spring:application:name: demo-ffmpeg-mediaservlet:multipart:max-file-size: 1000MBmax-request-size: 1000MB# uploadConfig
upload:path: D:\\upload # linux/macOS 路径 /opt/upload
4 测试数据
示例文件下载: https://zh.getsamplefiles.com
4.1 视频文件解析
测试文件:
https://zh.getsamplefiles.com/download/mp4/sample-4.mp4
测试结果:
{"format": "mov","duration": 30,"size": 7588608,"md5": "d7b5155ee54ee9c7dcd8cbb5395823dc","bitRate": 2015000,"frameRate": 25.0,"width": 1280,"height": 720
}
4.2 音频文件解析
测试文件:
https://zh.getsamplefiles.com/download/mp3/sample-5.mp3
测试结果:
{"format": "mp3","duration": 45,"size": 1830660,"md5": "843e2916b1c552fb5e8ee3d83faddb8c","samplingRate": 44100,"channels": 2,"bitRate": 320000,"bitDepth": "fltp"
}
5 注意事项
5.1 文件必须在本地
在实际项目中,一般会将文件保存到专门的文件服务器,但是 FFmpeg 解析文件必须是本地文件,因此在上传至文件服务器之前需要将文件在本地服务器做中转,解析完毕后再上传,然后删除本地文件。
6 推荐参考文档
SpringBoot集成ffmpeg实现视频转码播放
Convert video to Another Format in Spring Boot(Java-based apps)
springboot如何获取视频文件的视频时间长度
java 视频识别 java 视频转码
JAVE2 官方 Github
JAVE2 官方文档 Getting informations about a multimedia file
javacv-ffmpeg(八)视频文件信息获取
7 Github 源码
Gtihub 源码地址 : https://github.com/Flying9001/springBootDemo/tree/master/demo-ffmpeg-media
个人公众号:404Code,分享半个互联网人的技术与思考,感兴趣的可以关注.
相关文章:
SpringBoot 集成 FFmpeg 解析音视频
文章目录 1 摘要2 核心 Maven 依赖3 核心代码3.1 FFmpeg 解析音视频工具类3.2 音视频文件信息参数3.3 音视频文件上传Controller3.4 application 配置文件 4 测试数据4.1 视频文件解析4.2 音频文件解析 5 注意事项5.1 文件必须在本地 6 推荐参考文档7 Github 源码 1 摘要 FFmp…...
基于单片机的直流电机测速装置研究与设计
摘要: 基于单片机的直流电机测速装置采用了对直流电机的中枢供电回路串联取样电阻的方式实现对电机转速的精确实时测量。系统由滤波电路、信号放大电路、单片机控制电路以及稳压电源等功能模块电路构成。工作过程中高频磁环作为载体,利用电磁感应的基本原理对直流电…...
【快捷部署】022_ZooKeeper(3.5.8)
📣【快捷部署系列】022期信息 编号选型版本操作系统部署形式部署模式复检时间022ZooKeeper3.5.8Ubuntu 20.04tar包单机2024-05-07 一、快捷部署 #!/bin/bash ################################################################################# # 作者ÿ…...
引领AI数据标注新纪元:景联文科技为智能未来筑基
在人工智能蓬勃发展的今天,数据如同燃料,驱动着每一次技术飞跃。在这场智能革命的浪潮中,景联文科技凭借其深厚的专业实力与前瞻性的战略眼光,正站在行业前沿,为全球的人工智能企业提供坚实的数据支撑。 全国布局&…...
多模态大语言模型和 Apple 的 MM1
原文地址:multimodal-large-language-models-apples-mm1 2024 年 4 月 13 日 抽象是计算机科学中最关键的概念之一,具有一些最强大的影响。从简单的角度来看,抽象就是将某一事物应用于多种不同情况的能力。例如,如果你创造了一种…...
算法day04
第一题 : 209. 长度最小的子数组 有上题可知,我们会采用双指针和单调性的思路来解决 我们本题采用左右双指针从数组的0位置同向前进,所以将此类模型称为滑块; 步骤思路如下: 步骤一: 定义所有双指针都指向…...
电信网关配置管理系统 rewrite.php 文件上传致RCE漏洞复现
0x01 产品简介 中国电信集团有限公司(英文名称“China Telecom”、简称“中国电信”)成立于2000年9月,是中国特大型国有通信企业、上海世博会全球合作伙伴。电信网关配置管理系统是一个用于管理和配置电信网络中网关设备的软件系统。它可以帮助网络管理员实现对网关设备的远…...
从零学算法14
14. 最长公共前缀 编写一个函数来查找字符串数组中的最长公共前缀。 如果不存在公共前缀,返回空字符串 “”。 示例 1: 输入:strs [“flower”,“flow”,“flight”] 输出:“fl” 示例 2: 输入:strs [“d…...
[入门] Unity Shader前置知识(5) —— 向量的运算
在Unity中,向量无处不在,我想很多人都使用过向量类的内置方法 normalized() 吧,我们都知道该方法是将其向量归一化从而作为一个方向与速度相乘,以达到角色朝任一方向移动时速度都相等的效果,但内部具体是如何将该向量进…...
html的i标签 “\e905“ font-family 字体没有效果
一、html的i标签 “\e905” 没有效果 在HTML和CSS中,\e905 这样的字符通常与字体图标(Font Icons)或自定义字体(Custom Fonts)中的Unicode字符相关。具体来说,\e905 是一个Unicode转义序列,但它…...
Golang reflect.MakeFunc() 的用法及示例
Golang 作为一门强类型语言,在某些场景下,我们需要动态地创建函数或者修改函数,这个时候就可以使用反射的方法去实现。在反射中,我们可以使用 reflect.MakeFunc() 方法来创建一个新的函数,本文我将介绍使用反射及其 Ma…...
深入学习和理解Django视图层:处理请求与响应
title: 深入学习和理解Django视图层:处理请求与响应 date: 2024/5/4 17:47:55 updated: 2024/5/4 17:47:55 categories: 后端开发 tags: Django请求处理响应生成模板渲染表单处理中间件异常处理 第一章:Django框架概述 1.1 什么是Django?…...
【MySQL】SQL基本知识点DDL(1)
目录 1.SQL分类: 2.DDL-数据库操作 3.DDL-表操作-创建 4.DDL-表操作-查询 5.DDL-表操作-数据类型 6.DDL-表操作-修改 1.SQL分类: 2.DDL-数据库操作 3.DDL-表操作-创建 注意:里面的符号全部要切换为英文状态 4.DDL-表操作-查询 5.DDL…...
短剧奔向小程序,流量生意如何开启?
随着移动互联网的飞速发展,小程序作为一种轻量级、易传播的应用形态,逐渐在各个领域展现出其独特的商业价值。而最近爆火的短剧小视频作为一种受众广泛的娱乐形式,与小程序结合后,不仅为观众提供了更为便捷的观看体验,…...
微服务下的技术栈架构解析
微服务是一种架构风格,它将一个复杂的应用拆分成多个独立自治的服务,每个服务负责应用程序中的一小部分功能。这些服务通过定义良好的API进行通信,通常是HTTP RESTful API或事件流。微服务架构的主要特点包括单一职责、自治性、可独立部署和扩…...
Mesa3D图形库与NIR(New Intermediate Representation)
Mesa 是一个开源图形库,为 Unix 和 Linux 系统提供了 OpenGL 和 Vulkan API 的实现。它也支持其他图形 API,如OpenCL、OpenGL ES 和 Vulkan。Mesa 项目的目标是为开源社区提供高性能的图形库,使得开源操作系统能够充分利用现代图形硬件。 Me…...
C++:模板初阶
文章目录 泛型编程函数模板概念函数模板格式函数模板的原理函数模板的实例化模板参数的匹配原则 模板类类模板的定义格式类模板实例化 泛型编程 如何实现一个通用的交换函数呢? 函数重载可以帮助我们完成 void Swap(int& left, int& right) {int temp l…...
为什么要学Python?学Python有什么用?
为什么要学Python?学Python有什么用? 在当今的数字化时代,编程已成为一项宝贵的技能。Python,作为一种流行的编程语言,因其易于学习和强大的功能而受到全球开发者的青睐。本文将探讨学习Python的原因和它的实际应用&am…...
Linux磁盘IO、网络IO、零拷贝详解
一、什么是I/O? 在计算机操作系统中,所谓的I/O就是输入(input)和输出(output),也可以理解为读(read)和写(write),针对不同的对象,I/O模式可以划分…...
工业交换机外壳材质大比拼,看看哪种外壳适合你
在工业领域里,交换机就像我们的网络心脏,时刻跳动着确保信息畅通无阻。而它的外壳,就是保护这颗“心脏”的铠甲。今天,咱们就来聊聊这些铠甲——工业交换机外壳的材质和防护等级,看看它们如何守护我们的网络世界。 首…...
Opencv中的addweighted函数
一.addweighted函数作用 addweighted()是OpenCV库中用于图像处理的函数,主要功能是将两个输入图像(尺寸和类型相同)按照指定的权重进行加权叠加(图像融合),并添加一个标量值&#x…...
Python实现prophet 理论及参数优化
文章目录 Prophet理论及模型参数介绍Python代码完整实现prophet 添加外部数据进行模型优化 之前初步学习prophet的时候,写过一篇简单实现,后期随着对该模型的深入研究,本次记录涉及到prophet 的公式以及参数调优,从公式可以更直观…...
Cloudflare 从 Nginx 到 Pingora:性能、效率与安全的全面升级
在互联网的快速发展中,高性能、高效率和高安全性的网络服务成为了各大互联网基础设施提供商的核心追求。Cloudflare 作为全球领先的互联网安全和基础设施公司,近期做出了一个重大技术决策:弃用长期使用的 Nginx,转而采用其内部开发…...
Linux云原生安全:零信任架构与机密计算
Linux云原生安全:零信任架构与机密计算 构建坚不可摧的云原生防御体系 引言:云原生安全的范式革命 随着云原生技术的普及,安全边界正在从传统的网络边界向工作负载内部转移。Gartner预测,到2025年,零信任架构将成为超…...
Selenium常用函数介绍
目录 一,元素定位 1.1 cssSeector 1.2 xpath 二,操作测试对象 三,窗口 3.1 案例 3.2 窗口切换 3.3 窗口大小 3.4 屏幕截图 3.5 关闭窗口 四,弹窗 五,等待 六,导航 七,文件上传 …...
Qemu arm操作系统开发环境
使用qemu虚拟arm硬件比较合适。 步骤如下: 安装qemu apt install qemu-system安装aarch64-none-elf-gcc 需要手动下载,下载地址:https://developer.arm.com/-/media/Files/downloads/gnu/13.2.rel1/binrel/arm-gnu-toolchain-13.2.rel1-x…...
DeepSeek源码深度解析 × 华为仓颉语言编程精粹——从MoE架构到全场景开发生态
前言 在人工智能技术飞速发展的今天,深度学习与大模型技术已成为推动行业变革的核心驱动力,而高效、灵活的开发工具与编程语言则为技术创新提供了重要支撑。本书以两大前沿技术领域为核心,系统性地呈现了两部深度技术著作的精华:…...
LLaMA-Factory 微调 Qwen2-VL 进行人脸情感识别(二)
在上一篇文章中,我们详细介绍了如何使用LLaMA-Factory框架对Qwen2-VL大模型进行微调,以实现人脸情感识别的功能。本篇文章将聚焦于微调完成后,如何调用这个模型进行人脸情感识别的具体代码实现,包括详细的步骤和注释。 模型调用步骤 环境准备:确保安装了必要的Python库。…...
Python爬虫实战:研究Restkit库相关技术
1. 引言 1.1 研究背景与意义 在当今信息爆炸的时代,互联网上存在着海量的有价值数据。如何高效地采集这些数据并将其应用于实际业务中,成为了许多企业和开发者关注的焦点。网络爬虫技术作为一种自动化的数据采集工具,可以帮助我们从网页中提取所需的信息。而 RESTful API …...
高保真组件库:开关
一:制作关状态 拖入一个矩形作为关闭的底色:44 x 22,填充灰色CCCCCC,圆角23,边框宽度0,文本为”关“,右对齐,边距2,2,6,2,文本颜色白色FFFFFF。 拖拽一个椭圆,尺寸18 x 18,边框为0。3. 全选转为动态面板状态1命名为”关“。 二:制作开状态 复制关状态并命名为”开…...
