Go语言异步下载视频
异步下载mp4视频列表
下面是一个简单的Go语言示例,用于异步下载视频。我们将使用goroutines来实现异步下载,并使用sync.WaitGroup来等待所有下载任务完成。此示例依赖于net/http包来执行HTTP请求。
package mainimport ("fmt""io""net/http""os""strings""sync"
)func main() {videoURLs := []string{"http://example.com/video1.mp4","http://example.com/video2.mp4","http://example.com/video3.mp4",}var wg sync.WaitGroupfor _, url := range videoURLs {wg.Add(1)go func(url string) {defer wg.Done()err := downloadVideo(url)if err != nil {fmt.Printf("Error downloading video from %s: %v\n", url, err)} else {fmt.Printf("Successfully downloaded video from %s\n", url)}}(url)}wg.Wait()
}func downloadVideo(url string) error {resp, err := http.Get(url)if err != nil {return err}defer resp.Body.Close()filename := getFilenameFromURL(url)file, err := os.Create(filename)if err != nil {return err}defer file.Close()_, err = io.Copy(file, resp.Body)return err
}func getFilenameFromURL(url string) string {return url[strings.LastIndex(url, "/")+1:]
}
这个代码示例将从videoURLs列表中异步下载视频。downloadVideo函数处理视频下载,而getFilenameFromURL函数根据视频URL生成文件名。这个例子使用了简化的错误处理,实际应用中您可能需要根据需求进行相应的错误处理。
下载m3u8视频
要使用Go语言下载M3U8视频,您需要解析M3U8文件,下载其中的.ts片段并将它们合并为一个完整的视频文件。下面是一个简单的示例,演示如何执行此操作。本示例使用了github.com/grafov/m3u8包来解析M3U8文件。您需要先安装此包:
go get -u github.com/grafov/m3u8
然后,您可以使用以下代码下载M3U8视频:
package mainimport ("fmt""io""net/http""os""strings""github.com/grafov/m3u8"
)func main() {m3u8URL := "http://example.com/path/to/video.m3u8"videoFilename := "output_video.ts"err := downloadM3U8Video(m3u8URL, videoFilename)if err != nil {fmt.Printf("Error downloading m3u8 video: %v\n", err)} else {fmt.Printf("Successfully downloaded m3u8 video to %s\n", videoFilename)}
}func downloadM3U8Video(m3u8URL, videoFilename string) error {resp, err := http.Get(m3u8URL)if err != nil {return err}defer resp.Body.Close()playlist, _, err := m3u8.DecodeFrom(resp.Body, true)if err != nil {return err}masterPls, ok := playlist.(*m3u8.MasterPlaylist)if !ok {return fmt.Errorf("invalid m3u8 file")}var mediaPls *m3u8.MediaPlaylistfor _, variant := range masterPls.Variants {resp, err = http.Get(variant.URI)if err != nil {continue}defer resp.Body.Close()mediaPls, _, err = m3u8.DecodeFrom(resp.Body, true)if err == nil {break}}if mediaPls == nil {return fmt.Errorf("unable to download any media playlist")}videoFile, err := os.Create(videoFilename)if err != nil {return err}defer videoFile.Close()for _, segment := range mediaPls.Segments {if segment == nil {continue}tsURL := segment.URIif !strings.HasPrefix(tsURL, "http") {tsURL = getBaseURL(m3u8URL) + tsURL}err := downloadAndAppendTS(videoFile, tsURL)if err != nil {return err}}return nil
}func downloadAndAppendTS(videoFile *os.File, tsURL string) error {resp, err := http.Get(tsURL)if err != nil {return err}defer resp.Body.Close()_, err = io.Copy(videoFile, resp.Body)return err
}func getBaseURL(url string) string {lastIndex := strings.LastIndex(url, "/")return url[:lastIndex+1]
}
此代码首先下载并解析M3U8主播放列表,然后选择一个媒体播放列表(在这个示例中,我们选择了第一个可用的媒体播放列表)。接下来,它遍历媒体播放列表中的所有.ts片段,下载它
们并将它们追加到输出视频文件中。downloadAndAppendTS函数用于下载.ts片段并将其追加到输出视频文件。getBaseURL函数用于从M3U8 URL中获取基本URL,以便处理相对URL。
请注意,此示例代码可能无法处理所有类型的M3U8文件,例如加密的文件或具有不同编码设置的文件。根据您的实际需求,您可能需要对此代码进行修改和优化。
此外,在处理大型视频文件时,请注意磁盘空间和网络带宽。由于下载过程涉及多个.ts文件,可能会消耗大量的网络带宽和磁盘空间。在实际生产环境中部署此类解决方案时,请确保您的应用具有适当的错误处理和资源管理功能。
异步下载m3u8视频
要使用Go语言异步下载M3U8视频,您可以结合使用goroutines和sync.WaitGroup。在下面的示例中,我们将异步下载媒体播放列表中的每个.ts片段,并在所有片段下载完成后合并它们:```go
package mainimport ("fmt""io""io/ioutil""net/http""os""strings""sync""github.com/grafov/m3u8"
)func main() {m3u8URL := "http://example.com/path/to/video.m3u8"videoFilename := "output_video.ts"err := downloadM3U8Video(m3u8URL, videoFilename)if err != nil {fmt.Printf("Error downloading m3u8 video: %v\n", err)} else {fmt.Printf("Successfully downloaded m3u8 video to %s\n", videoFilename)}
}func downloadM3U8Video(m3u8URL, videoFilename string) error {resp, err := http.Get(m3u8URL)if err != nil {return err}defer resp.Body.Close()playlist, _, err := m3u8.DecodeFrom(resp.Body, true)if err != nil {return err}masterPls, ok := playlist.(*m3u8.MasterPlaylist)if !ok {return fmt.Errorf("invalid m3u8 file")}var mediaPls *m3u8.MediaPlaylistfor _, variant := range masterPls.Variants {resp, err = http.Get(variant.URI)if err != nil {continue}defer resp.Body.Close()mediaPls, _, err = m3u8.DecodeFrom(resp.Body, true)if err == nil {break}}if mediaPls == nil {return fmt.Errorf("unable to download any media playlist")}segmentCount := len(mediaPls.Segments)tempFiles := make([]*os.File, segmentCount)var wg sync.WaitGroupfor i, segment := range mediaPls.Segments {if segment == nil {continue}wg.Add(1)go func(index int, seg *m3u8.MediaSegment) {defer wg.Done()tsURL := seg.URIif !strings.HasPrefix(tsURL, "http") {tsURL = getBaseURL(m3u8URL) + tsURL}tmpFile, err := ioutil.TempFile("", "ts-segment-*.ts")if err != nil {fmt.Printf("Error creating temp file: %v\n", err)return}defer tmpFile.Close()err = downloadTS(tmpFile, tsURL)if err != nil {fmt.Printf("Error downloading ts segment from %s: %v\n", tsURL, err)return}tempFiles[index] = tmpFile}(i, segment)}wg.Wait()videoFile, err := os.Create(videoFilename)if err != nil {return err}defer videoFile.Close()for _, tmpFile := range tempFiles {if tmpFile == nil {continue}tmpFile.Seek(0, 0)_, err = io.Copy(videoFile, tmpFile)if err != nil {return err}os.Remove(tmpFile.Name())}return nil
}func downloadTS(tmpFile *os.File, tsURL string) error { resp, err := http.Get(tsURL) if err != nil { return err } defer resp.Body.Close()_, err = io.Copy(tmpFile, resp.Body)
return err}func getBaseURL(url string) string { lastIndex := strings.LastIndex(url, "/") return url[:lastIndex+1] }
在这个示例中,我们修改了downloadM3U8Video
函数,使其使用goroutines
和sync.WaitGroup
异步下载媒体播放列表中的.ts片段。我们为每个.ts片段创建一个临时文件,并在所有片段都下载完成后将它们合并到输出视频文件中。
注意,这个示例代码可能无法处理所有类型的M3U8文件,例如加密的文件或具有不同编码设置的文件。您可能需要根据实际需求对代码进行修改和优化。
在处理大型视频文件时,请注意磁盘空间和网络带宽。由于下载过程涉及多个.ts文件,可能会消耗大量的网络带宽和磁盘空间。在实际生产环境中部署此类解决方案时,请确保您的应用具有适当的错误处理和资源管理功能。
相关文章:

Go语言异步下载视频
异步下载mp4视频列表 下面是一个简单的Go语言示例,用于异步下载视频。我们将使用goroutines来实现异步下载,并使用sync.WaitGroup来等待所有下载任务完成。此示例依赖于net/http包来执行HTTP请求。 package mainimport ("fmt""io"…...

前缀树(字典树/Trie) -----Java实现
目录 一.前缀树 1.什么是前缀树 2.前缀树的举例 二.前缀树的实现 1.前缀树的数据结构 1.插入字符串 2.查找字符串 3.查找前缀 三.词典中最长的单词 1.题目描述 2.问题分析 3.代码实现 一.前缀树 1.什么是前缀树 字典树(Trie树)是一种树形…...

申请专利需要具备什么条件
申请专利需要具备什么条件 在我国,如果创造出来了新的发明都可以申请专利权,一旦申请成功之后,自己的发明就受到了法律的保护,任何人不得以违法的手段进行侵犯。那么申请专利需要具备什么条件?今天律赢时代网就为大家…...

【C++】一篇带你搞懂C++“引用”
前言在C语言的学习中,并没有引用这个概念,但是在C中,加入了引用这个概念,说明引用也是很重要的,但是我们怎么理解引用呢?我是这么理解的,例如在水浒传中,108个英雄好汉都是自己的外号…...

蓝桥杯刷题冲刺 | 倒计时19天
作者:指针不指南吗 专栏:蓝桥杯倒计时冲刺 🐾马上就要蓝桥杯了,最后的这几天尤为重要,不可懈怠哦🐾 文章目录1.抓住那头牛2.排列序数1.抓住那头牛 题目 链接: 抓住那头牛 - C语言网 (dotcpp.com…...

Java每日一练(20230321)
目录 1. 出现次数最多的字符 🌟 2. 最后一个单词的长度 🌟 3. 两数之和 🌟 🌟 每日一练刷题专栏 🌟 Golang每日一练 专栏 Python每日一练 专栏 C/C每日一练 专栏 Java每日一练 专栏 1. 出现次数最多的字符并…...

【三维几何学习】从零开始网格上的深度学习-3:Transformer篇(Pytorch)
本文参加新星计划人工智能(Pytorch)赛道:https://bbs.csdn.net/topics/613989052 从零开始网格上的深度学习-3:Transformer篇引言一、概述二、核心代码2.1 位置编码2.2 网络框架三、基于Transformer的网格分类3.1 分类结果3.2 全部代码引言 本文主要内容如下&#…...

一、基础算法3:二分 模板题+算法模板(数的范围,数的三次方根)
文章目录算法模板整数二分算法模板浮点数二分算法模板模板题数的范围原题链接题目题解数的三次方根原题链接题目题解算法模板 整数二分算法模板 bool check(int x) {/* ... */} // 检查x是否满足某种性质// 区间[l, r]被划分成[l, mid]和[mid 1, r]时使用: int b…...

Spring 源码解析 - Bean创建过程 以及 解决循环依赖
一、Spring Bean创建过程以及循环依赖 上篇文章对 Spring Bean资源的加载注册过程进行了源码梳理和解析,我们可以得到结论,资源文件中的 bean 定义信息,被组装成了 BeanDefinition 存放进了 beanDefinitionMap 容器中,那 Bean 是…...

移除元素(双指针)
给你一个数组 nums 和一个值 val,你需要 原地 移除所有数值等于 val 的元素,并返回移除后数组的新长度。 不要使用额外的数组空间,你必须仅使用 O(1) 额外空间并原地修改输入数组。 元素的顺序可以改变。你不需要考虑数组中超出新长度后面的…...

76.qt qml-QianWindow开源炫酷界面框架(支持白色暗黑渐变自定义控件均以适配)
界面介绍界面支持: 透明 白色 黑色 渐变 单色 静态图 动态图侧边栏支持:抽屉、带折叠、多模式场景控件已集成: 暗黑风格 高亮风格、并附带个人自定义控件及开源demo白色场景如下所示:单色暗黑风格如下所示:用户自定义皮肤如下所示:皮肤预览如下所示:b站入口:https://www.bilibi…...

Python生日蛋糕
目录 前言 底盘 蛋糕 蜡烛 祝福 前言 Hello,小伙伴们晚上好吖!前两天博主满20岁啦(要开始奔三辽呜呜呜),这几天收到了不少小伙伴们的祝福,浪漫的小博主想送给大家一份不一样的生日蛋糕,…...

QT 如何提高 Qt Creator 的编译速度
如何提高编译速度,貌似是一个老生常谈的话题。对于Qter而言,如何提高QT Creator 的编辑速度是一直都是大家所期盼的。本文也是查阅了各路大神的方法后整理出来的,希望对各位有所帮助。 1、在*.pro文件添加预编译机制 QT官方给出的示例&…...

STM32之震动传感器、继电器介绍及实战
目录 一、震动传感器介绍及实战 二、编程代码实现 1、gpio.c---------初始化GPIO口引脚函数 2、调用中断服务函数 3、中断服务函数 4、中断服务回调函数 5、把上述的中断服务回调函数,放入main主函数里 6、结果演示 三、继电器介绍及实战 一、震动传感器介…...

RK3588平台开发系列讲解(显示篇)RK3588 平台 的DP介绍
平台内核版本安卓版本RK3588Linux 5.10Android 12文章目录 一、功能特性二、 DP 输⼊三、DP 输出四、 代码路径沉淀、分享、成长,让自己和他人都能有所收获!😄 📢本篇将介绍 RK3588 平台 DP 的使⽤与调试⽅法。 一、功能特性 RK3588 的 DP ⽀持 1.4a 版本的 DP 协议,最…...

【Java】i++和++i的实现原理
文章目录 i++案例反编译分析扩展 x = x++我们接下来从字节码层面分析: 不了解字节码的可以参考这篇:【精通JVM】字节码指令全解 i++案例 package org.example;public class Main {public static void main...

第十四届蓝桥杯三月真题刷题训练——第 18 天
目录 第 1 题:排列字母 问题描述 运行限制 代码: 第 2 题:GCD_数论 问题描述 输入格式 输出格式 样例输入 样例输出 评测用例规模与约定 运行限制 第 3 题:选数异或 第 4 题:背包与魔法 第 1 题&#x…...

软件测试拿了几个20K offer,分享一波面经
1、你的测试职业发展是什么? 测试经验越多,测试能力越高。所以我的职业发展是需要时间积累的,一步步向着高级测试工程师奔去。而且我也有初步的职业规划,前3年积累测试经验,按如何做好测试工程师的要点去要求自己,不断…...

spring2
1.Spring配置数据源1.1 数据源(连接池)的作用 数据源(连接池)是提高程序性能如出现的事先实例化数据源,初始化部分连接资源使用连接资源时从数据源中获取使用完毕后将连接资源归还给数据源常见的数据源(连接池):DBCP、C3P0、BoneC…...

【Linux】网络编程套接字(中)
🎇Linux: 博客主页:一起去看日落吗分享博主的在Linux中学习到的知识和遇到的问题博主的能力有限,出现错误希望大家不吝赐教分享给大家一句我很喜欢的话: 看似不起波澜的日复一日,一定会在某一天让你看见坚持…...

手撕数据结构—队列
队列队列的话只允许在一端插入,在另外一端删除。插入数据的那一段叫做队尾,出数据的那一段叫做队头(从尾巴插入)。因此的话队列是先进先出的。入的顺序与出的顺序的话是一样的。这个与栈是不一样的,因为栈的话就是说如…...

gdb调试工具和makemakefile工具
gdb调试工具和make/makefile工具 文章目录gdb调试工具和make/makefile工具一、gdb调试工具1.debug/release2.使用二、make/makefile1.什么是make/makefile2.编写一、gdb调试工具 1.debug/release 程序有两种默认的发布方式debug和release。release是无法进行调试的。Linux中g…...

【进阶数据结构】平衡搜索二叉树 —— AVL树
🌈感谢阅读East-sunrise学习分享——[进阶数据结构]AVL树 博主水平有限,如有差错,欢迎斧正🙏感谢有你 码字不易,若有收获,期待你的点赞关注💙我们一起进步🚀 🌈我们上一篇…...

ROS使用(5)action学习
action消息的构建 首先进行功能包的创建 mkdir -p ros2_ws/src cd ros2_ws/src ros2 pkg create action_tutorials_interfaces action消息的类型 # Request --- # Result --- # Feedback 动作定义由三个消息定义组成,以---分隔。 从动作客户机向动作服务器发送…...

2023前端面试题集(含答案)之HTML+CSS篇(一)
在又到了金三银四的招聘季,不管你是刚入行的小白,亦或是混迹职场的老鸟,还在为面试前端工程师时不知道面试官要问什么怎么回答而苦恼吗?为了帮助你获得面试官的青睐,顺利通过面试,跳槽进入大厂,…...

设计模式2 - 观察者模式
定义: 观察者模式又叫发布订阅模式,它定义了对象之间的一对多依赖,这样一来,当一个对象改变状态时,它的所有依赖者都会收到通知并自动更新。 组成: Subject(通知者/被观察者)&#…...

ini配置文件
ini配置文件 ini文件是initialization file的缩写,即初始化文件,是widows系统配置文件所采用的存储格式。 文件扩展名: .ini ini配置文件的后缀名也不一定必须是.ini, 也可以是.cfg, .conf或者是.txt ini文件格式 ini配置文件由参数, 节, 注解组成 参…...

蓝桥杯备赛经验 pythonA组(非科班选手)
个人2022 CA组江苏省一等奖,决赛成绩不理想,没有拿到一二等奖,但是因为自己是非科班的学生,所以能拿到这样的成绩自己其实也应该知足了 题外话: 很多ACMer嘲笑蓝桥杯非常水,但是据我观察CA组决赛一等奖获奖…...

C++实现通讯录管理系统
通讯录是一个可以记录亲人、好友信息的工具,本博客借助黑马程序员的项目进行修改,利用C实现一个通讯录管理系统,旨在复习C的语法。 一、系统需求 系统需要实现的功能如下: 添加联系人∶向通讯录中添加新人,信息包括…...

开关电源Y电容放置的位置
Y电容,是我们工程师做开关电源设计时都要接触到的一个非常关键的元器件,它对EMI的贡献是相当的大的,但是它是一个较难把控的元器件,原理上并没有那么直观易懂,在EMI传播路径中需要联系到很多的寄生参数才能够去分析。 …...