当前位置: 首页 > news >正文

视频字幕处理+AI绘画,Runway 全功能超详细使用教程(4)

runway的视频字幕处理、AI绘图功能介绍,感觉完全就是为了做电影而布局,一整套功能都上线了!想系统学习的必收藏!


在深度研究Runway各个功能后,无论是AI视频生成及后期处理技术,还是AI图像生成技术,Runway都很能打,AI视频领域大有可为!


接下来开始详细讲解Runway导航栏中按顺序讲解每个功能;

3f0bb63ce295e9096f3adf251c4700d9.jpeg


Edit audio & subtitles(音频字幕处理工具)


Runway在音频字幕处理方面提供了4个功能:

d295b993a61657b5fe009624885cf40b.jpeg


首先点击左侧导航栏,点击“Edit audio & subtitles”,页面会弹出4个工具选项


bb1d8c31b469db136f088dbbb770be6d.jpeg


Clean Audio (去噪声)

点击Clean Audio,跳转音频处理界面


bde518afeee35e9cde1d86f68101c7d2.jpeg


接着上传视频


9e222666641df7c0ec7f19449d36382e.jpeg


接着点击Clean Audio按钮,大约等待几秒时间,就能得到消除噪音后的音频。


dfbfcc1475bf9bae98b55b9e5d052833.jpeg


Remove Silence (删除静音)

点击Clean Audio,跳转音频处理界面


6890d4fc2e38312d55294b55fa40c92b.jpeg


同样上传需要处理的视频文件。


e24d800c1e95ed58dc23ba09e939600d.jpeg


视频上传后,系统会自动检测静音部分,并将其标注红色。


fd9f200b1a06d7a5866b505f17e14cad.jpeg


在右侧参数Threshold,Padding一般就确定默认值,最后点击“Remove Silence"去除静音部分,即可保存下载视频。


91ecfa944456612fa0157901fd6ac842.jpeg


Transcript(音频转文本) 

点击Transcript,跳转音频处理界面


f0d007fbc0b05b7f0f7df7f4480de11f.jpeg


同样上传需要处理的视频文件。


a6a3352b5a99e4e812552aaeb6f3fbbb.jpeg


视频上传后,在右侧框中勾选转化后的文本语种,目前系统只支持生成10种语种,很可惜,并没有中文,然后点击“Generate”。


11dc417b221781a969b2ccce3ec4f927.jpeg


351591757887d19f673da9865b8cdf32.jpeg


静等几秒后,页面会弹出提取后的文本内容,如果你想对其进行修改,可以点击“Edit .srt”。


d0f1f9c2c1fd942715842c38f4e4076f.jpeg


对文本框中的内容进行编辑,检查没有没有问题的话,即可点击Download .srt下载文档。


c1a85123846a9f490b0c7742f954a3a2.jpeg


Subtitles(生成字幕)

点击Subtitles,跳转视频处理界面,同样上传视频,提供设置,可以通过文本转换技术,将音频的转录文本转换为字幕格式,方便用户查看。与剪映的智能字幕类似,这个功能是付费功能,这里就不做演示。


30debc7961594301762594fa513f19a2.jpeg


以上就是Edit audio & subtitles4个功能介绍。


接下来将讲解图像功能模块

lmages图像生成处理技术有两大功能

  • Generate images(图像生成功能)
  • Edit images(图像后期处理功能)

ed341b2756118b4c2cbb7bbc1a47b68c.jpeg


包含了文生图/图生图/扩图/扣图/智能修复等12个图像生成处理功能


lmages

(1)Generate images

Runway图像生成技术模块有5个工具


d72871c0e8a983160191ddbc586b1a0a.jpeg


e8d267cdc7f04179bc6a0eb3bf61a39e.jpeg


Text to lmage (文生图工具)

这个功能只需输入提示词即可生成图像,首先点击“Text to lmage”选项


61e0908baef06960cb709511ffa650f4.jpeg


进入编辑界面,首先在右侧基础选项进行勾选。


9f89c2cd080b07e29e992aee5096c586.jpeg


接着在对话框中输入提示词,最后点击Generate即可生成图像。


020f53fc8eb4bb841c19236c1f7f82c2.jpeg


生成后的图像效果非常不错。


d7c5cae4c21dc190f738beb327a0de75.jpeg


Image to lmage(图生图工具)

这个功能只需上传图片,系统即可生成相似的图像,首先点击“Image to lmage”选项。


d683e83baa01c0e2f1e2ef6ef4124503.jpeg


接着上传提前准备好的图片


19d15aeb833f7346c25d3d27c5e2c855.jpeg


进入编辑界面,首先在右侧基础选项进行勾选。


bd021ab792cbe1620d6fb1e8894f5b90.jpeg


同样你也可以输入提示词,让生成的图像更完美,最后点击Generate生成图像


089322a04435929b97a14735a203d8a1.jpeg


Train your own(训练模型工具)

这个功能就是Runway刚上线不久的,自定义AI模型,只需上传多角度的人物或者动物图片,系统即可生成系列的图像,首先点击“Train your own”选项。


159215a7956c2b4d9957cd61b8cd774e.jpeg


页面会出现3模型选项

由于这个功能是付费板块,感兴趣的同学们可以自行测试。


dfaef359a671666b77a2407b0ae0c3f3.jpeg

e1c1fadc4736ed05a9d641dff77d3526.jpeg


Infinite Image (无限延展扩图工具

这个功能通过简单的文本提示就可以把小图像无限联想扩展图像外生成更多扩展内容,首先点击“Infinite Image”选项。


3c545d09f39bb84e7a9548cf0e6fb469.jpeg


跳转到编辑界面


eab178eefefafd2b98506eb14bb8570b.jpeg


40726f129ebc5211f83ce055d8c351dc.jpeg


你可以在线进行局部修改,以及扩图。


3e67d4f3c5f4115cd28db775fa7119d8.jpeg


lmage Variation(图像变体工具)

这个功能可以基于单个原始图像自动生成多达四个图像变体。首先点击“lmage Variation”选项。


c28a1e5f4016d31848ec9ee348b9f7f2.jpeg


接着上传图片


07e3c9a6b3c2f0066963fcfb5f695ac3.jpeg


在右侧点击Generate即可生成图像


86254ec43d78986909413836c4d24c64.jpeg


(2)Edit images

除了图像生成技术外,Runway图像后期处理模块具有7个功能


b779a2be43ab4c474ffbce577e8105ac.jpeg


7552709b3cb72bc457bbcefe83379e60.jpeg


①Expand Image(扩展图像)

这个功能智能感知生成的填充将上传的图像扩展到新的纵横比。首先点击“Expand Image”选项。


d8fb0061bf41beb388ab61d3f7a8e05c.jpeg


接着上传视频


cb358c1d450a4f223e74756b08de0fc6.jpeg


然后可以在右侧输入框中填写图像扩展的内容,以及扩展尺寸设置,最后点击Generate生成。


b33ebc67c47ed7d5f62e055681c18721.jpeg


②Frame Interpolation(帧插值)

这个功能可以实现将一系列图像串在一起形成动画视频,首先点击“Frame Interpolation”选项。


f83d7cc1dd6271f95cedb5e6202eaa58.jpeg


接着上传多张图片,系统将会自动生成上传图像之间的平滑过渡,以创建流畅的视频结果,最后点击Generate即可生成动画视频。


044fa998fcf4adf3f4984dc08d5f7914.jpeg


③Erase and Replace(擦除和替换)

这个功能可以进行擦除不需要的局部内容,还可以通过文本进行修改生成。首先点击“Erase and Replace”选项。


5c87ae1284b2bec31cfd9c92cac92b61.jpeg


上传图片


d13db4801bfc6e030de7d7db9b1d0b1f.jpeg


接着在编辑界面中,用橡皮擦在图像中抹除不满意的部分,接着在对话框中输入提示词,系统就会按照提示词内容进行替换。


a9e60d39a85820134007f388caa7724b.jpeg


④Backdrop Remix(背景混合)

这个功能通过改变提示关键词重新混合生成任何AI图像的风格和构图,首先点击“Backdrop Remix”选项。


307b414aeb30b36bfcdcb1cefd11bb4c.jpeg

上传图片后,可以在右侧编辑界面中,输入提示词,或者应用系统的模板样式,即可生成新的图像。


0a19f4f6871ecdd5d770addf612c21fa.jpeg


⑤lmage Variation(图像变化)

这个功能跟Generate images中的lmage Variation一致的,这里就不重复赘述。

d4064dc7a4fc3ed81f84921063f2a509.jpeg

⑥Add color(添加颜色)

这个功能可以实现一键着色,将黑白图片立即修复,首先点击“Add color”选项。

6cd42bf3c7b7a98888142214b91d25a3.jpeg


上传图像后,即可点击Colorize进行着色。


1dff0ec20e1f964b477c444ff9ce13be.jpeg


⑦Upscale Image(图像智能修复)

这个功能可以理解为将图像从低分辨率转换为高分辨率,一键将模糊的图片瞬间变得高清,首先点击“Upscale Image”选项。


f6b57e07f5dcffed4a766d14d06245d2.jpeg


上传图片后,在右侧选项中勾选合适的分配率,支持720P/1080P/2K/4K


0cd191310c19fb409c94aca7a71a43f8.jpeg


192a320bc9123fc625877f2ef8450c58.jpeg


三、3D

Runway除了视频及图像生成技术外,还具有3D生成功能,分别为:


ea230fbf6b710170e36296376ca1e60c.jpeg


6fed55bc2008de07e3b07606838c4b26.jpeg


(1)3D Capture (3D捕捉)

这个功能可以将物体通过拍摄AI合并成3D场景

首先点击3D Capture


0f0f32dd48efd7e4897ee9d1a5833c6f.jpeg


跳转到新的页面,这里可以查看拍摄教程,掌握后,即可点击操作按钮,上传一个视频


0f6a2dc1f8e678198d32ab6fbc98f713.jpeg


视频拍摄指导教程

  • 围绕一个目标场景或对象。
  • 30秒或更长时间,1到3分钟最好
  • 禁用HDR
  • 选择具有高FPS的相机设置 (通常出现在慢动作模式下)
  • 缓慢移动相机以减少模糊
  • 接受普通和广角镜头视频

50975891a89e49141e24aa9909e38d0c.jpeg


视频上传后,即可在右侧名号好文件名称,即可点击Next - Train 3D Capture


d548ff5e707545c9bdee5f068a86d775.jpeg


(2)3D Texture(文生三维图)

这个功能可以通过文本描述生成3D图形,首先点击3D Texture。


87e37ca74df1014849809e76fe8779f9.jpeg


接着在对话框中输入提示词,点击Generate即可生成图像。


f955ce7611584f71bf49e2688bb57d74.jpeg


3D图像生成后,可以对右侧参数选项进行设置优化。


e5582543dc0a0441dabd003872ab7b69.jpeg


以上就是所有Runway功能点教程内容。

相关文章:

视频字幕处理+AI绘画,Runway 全功能超详细使用教程(4)

runway的视频字幕处理、AI绘图功能介绍,感觉完全就是为了做电影而布局,一整套功能都上线了!想系统学习的必收藏! 在深度研究Runway各个功能后,无论是AI视频生成及后期处理技术,还是AI图像生成技术&#xff…...

令人疑惑的Promise相关问题

令人疑惑的Promise相关问题 问题1 const promise new Promise((resolve, reject) > {reject(Error(Error occurred)); });promise.catch(error > console.log(error.message)); promise.catch(error > console.log(error.message));输出: Error occurr…...

Spring 多数据源搭建

目录 前言 正文 1.Druid 介绍和使用 2.其他多数据源解决方案 总结 前言 对于复杂的业务和项目,可能在一个单体项目中存在需要连接多个数据库的情况。这时,就会使用到多数据源,实际中遇到的可能性比较大。 正文 如果一个项目中需要连…...

【二分查找】LeetCode1970:你能穿过矩阵的最后一天

本文涉及的基础知识点 二分查找算法合集 作者推荐 动态规划LeetCode2552:优化了6版的1324模式 题目 给你一个下标从 1 开始的二进制矩阵,其中 0 表示陆地,1 表示水域。同时给你 row 和 col 分别表示矩阵中行和列的数目。 一开始在第 0 …...

利用python连接MySQL数据库并执行相关sql操作

一、新建MySQL数据库 1.启动MySQL服务 打开phpstudy,开启MySQL服务。如果开启失败的话,可以打开任务管理器,把正在运行的mysqld服务的进程进行关闭,再次打开MySQL服务即可启动。 2.新建MySQL数据库 选择数据库,点击…...

jenkins配置

branch: "dev" 切换分支 $WORKSPACE: /var/lib/jenkins/workspace/jenkins任务名 dest_passwd服务器密码 变量 sudo sshpass -p $dest_passwd ssh root192.168.211.319 -tt rm -rf /data/patent/*:删除文件/data/patent/* sudo sshpa…...

LeNet对MNIST 数据集中的图像进行分类--keras实现

我们将训练一个卷积神经网络来对 MNIST 数据库中的图像进行分类,可以与前面所提到的CNN实现对比CNN对 MNIST 数据库中的图像进行分类-CSDN博客 加载 MNIST 数据库 MNIST 是机器学习领域最著名的数据集之一。 它有 70,000 张手写数字图像 - 下载非常简单 - 图像尺…...

Django的回顾的第4天

1.模型层 1.1简介 你可能已经注意到我们在例子视图中返回文本的方式有点特别。 也就是说&#xff0c;HTML被直接硬编码在 Python代码之中。 def current_datetime(request):now datetime.datetime.now()html "<html><body>It is now %s.</body><…...

点云从入门到精通技术详解100篇-基于三维点云的工件曲面轮廓检测与机器人打磨轨迹规划(中)

目录 2.2.2 散乱点云滤波去噪 2.2.3 海量点云数据压缩 2.3 点云采集与预处理实验...

Mapper文件夹在resource目录下但是网页报错找不到productMapper.xml文件的解决

报错如下&#xff1a; 我的Mapper文件夹在resourse目录下但是网页报错找不到productMapper.xml。 结构如下&#xff1a;代码如下&#xff1a;<mappers><mapper resource"com/dhu/mapper/productMapper.xml" /> </mappers> 这段代码是在mybatis-co…...

22.Oracle中的临时表空间

Oracle中的临时表空间 一、临时表空间概述1、什么是临时表空间2、临时表空间的作用 二、临时表空间相关语法三、具体使用案例1、具体使用场景示例2、具体使用场景代码示例 点击此处跳转下一节&#xff1a;23.Oracle11g的UNDO表空间点击此处跳转上一节&#xff1a;21.Oracle的程…...

附录A 指令集基本原理

1. 引言 本书主要关注指令集体系结构4个主题&#xff1a; 1. 提出对指令集进行分类的方法&#xff0c;并对各种方法的优缺点进行定性评估&#xff1b; 2. 提出并分析一些在很大程度上独立于特定指令集的指令集评估数据。 3. 讨论语言与编译器议题以及…...

Unittest单元测试之unittest用例执行顺序

unittest用例执行顺序 当在一个测试类或多个测试模块下&#xff0c;用例数量较多时&#xff0c;unittest在执行用例 &#xff08;test_xxx&#xff09;时&#xff0c;并不是按从上到下的顺序执行&#xff0c;有特定的顺序。 unittest框架默认根据ACSII码的顺序加载测试用例&a…...

海云安谢朝海:开发安全领域大模型新实践 人工智能助力高效安全左移

2023年11月29日&#xff0c;2023中国&#xff08;深圳&#xff09;金融科技大会成功举行&#xff0c;该会议是深圳连续举办的第七届金融科技主题年度会议&#xff0c;也是2023深圳国际金融科技节重要活动之一。做好金融工作&#xff0c;需要兼顾创新与安全&#xff0c;当智能体…...

Postman接口测试工具完整教程

前言 作为软件开发过程中一个非常重要的环节&#xff0c;软件测试越来越成为软件开发商和用户关注的焦点。完善的测试是软件质量的保证&#xff0c;因此软件测试就成了一项重要而艰巨的工作。要做好这项工作当然也绝非易事。 第一部分&#xff1a;基础篇 postman:4.5.1 1.安…...

Android 滑动按钮(开关) SwitchCompat 自定义风格

原生的SwitchCompat控件如下图&#xff0c;不说不堪入目&#xff0c;也算是不敢恭维了。开个玩笑... 所以我们就需要对SwitchCompat进行自定义风格&#xff0c;效果如下图 代码如下 <androidx.appcompat.widget.SwitchCompatandroid:id"id/switch_compat"android:…...

前端面试灵魂提问-计网(2)

1、websocket 为什么全双工? 1.1 WebSocket是什么 WebSocket 是一种通信协议&#xff0c;它在客户端和服务器之间建立持久的全双工连接。全双工意味着数据可以双向流动&#xff0c;即客户端可以向服务器发送消息&#xff0c;服务器也可以向客户端发送消息&#xff0c;而无需…...

Git修改远程仓库名称

1、先直接在远程点仓库名&#xff0c;然后左侧菜单栏找settings-general&#xff0c;然后直接修改工程名&#xff0c;保存即可。 2、还是在settings-general下&#xff0c;下拉找到Advanced点击Expand展开&#xff0c;然后下拉到最底部 在Change path里填入新的项目名称&#x…...

kafka 集群 ZooKeeper 模式搭建

Apache Kafka是一个开源分布式事件流平台&#xff0c;被数千家公司用于高性能数据管道、流分析、数据集成和关键任务应用程序 Kafka 官网&#xff1a;Apache Kafka 关于ZooKeeper的弃用 根据 Kafka官网信息&#xff0c;随着Apache Kafka 3.5版本的发布&#xff0c;Zookeeper现…...

【LeetCode】 160. 相交链表

相交链表 题目题解 题目 给你两个单链表的头节点 headA 和 headB &#xff0c;请你找出并返回两个单链表相交的起始节点。如果两个链表不存在相交节点&#xff0c;返回 null 。 图示两个链表在节点 c1 开始相交&#xff1a; 题目数据 保证 整个链式结构中不存在环。 注意&am…...

(LeetCode 每日一题) 3442. 奇偶频次间的最大差值 I (哈希、字符串)

题目&#xff1a;3442. 奇偶频次间的最大差值 I 思路 &#xff1a;哈希&#xff0c;时间复杂度0(n)。 用哈希表来记录每个字符串中字符的分布情况&#xff0c;哈希表这里用数组即可实现。 C版本&#xff1a; class Solution { public:int maxDifference(string s) {int a[26]…...

C++实现分布式网络通信框架RPC(3)--rpc调用端

目录 一、前言 二、UserServiceRpc_Stub 三、 CallMethod方法的重写 头文件 实现 四、rpc调用端的调用 实现 五、 google::protobuf::RpcController *controller 头文件 实现 六、总结 一、前言 在前边的文章中&#xff0c;我们已经大致实现了rpc服务端的各项功能代…...

Debian系统简介

目录 Debian系统介绍 Debian版本介绍 Debian软件源介绍 软件包管理工具dpkg dpkg核心指令详解 安装软件包 卸载软件包 查询软件包状态 验证软件包完整性 手动处理依赖关系 dpkg vs apt Debian系统介绍 Debian 和 Ubuntu 都是基于 Debian内核 的 Linux 发行版&#xff…...

使用van-uploader 的UI组件,结合vue2如何实现图片上传组件的封装

以下是基于 vant-ui&#xff08;适配 Vue2 版本 &#xff09;实现截图中照片上传预览、删除功能&#xff0c;并封装成可复用组件的完整代码&#xff0c;包含样式和逻辑实现&#xff0c;可直接在 Vue2 项目中使用&#xff1a; 1. 封装的图片上传组件 ImageUploader.vue <te…...

Keil 中设置 STM32 Flash 和 RAM 地址详解

文章目录 Keil 中设置 STM32 Flash 和 RAM 地址详解一、Flash 和 RAM 配置界面(Target 选项卡)1. IROM1(用于配置 Flash)2. IRAM1(用于配置 RAM)二、链接器设置界面(Linker 选项卡)1. 勾选“Use Memory Layout from Target Dialog”2. 查看链接器参数(如果没有勾选上面…...

爬虫基础学习day2

# 爬虫设计领域 工商&#xff1a;企查查、天眼查短视频&#xff1a;抖音、快手、西瓜 ---> 飞瓜电商&#xff1a;京东、淘宝、聚美优品、亚马逊 ---> 分析店铺经营决策标题、排名航空&#xff1a;抓取所有航空公司价格 ---> 去哪儿自媒体&#xff1a;采集自媒体数据进…...

大语言模型(LLM)中的KV缓存压缩与动态稀疏注意力机制设计

随着大语言模型&#xff08;LLM&#xff09;参数规模的增长&#xff0c;推理阶段的内存占用和计算复杂度成为核心挑战。传统注意力机制的计算复杂度随序列长度呈二次方增长&#xff0c;而KV缓存的内存消耗可能高达数十GB&#xff08;例如Llama2-7B处理100K token时需50GB内存&a…...

在web-view 加载的本地及远程HTML中调用uniapp的API及网页和vue页面是如何通讯的?

uni-app 中 Web-view 与 Vue 页面的通讯机制详解 一、Web-view 简介 Web-view 是 uni-app 提供的一个重要组件&#xff0c;用于在原生应用中加载 HTML 页面&#xff1a; 支持加载本地 HTML 文件支持加载远程 HTML 页面实现 Web 与原生的双向通讯可用于嵌入第三方网页或 H5 应…...

MySQL账号权限管理指南:安全创建账户与精细授权技巧

在MySQL数据库管理中&#xff0c;合理创建用户账号并分配精确权限是保障数据安全的核心环节。直接使用root账号进行所有操作不仅危险且难以审计操作行为。今天我们来全面解析MySQL账号创建与权限分配的专业方法。 一、为何需要创建独立账号&#xff1f; 最小权限原则&#xf…...

九天毕昇深度学习平台 | 如何安装库?

pip install 库名 -i https://pypi.tuna.tsinghua.edu.cn/simple --user 举个例子&#xff1a; 报错 ModuleNotFoundError: No module named torch 那么我需要安装 torch pip install torch -i https://pypi.tuna.tsinghua.edu.cn/simple --user pip install 库名&#x…...