当前位置：首页 > news >正文

尝试着在Stable Diffusion里边使用SadTalker进行数字人制作

news 2025/12/25 23:51:20

首先需要标明的是，我这里是图片说话类型，而且是看了知识星球AI破局俱乐部大航海数字人手册进行操作的。写下这篇文章是防止我以后遗忘。
我使用的基础软件是Stable Diffusion，SadTalker是作为插件放进来的，需要注意的是这对自己的电脑GPU要求比较高，至少需要8G，至少我的电脑是8G显存。

下载并安装ffmpeg

下载并安装ffmpeg，这一步的作用是语音格式的各种转换，虚拟数字人能开口说话，需要我们上传自己的语音，如果格式不符合会自动转换。
到https://ffmpeg.org/download.html选择自己操作系统然后选择下载格式。
在这里插入图片描述

选择下载的类型，我选择全量版的。
在这里插入图片描述

然后我解压到D:\VideoSoft目录下。
在这里插入图片描述

需要配置环境变量了。
Windows+r同时按下，然后输入SYSTEMPROPERTIESADVANCED，然后点击确定。

在这里插入图片描述

然后选择高级，点击环境变量。
在这里插入图片描述

选择Path，然后点击编辑。
在这里插入图片描述

然后点击新建。
在这里插入图片描述

把你上边解压的目录找到bin那级的目录放到环境变量里边，然后点击确定。
在这里插入图片描述

把上一级窗口也点击确定。
在这里插入图片描述

系统属性这一级窗口也点击确定。
在这里插入图片描述

然后同时按下Windows+r，输入cmd然后按下确定键。
在这里插入图片描述

然后输入ffmpeg -version，要是显示出来很多内容，那么就是正常安装好了。
在这里插入图片描述

Stable Diffusion安装插件

我使用的Stable Diffusion是秋叶版的。
在这里插入图片描述

下载扩展

点击扩展，选择从网址安装，然后把git仓库https://github.com/OpenTalker/SadTalker.git放入指定的位置，然后点击安装。
在这里插入图片描述

发现报错如下：

GitCommandError: Cmd('git') failed due to: exit code(128) cmdline: git clone -v -- https://github.com/OpenTalker/SadTalker.git D:\sd-webui-aki\sd-webui-aki-v4.1\tmp\SadTalker stderr: 'Cloning into 'D:\sd-webui-aki\sd-webui-aki-v4.1\tmp\SadTalker'... fatal: unable to access 'https://github.com/OpenTalker/SadTalker.git/': Failed to connect to github.com port 443 after 21039 ms: Couldn't connect to server '

在这里插入图片描述

我到https://github.com/OpenTalker/SadTalker里边，下载源代码的zip包。
在这里插入图片描述

然后把压缩包解压至Stable Diffusion启动器所在的目录下一级目录extensions里边，目录如下所示。
在这里插入图片描述

checkpoint文件下载和配置，

需要到https://github.com/OpenTalker/SadTalker/releases，下载以下四个文件。
在这里插入图片描述

然后当前网页上边，往下滑动，点开Assets，然后下载红圈中的文件。
在这里插入图片描述

将上边下载好的文件放入到自己D:\sd-webui-aki\sd-webui-aki-v4.1\extensions\SadTalker\checkpoints里边，很有可能，你没有checkpoints这个目录，自己新建一个就行了。
在这里插入图片描述

另外hub.zip需要解压。
在这里插入图片描述

下载GFPGAN模型

到https://drive.google.com/file/d/19AIBsmfcHW6BRJmeqSFlG5fL445Xmsyi下载文件解压到D:\sd-webui-aki\sd-webui-aki-v4.1\extensions\SadTalker里边。
在这里插入图片描述

接下来就是重新启动Stable Diffusion进行画图了。点击SadTalker，然后上传图片，之后上传音频，然后点击生成。
在这里插入图片描述

需要等待。
在这里插入图片描述

生成之后如下图：
在这里插入图片描述

无法上传视频，没有办法展示效果了。

我是知识星球上约有3万人的AI破局俱乐部初创合伙人，我的微信号是zhaoseaside，欢迎大家加我，相互学习AI知识和个人IP知识，毕竟这是未来两大风口。
大家要是需要文档中的文件，可以加我备注SadTalker，我用百度网盘发给你。

相关文章：

尝试着在Stable Diffusion里边使用SadTalker进行数字人制作

首先需要标明的是，我这里是图片说话类型，而且是看了知识星球AI破局俱乐部大航海数字人手册进行操作的。写下这篇文章是防止我以后遗忘。我使用的基础软件是Stable Diffusion，SadTalker是作为插件放进来的，需要注意的是这对自己的…...

编程日记 2024/1/23 16:45:39

链路聚合原理与配置

链路聚合原理随着网络规模不断扩大，用户对骨干链路的带宽和可靠性提出了越来越高的要求。在传统技术中，常用更换高速率的接口板或更换支持高速率接口板的设备的方式来增加带宽，但这种方案需要付出高额的费用，而且不够灵活。采用…...

编程日记 2024/1/23 16:42:36

第8章通信网络安全

文章目录 8.1 信息系统安全概述8.1.1 信息系统的构成和分类8.1.2 信息系统安全1、信息系统中的安全概念2、信息系统安全问题的发展演变3、信息系统的安全结构 8.1.3 信息系统的安全保护等级1.TCSEC（可信计算机系统评估准则）2. 我国信息安全标准 8.1.4 通…...

编程日记 2024/1/23 16:41:35

L1-092 进化论(Java)

在“一年一度喜剧大赛”上有一部作品《进化论》，讲的是动物园两只猩猩进化的故事。猩猩吕严说自己已经进化了 9 年了，因为“三年又三年”。猩猩土豆指出“三年又三年是六年呐”…… 本题给定两个数字，以及用这两个数字计算的结果，…...

编程日记 2024/1/23 16:39:32

SpringBoot 源码解析5：ConfigurationClassPostProcessor整体流程和@ComponentScan源码分析

SpringBoot 源码解析5：ConfigurationClassPostProcessor整体流程和ComponentScan源码分析 1. 知道以下几点，读ConfigurationClassPostProcessor源码会更轻松2. 源码解析 ConfigurationClassPostProcessor#postProcessBeanDefinitionRegistry2.1 Configur…...

编程日记 2024/1/23 16:37:30

一.初识Linux 1-3操作系统概述Linux初识虚拟机介绍

目录一.初识Linux 1.操作系统概述计算机组成硬件： 软件： 操作系统： 操作系统工作流程操作系统作用常见的操作系统 PC端： 移动端：（掌上操作系统） 一.初识Linux 2.Linux初识 linu…...

编程日记 2024/1/23 16:36:28

Eureka整合seata分布式事务

文章目录一、分布式事务存在的问题二、分布式事务理论三、认识SeataSeata分布式事务解决方案1、XA模式2、AT模式3、SAGA模式4.SAGA模式优缺点：5.四种模式对比四、微服务整合Seata AT案例Seata配置微服务整合2.1、父工程项目创建引入依赖 2.2、Eureka集群搭建2.3、…...

编程日记 2024/1/23 16:31:20

华为云磁盘性能指标(参考)

MD[华为云磁盘性能指标(参考)] 云硬盘（Elastic Volume Service, EVS） 根据性能，磁盘可分为极速型SSD V2、极速型SSD、通用型SSD V2、超高IO、通用型SSD、高IO、普通IO。性能指标(参考)，测速说明：操作系统-windows …...

编程日记 2024/1/23 16:30:18

利用OpenGL图形库实现人物动画移动效果

使用OpenGL库实现人物动画移动效果需要涉及到更复杂的图形编程和事件处理。以下是一个简单的例子，使用OpenGL和GLUT库实现人物的基本动画移动效果。确保你已经安装了OpenGL和GLUT。你可以使用包管理器或者从官方网站下载并安装。一、如果你已经安装过了OpenGL和…...

编程日记 2024/1/23 16:24:11

History命令解释，及一个相关的bash脚本（如何编写脚本程序从记录文件中提取history命令）

目录一、history命令介绍 1、history命令是什么？ 2、history的主要功能二、history命令的用法 1、语法 2、选项说明 3、命令实例三、history和历史记录文件bash_history 四、history命令的相关配置 1，命令带时间展示-HISTTI…...

编程日记 2024/1/23 16:23:10

apisix 单机部署 linux

安装etcd： cd /home/app rz tar -zxvf etcd-v3.5.4-linux-amd64.tar.gz cd etcd-v3.5.4-linux-amd64 vim start.sh内容： #!/bin/sh nohup etcd --name infra0 --initial-advertise-peer-urls http://127.0.0.1:2380 \--listen-peer-urls http://127.0.…...

编程日记 2024/1/23 16:20:06

Redis 面试题 | 06.精选Redis高频面试题

🤍 前端开发工程师、技术日更博主、已过CET6 🍨 阿珊和她的猫_CSDN博客专家、23年度博客之星前端领域TOP1 🕠 牛客高级专题作者、打造专栏《前端面试必备》、《2024面试高频手撕题》 🍚 蓝桥云课签约作者、上架课程《Vue.js 和 E…...

编程日记 2024/1/23 16:14:58

2008年苏州大学837复试机试C/C++

2008年苏州大学复试机试题目编写程序充成以下功能: 一、从键盘上输入随机变量x的 10个取样点。X0，X1—X9 的值; 1、计算样本平均值 2、判定x是否为等差数列 3、用以下公式计算z的值(t0.63) 注。请对程序中必要地方进行注释补充：个人觉得这个题目回忆…...

编程日记 2024/1/23 16:12:56

MySQL笔记-information_schema库中COLUMNS表的一些笔记

mysql建表中可以添加comment，也就是注释，这些注释会写到information_schema库的COLUMNS表中，可以使用如下SQL语句进行查询： SELECT COLUMN_NAME, COLUMN_COMMENT FROM information_schema.COLUMNS WHERE TABLE_SCHEMA your_data…...

编程日记 2024/1/23 16:11:54

归并排序模板

模板在文末，以下步骤方便理解记忆。先贴一张快速排序模板步骤，用于对比记忆归并排序步骤： （0）如果数组左边界L ≥ 数组右边界，则不需要排序，直接return。 （1）直接取…...

编程日记 2024/1/23 16:10:53

【NVIDIA】Jetson Orin Nano系列：安装 Qt6、firefox、jtop、flameshot

1、使用命令安装 sudo apt install qtcreator sudo apt install qt6-* sudo apt install libqt6* sudo apt install qml-qt6 sudo apt install qmlscene-qt6 sudo apt install assistant-qt6 sudo apt install designer-qt62、启动 qtcreator 3、常用工具安装 sudo apt in…...

编程日记 2024/1/23 16:09:52

Fastapi+Jsonp实现前后端跨域请求

文章目录一、实现方法1.后端部分【Fastapi】2.前端部分【JS】二、测试一、实现方法 1.后端部分【Fastapi】 # coding:utf-8import json from fastapi import FastAPI, Response from fastapi.middleware.cors import CORSMiddlewareapp = FastAPI(...

编程日记 2024/1/23 16:07:49

MacOS受欢迎的数据库开发工具 Navicat Premium 15 中文版

Navicat Premium 15 Mac是一款数据库管理工具，提供了一个全面的解决方案，用于连接、管理和维护各种数据库系统。以下是Navicat Premium 15 Mac的一些主要功能和特点： 软件下载：Navicat Premium 15 中文版下载多平台支持&#xff…...

编程日记 2024/1/23 16:03:44

helm---自动化一键部署

什么是helm?? 在没有这个helm之前，deployment service ingress helm的作用就是通过打包的方式，把deployment service ingress 这些打包在一块，一键式部署服务，类似于yum 官方提供的一个类似于安装仓库的功能，可以实…...

编程日记 2024/1/23 16:01:42

求助帖（setiosflags）的左右对齐问题:

以后自己要注意，如果两个相互矛盾的标志同时被设置，如先设置 setiosflags(ios::right)，然后又设置 setiosflags(ios::left)，那么结果可能就是两个标志都不起作用。因此，在设置了某标志，又要设置其他与之矛盾…...

编程日记 2024/1/23 16:00:40

uniapp 对接腾讯云IM群组成员管理（增删改查）

UniApp 实战：腾讯云IM群组成员管理（增删改查） 一、前言在社交类App开发中，群组成员管理是核心功能之一。本文将基于UniApp框架，结合腾讯云IM SDK，详细讲解如何实现群组成员的增删改查全流程。权限校验…...

编程新知 2025/9/22 20:29:32

React第五十七节 Router中RouterProvider使用详解及注意事项

前言在 React Router v6.4 中，RouterProvider 是一个核心组件，用于提供基于数据路由（data routers）的新型路由方案。它替代了传统的 <BrowserRouter>，支持更强大的数据加载和操作功能（如 loader 和…...

编程新知 2025/12/23 11:12:42

关于iview组件中使用 table , 绑定序号分页后序号从1开始的解决方案

问题描述：iview使用table 中type: "index",分页之后 ，索引还是从1开始，试过绑定后台返回数据的id, 这种方法可行，就是后台返回数据的每个页面id都不完全是按照从1开始的升序，因此百度了下，找到了…...

编程新知 2025/12/19 16:13:46

Auto-Coder使用GPT-4o完成：在用TabPFN这个模型构建一个预测未来3天涨跌的分类任务

通过akshare库，获取股票数据，并生成TabPFN这个模型可以识别、处理的格式，写一个完整的预处理示例，并构建一个预测未来 3 天股价涨跌的分类任务用TabPFN这个模型构建一个预测未来 3 天股价涨跌的分类任务，进行预测并输…...

编程新知 2025/9/20 4:34:47

1.3 VSCode安装与环境配置

进入网址Visual Studio Code - Code Editing. Redefined下载.deb文件，然后打开终端，进入下载文件夹，键入命令 sudo dpkg -i code_1.100.3-1748872405_amd64.deb 在终端键入命令code即启动vscode 需要安装插件列表 1.Chinese简化 2.ros …...

编程新知 2025/12/25 4:24:38

oracle与MySQL数据库之间数据同步的技术要点

Oracle与MySQL数据库之间的数据同步是一个涉及多个技术要点的复杂任务。由于Oracle和MySQL的架构差异，它们的数据同步要求既要保持数据的准确性和一致性，又要处理好性能问题。以下是一些主要的技术要点： 数据结构差异数据类型差异&#xff…...

编程新知 2025/8/12 3:03:43

P3 QT项目----记事本（3.8）

3.8 记事本项目总结项目源码 1.main.cpp #include "widget.h" #include <QApplication> int main(int argc, char *argv[]) {QApplication a(argc, argv);Widget w;w.show();return a.exec(); } 2.widget.cpp #include "widget.h" #include &q…...

编程新知 2025/12/12 10:35:10

Redis数据倾斜问题解决

Redis 数据倾斜问题解析与解决方案什么是 Redis 数据倾斜 Redis 数据倾斜指的是在 Redis 集群中，部分节点存储的数据量或访问量远高于其他节点，导致这些节点负载过高，影响整体性能。数据倾斜的主要表现部分节点内存使用率远高于其他节…...

编程新知 2025/12/25 4:57:02

Redis的发布订阅模式与专业的 MQ（如 Kafka, RabbitMQ）相比，优缺点是什么？适用于哪些场景？

Redis 的发布订阅（Pub/Sub）模式与专业的 MQ（Message Queue）如 Kafka、RabbitMQ 进行比较，核心的权衡点在于：简单与速度 vs. 可靠与功能。下面我们详细展开对比。 Redis Pub/Sub 的核心特点它是一个发后…...

编程新知 2025/12/4 2:32:37

论文笔记——相干体技术在裂缝预测中的应用研究

目录相关地震知识补充地震数据的认识地震几何属性相干体算法定义基本原理第一代相干体技术：基于互相关的相干体技术（Correlation）第二代相干体技术：基于相似的相干体技术（Semblance）基于多道相似的相干体…...

编程新知 2025/12/12 20:26:01