当前位置： 首页 > news >正文

【AI数字人】如何基于ER-NeRF自训练AI数字人

news 2026/3/30 23:22:38

文章目录

    • 环境配置
      • 前期准备
    • 数据预处理
    • 音频预处理
    • 训练
      • bug
    • 测试
      • 度量标准
      • 用指定的声音进行推理
    • 参考

ER-NeRF，能够以更小的模型尺寸和更快的速度训练合成逼真的3D talking portrait。

环境配置

ER-NeRF项目开源于两个月前，相比于两年前的AD-NeRF，使用更新版本的tensorflow和各种库文件，配置环境更加方便。

conda create -n ernerf python=3.10
conda activate ernerf
# pip 安装 torch
pip install torch==1.12.0+cu113 torchvision==0.13.0+cu113 torchaudio==0.12.0 --extra-index-url https://download.pytorch.org/whl/cu113
# 加上下一行，pyaudio就能安装成功了
sudo apt-get install libasound-dev portaudio19-dev libportaudio2 libportaudiocpp0 
pip install -r requirements.txt
pip install "git+https://github.com/facebookresearch/pytorch3d.git"
# 别用其他源

相关文章：

【AI数字人】如何基于ER-NeRF自训练AI数字人

文章目录 环境配置前期准备数据预处理音频预处理训练bug测试度量标准用指定的声音进行推理参考ER-NeRF，能够以更小的模型尺寸和更快的速度训练合成逼真的3D talking portrait。 环境配置 ER-NeRF项目开源于两个月前，相比于两年前的AD-NeRF，使用更新版本的tensorflow和各种…...

编程日记 2023/9/8 3:02:28

多目标应用：基于多目标哈里斯鹰优化算法（MOHHO）的微电网多目标优化调度研究MATLAB

一、微网系统运行优化模型 参考文献： [1]李兴莘,张靖,何宇,等.基于改进粒子群算法的微电网多目标优化调度[J].电力科学与工程, 2021, 37(3):7 二、多目标哈里斯鹰优化算法MOHHO 多目标哈里斯鹰优化算法（Multi-Objective Harris Hawks Optimizer&#…...

编程日记 2023/9/8 3:01:26

[运维|中间件] 东方通TongWeb忘记密码后修改密码

参考文献 Tongweb忘记密码处理办法 修改密码 以下步骤将thanos用户密码修改为 thanos123.com 编辑twusers.properties文件 vim /path/to/TongWeb7.0/conf/security/twusers.properties将thanos的内容修改为默认的密码信息： thanos3d6391e41e9c4319$3$6774c6fc9…...

编程日记 2023/9/8 3:00:25

无涯教程-Android Mock Test函数

本节介绍了与 Android 相关的各种模拟测试。您可以在本地计算机上下载这些样本模拟测试,并在方便时离线解决。每个模拟测试均随附一个模拟测试键,可让您验证最终分数并为自己评分。 Mock Test I Mock Test II Mock Test III Mock Test IV Q 1 -什么是Android？ A -A…...

编程日记 2023/9/8 2:59:25

保留网络[02/3]：大型语言模型转换器的继任者”

一、说明 在这项工作中，我们提出保留网络（RETNET）作为基础架构大型语言模型的结构，同时实现训练并行， 推理成本低，性能好。我们从理论上推导出这种联系 复发与关注之间。然后我们提出保留机制 序列建模&…...

编程日记 2023/9/8 2:57:58

微信小程序-生成canvas图片并保存到手机相册

wxml页面 <button class"rightbtn bottomBtnCss" catch:tap"canvasImg"><image src{{imgUrl}}/images/mine/jspj-icon.png class"restNumImg"></image><text class"btnText">生成图片</text></but…...

编程日记 2023/9/8 2:56:56

设计模式8：代理模式-动态代理

上一篇&#xff1a;设计模式8&#xff1a;代理模式-静态代理 目录 如何理解“动态”这两个字&#xff1f;动态代理简单的代码实例一个InvocationHandler代理多个接口有动态代理&#xff0c;为什么还要用Cglib代理&#xff1f; 如何理解“动态”这两个字&#xff1f; “动态”…...

编程日记 2023/9/8 2:55:55

tcp字节传输（java）-自定义包头和数据识别

1、背景 tcp传输的时候会自动拆包&#xff0c;因此服务端接收的数据段可能跟客户端发送过来的数据段长度不一致&#xff0c;比如客户端一次发送10000个字节。但是服务端接收了两次才接收完整&#xff08;例如第一次接收6000字节&#xff0c;第二次接收4000字节&#xff09;。但…...

编程日记 2023/9/8 2:54:54

pyspark 系统找不到指定的路径； \Java\jdk1.8.0_172\bin\java

使用用具PyCharm 2023.2.1 1&#xff1a;pyspark 系统找不到指定的路径&#xff0c; Java not found and JAVA_HOME environment variable is not set. Install Java and set JAVA_HOME to point to the Java installation directory. 解决方法&#xff1a;配置正确环境变量…...

编程日记 2023/9/8 2:53:53

UE4 Physics Constraint Actor 实现钟摆效果

放入场景&#xff0c;然后将一个球体放入场景 选择小球 将小球改为Movable 选择模拟物理&#xff0c;并将小球移除平衡点 就实现了...

编程日记 2023/9/8 2:52:52

UE4/UE5 动画控制

工程下载​ ​​​​​​​​​​​​​https://mbd.pub/o/bread/ZJ2cm5pu 蓝图控制sequence播放/倒播动画&#xff1a; 设置开启鼠标指针&#xff0c;开启鼠标事件 在场景中进行过场动画制作 设置控制事件...

编程日记 2023/9/8 2:51:51

Springboot整合shiro

导入依赖 <!-- 引入springboot的web项目的依赖 --><dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-web</artifactId></dependency> ​ <!-- shiro --><depende…...

编程日记 2023/9/8 2:50:50

阻塞/非阻塞、同步/异步（网络IO）

1.阻塞/非阻塞、同步/异步(网络IO) 【思考】典型的一次 IO 的两个阶段是什么&#xff1f; 数据就绪 和 数据读写 数据就绪 &#xff1a;根据系统 IO 操作的就绪状态 阻塞 非阻塞 数据读写 &#xff1a;根据应用程序和内核的交互方式 同步 异步 陈硕&#xff1a;在处理 IO …...

编程日记 2023/9/8 2:49:48

为什么大家会觉得考PMP没用？

一是在于PMP这套知识体系&#xff0c;是一套底层的项目管理逻辑框架&#xff0c;整体是比较抽象的。大家在学习工作之后&#xff0c;会有人告诉你很多职场的一些做事的规则&#xff0c;比如说对于沟通&#xff0c;有人就会告诉如何跟客户沟通跟同事相处等等&#xff0c;这其实就…...

编程日记 2023/9/8 2:48:47

AVR128单片机 USART通信控制发光二极管显示

一、系统方案 二、硬件设计 原理图如下&#xff1a; 三、单片机软件设计 1、首先是系统初始化 void port_init(void) { PORTA 0xFF; DDRA 0x00;//输入 PORTB 0xFF;//低电平 DDRB 0x00;//输入 PORTC 0xFF;//低电平 DDRC 0xFF;//输出 PORTE 0xFF; DDRE 0xfE;//输出 PO…...

编程日记 2023/9/8 2:47:46

为什么5G 要分离 CU 和DU？（4G分离RRU 和BBU）

在 Blog 一文中&#xff0c;5G--BBU RRU 如何演化到 CU DU&#xff1f;_5g rru_qq_38480311的博客-CSDN博客 解释了4G的RRU BBU 以及 5G CU DU AAU&#xff0c;主要是讲了它们分别是什么。但是没有讲清楚 为什么&#xff0c;此篇主要回答why。 4G 为什么分离基站为 RRU 和 BBU…...

编程日记 2023/9/8 2:46:45

Python中的数据输入

获取键盘输入 input语句 使用input()可以从键盘获取输入&#xff0c;使用一个变量来接收 print("你是谁&#xff1f;") name input() print(f"我知道了&#xff0c;你是{name}")# print("你是谁&#xff1f;") name input("你是谁&…...

编程日记 2023/9/8 2:45:44

cms系统稳定性压力测试出现TPS抖动和毛刺的性能bug【杭州多测师_王sir】

一、并发线程数100&#xff0c;分10个阶梯&#xff0c;60秒加载时间&#xff0c;运行1小时进行压测&#xff0c;到10分钟就出现如下 二、通过jstat -gcutil 16689 1000进行监控...

编程日记 2023/9/8 2:44:43

【UE】材质描边、外发光、轮廓线

原教学视频链接&#xff1a; ue4 材质描边、外发光、轮廓线_哔哩哔哩_bilibili 步骤 1. 首先新建一个材质&#xff0c;这里命名为“Mat_outLine” 在此基础上创建一个材质实例 2. 在视口中添加一个后期处理体积 设置后期处理体积为无限范围 点击添加一个数组 选择“资产引用”…...

编程日记 2023/9/8 2:43:41

百模大战，打响AI应用生态的新赛点

点击关注 文&#xff5c;郝鑫 黄小艺&#xff0c;编&#xff5c;刘雨琦 “宇宙中心”五道口&#xff0c;又泛起了昔日的光芒。 十字路口一角的华清嘉园里&#xff0c;各种互联网大佬们&#xff0c;王兴、程一笑、张一鸣等人的创业传说似乎还有余音&#xff0c;后脚搬进来的AI…...

编程日记 2023/9/8 2:42:40

保姆级教程：用YOLOv11+PyQt5打造你的专属天气识别桌面应用（附完整源码）

从零构建基于YOLOv11的智能天气识别桌面应用 窗外阴云密布&#xff0c;你是否曾好奇此刻的天气状况究竟如何&#xff1f;现代计算机视觉技术让机器也能像人类一样"看懂"天气。本文将带你完整实现一个能识别11种天气类型的桌面应用&#xff0c;从模型加载到界面交互&a…...

编程新知 2026/3/30 22:25:52

不止于教程：用QGIS 3.30 + PyQt5从零打造一个极简版GIS桌面应用

从零构建GIS桌面应用&#xff1a;QGIS 3.30与PyQt5深度整合实战 当我们需要开发一个轻量级地理信息系统时&#xff0c;QGIS的Python API提供了强大而灵活的选择。不同于简单的脚本编写&#xff0c;将QGIS作为引擎嵌入到自定义PyQt5应用中&#xff0c;能够实现高度定制化的GIS解…...

编程新知 2026/3/30 22:07:40

AI开源项目贡献指南：测试工程师从PR提交到核心维护者的专业路径

测试工程师在AI开源生态中的独特价值在AI开源项目的演进中&#xff0c;软件测试从业者具备不可替代的专业优势&#xff1a;质量敏感度&#xff1a;精准识别模型漂移、接口兼容性、数据异常等AI特有风险系统化思维&#xff1a;构建覆盖数据流水线、模型服务、API交互的端到端验证…...

编程新知 2026/3/30 21:57:30

Knife4j在SpringBoot3中的高级配置：自定义首页、多语言支持与安全认证

Knife4j在SpringBoot3中的高级配置&#xff1a;自定义首页、多语言支持与安全认证 当你的SpringBoot3项目已经完成Knife4j的基础集成&#xff0c;接下来可能会面临这样的需求&#xff1a;如何让API文档更符合企业品牌形象&#xff1f;如何为国际团队提供多语言支持&#xff1f…...

编程新知 2026/3/30 20:42:41

Qwen2.5-72B-GPTQ-Int4开源镜像：Chainlit前端定制化开发入门指南

Qwen2.5-72B-GPTQ-Int4开源镜像&#xff1a;Chainlit前端定制化开发入门指南 想快速搭建一个功能强大、界面美观的AI对话应用吗&#xff1f;今天&#xff0c;我们就来聊聊如何基于Qwen2.5-72B-GPTQ-Int4这个顶级开源大模型&#xff0c;以及Chainlit这个轻量级前端框架&#xf…...

编程新知 2026/3/30 20:30:37

功能越来越多，但 IT 系统却越来越难用了

在很多企业的信息化建设过程中&#xff0c;一个明显趋势是&#xff1a; 系统功能在不断增加。从最初的基础功能&#xff0c;到后来的审批流、自动化、报表分析&#xff0c;再到各种集成功能&#xff0c;系统看起来越来越强大&#xff0c;也越来越“全面”。按理说&#xff0c;功…...

编程新知 2026/3/30 19:15:20

动态规划 -- 最长公共子序列

最长公共子序列的结构设序列 X{x1,x2,…,x m} 和 Y{y1,y2,…,y n} 的最长公共子序列为 Z{z1,z2,…,z k}&#xff0c;则有以下结论&#xff1a;若 x my n&#xff0c;则 z kx my n&#xff0c;且 Z k−1&#xff08;即 Z 去掉最后一个元素 z k 后的子序列&#xff09;是 X m−1&…...

编程新知 2026/3/30 19:07:03

BGE-Reranker-v2-m3企业部署：高并发请求压力测试案例

BGE-Reranker-v2-m3企业部署&#xff1a;高并发请求压力测试案例 1. 项目背景与价值 在企业级RAG&#xff08;检索增强生成&#xff09;系统中&#xff0c;检索精度直接影响最终的回答质量。传统向量检索虽然快速&#xff0c;但容易受到关键词相似性的干扰&#xff0c;返回大…...

编程新知 2026/3/30 18:54:56

Qt实战：QGroupBox和QButtonGroup的5个实用技巧（附完整代码）

Qt实战&#xff1a;QGroupBox和QButtonGroup的5个实用技巧&#xff08;附完整代码&#xff09; 在Qt界面开发中&#xff0c;QGroupBox和QButtonGroup是两个看似简单却暗藏玄机的组件。很多开发者只停留在基础使用层面&#xff0c;却不知道它们能实现更复杂的交互逻辑和界面优化…...

编程新知 2026/3/30 18:48:54

volatile、内存屏障与 CPU 缓存机制详解

一、前置认知&#xff1a;CPU 缓存模型——并发可见性问题的根源 要理解 volatile&#xff0c;首先要搞懂 CPU 缓存模型。在计算机系统中&#xff0c;CPU 的运算速度远高于内存的读写速度&#xff0c;为了弥补两者之间的性能差距&#xff0c;CPU 厂商在 CPU 和内存之间引入了缓…...

编程新知 2026/3/30 17:54:21