当前位置： 首页 > news >正文

【AI数字人】如何基于ER-NeRF自训练AI数字人

news 2026/5/24 4:58:03

文章目录

    • 环境配置
      • 前期准备
    • 数据预处理
    • 音频预处理
    • 训练
      • bug
    • 测试
      • 度量标准
      • 用指定的声音进行推理
    • 参考

ER-NeRF，能够以更小的模型尺寸和更快的速度训练合成逼真的3D talking portrait。

环境配置

ER-NeRF项目开源于两个月前，相比于两年前的AD-NeRF，使用更新版本的tensorflow和各种库文件，配置环境更加方便。

conda create -n ernerf python=3.10
conda activate ernerf
# pip 安装 torch
pip install torch==1.12.0+cu113 torchvision==0.13.0+cu113 torchaudio==0.12.0 --extra-index-url https://download.pytorch.org/whl/cu113
# 加上下一行，pyaudio就能安装成功了
sudo apt-get install libasound-dev portaudio19-dev libportaudio2 libportaudiocpp0 
pip install -r requirements.txt
pip install "git+https://github.com/facebookresearch/pytorch3d.git"
# 别用其他源

相关文章：

【AI数字人】如何基于ER-NeRF自训练AI数字人

文章目录 环境配置前期准备数据预处理音频预处理训练bug测试度量标准用指定的声音进行推理参考ER-NeRF，能够以更小的模型尺寸和更快的速度训练合成逼真的3D talking portrait。 环境配置 ER-NeRF项目开源于两个月前，相比于两年前的AD-NeRF，使用更新版本的tensorflow和各种…...

编程日记 2023/9/8 3:02:28

多目标应用：基于多目标哈里斯鹰优化算法（MOHHO）的微电网多目标优化调度研究MATLAB

一、微网系统运行优化模型 参考文献： [1]李兴莘,张靖,何宇,等.基于改进粒子群算法的微电网多目标优化调度[J].电力科学与工程, 2021, 37(3):7 二、多目标哈里斯鹰优化算法MOHHO 多目标哈里斯鹰优化算法（Multi-Objective Harris Hawks Optimizer&#…...

编程日记 2023/9/8 3:01:26

[运维|中间件] 东方通TongWeb忘记密码后修改密码

参考文献 Tongweb忘记密码处理办法 修改密码 以下步骤将thanos用户密码修改为 thanos123.com 编辑twusers.properties文件 vim /path/to/TongWeb7.0/conf/security/twusers.properties将thanos的内容修改为默认的密码信息： thanos3d6391e41e9c4319$3$6774c6fc9…...

编程日记 2023/9/8 3:00:25

无涯教程-Android Mock Test函数

本节介绍了与 Android 相关的各种模拟测试。您可以在本地计算机上下载这些样本模拟测试,并在方便时离线解决。每个模拟测试均随附一个模拟测试键,可让您验证最终分数并为自己评分。 Mock Test I Mock Test II Mock Test III Mock Test IV Q 1 -什么是Android？ A -A…...

编程日记 2023/9/8 2:59:25

保留网络[02/3]：大型语言模型转换器的继任者”

一、说明 在这项工作中，我们提出保留网络（RETNET）作为基础架构大型语言模型的结构，同时实现训练并行， 推理成本低，性能好。我们从理论上推导出这种联系 复发与关注之间。然后我们提出保留机制 序列建模&…...

编程日记 2023/9/8 2:57:58

微信小程序-生成canvas图片并保存到手机相册

wxml页面 <button class"rightbtn bottomBtnCss" catch:tap"canvasImg"><image src{{imgUrl}}/images/mine/jspj-icon.png class"restNumImg"></image><text class"btnText">生成图片</text></but…...

编程日记 2023/9/8 2:56:56

设计模式8：代理模式-动态代理

上一篇&#xff1a;设计模式8&#xff1a;代理模式-静态代理 目录 如何理解“动态”这两个字&#xff1f;动态代理简单的代码实例一个InvocationHandler代理多个接口有动态代理&#xff0c;为什么还要用Cglib代理&#xff1f; 如何理解“动态”这两个字&#xff1f; “动态”…...

编程日记 2023/9/8 2:55:55

tcp字节传输（java）-自定义包头和数据识别

1、背景 tcp传输的时候会自动拆包&#xff0c;因此服务端接收的数据段可能跟客户端发送过来的数据段长度不一致&#xff0c;比如客户端一次发送10000个字节。但是服务端接收了两次才接收完整&#xff08;例如第一次接收6000字节&#xff0c;第二次接收4000字节&#xff09;。但…...

编程日记 2023/9/8 2:54:54

pyspark 系统找不到指定的路径； \Java\jdk1.8.0_172\bin\java

使用用具PyCharm 2023.2.1 1&#xff1a;pyspark 系统找不到指定的路径&#xff0c; Java not found and JAVA_HOME environment variable is not set. Install Java and set JAVA_HOME to point to the Java installation directory. 解决方法&#xff1a;配置正确环境变量…...

编程日记 2023/9/8 2:53:53

UE4 Physics Constraint Actor 实现钟摆效果

放入场景&#xff0c;然后将一个球体放入场景 选择小球 将小球改为Movable 选择模拟物理&#xff0c;并将小球移除平衡点 就实现了...

编程日记 2023/9/8 2:52:52

UE4/UE5 动画控制

工程下载​ ​​​​​​​​​​​​​https://mbd.pub/o/bread/ZJ2cm5pu 蓝图控制sequence播放/倒播动画&#xff1a; 设置开启鼠标指针&#xff0c;开启鼠标事件 在场景中进行过场动画制作 设置控制事件...

编程日记 2023/9/8 2:51:51

Springboot整合shiro

导入依赖 <!-- 引入springboot的web项目的依赖 --><dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-web</artifactId></dependency> ​ <!-- shiro --><depende…...

编程日记 2023/9/8 2:50:50

阻塞/非阻塞、同步/异步（网络IO）

1.阻塞/非阻塞、同步/异步(网络IO) 【思考】典型的一次 IO 的两个阶段是什么&#xff1f; 数据就绪 和 数据读写 数据就绪 &#xff1a;根据系统 IO 操作的就绪状态 阻塞 非阻塞 数据读写 &#xff1a;根据应用程序和内核的交互方式 同步 异步 陈硕&#xff1a;在处理 IO …...

编程日记 2023/9/8 2:49:48

为什么大家会觉得考PMP没用？

一是在于PMP这套知识体系&#xff0c;是一套底层的项目管理逻辑框架&#xff0c;整体是比较抽象的。大家在学习工作之后&#xff0c;会有人告诉你很多职场的一些做事的规则&#xff0c;比如说对于沟通&#xff0c;有人就会告诉如何跟客户沟通跟同事相处等等&#xff0c;这其实就…...

编程日记 2023/9/8 2:48:47

AVR128单片机 USART通信控制发光二极管显示

一、系统方案 二、硬件设计 原理图如下&#xff1a; 三、单片机软件设计 1、首先是系统初始化 void port_init(void) { PORTA 0xFF; DDRA 0x00;//输入 PORTB 0xFF;//低电平 DDRB 0x00;//输入 PORTC 0xFF;//低电平 DDRC 0xFF;//输出 PORTE 0xFF; DDRE 0xfE;//输出 PO…...

编程日记 2023/9/8 2:47:46

为什么5G 要分离 CU 和DU？（4G分离RRU 和BBU）

在 Blog 一文中&#xff0c;5G--BBU RRU 如何演化到 CU DU&#xff1f;_5g rru_qq_38480311的博客-CSDN博客 解释了4G的RRU BBU 以及 5G CU DU AAU&#xff0c;主要是讲了它们分别是什么。但是没有讲清楚 为什么&#xff0c;此篇主要回答why。 4G 为什么分离基站为 RRU 和 BBU…...

编程日记 2023/9/8 2:46:45

Python中的数据输入

获取键盘输入 input语句 使用input()可以从键盘获取输入&#xff0c;使用一个变量来接收 print("你是谁&#xff1f;") name input() print(f"我知道了&#xff0c;你是{name}")# print("你是谁&#xff1f;") name input("你是谁&…...

编程日记 2023/9/8 2:45:44

cms系统稳定性压力测试出现TPS抖动和毛刺的性能bug【杭州多测师_王sir】

一、并发线程数100&#xff0c;分10个阶梯&#xff0c;60秒加载时间&#xff0c;运行1小时进行压测&#xff0c;到10分钟就出现如下 二、通过jstat -gcutil 16689 1000进行监控...

编程日记 2023/9/8 2:44:43

【UE】材质描边、外发光、轮廓线

原教学视频链接&#xff1a; ue4 材质描边、外发光、轮廓线_哔哩哔哩_bilibili 步骤 1. 首先新建一个材质&#xff0c;这里命名为“Mat_outLine” 在此基础上创建一个材质实例 2. 在视口中添加一个后期处理体积 设置后期处理体积为无限范围 点击添加一个数组 选择“资产引用”…...

编程日记 2023/9/8 2:43:41

百模大战，打响AI应用生态的新赛点

点击关注 文&#xff5c;郝鑫 黄小艺&#xff0c;编&#xff5c;刘雨琦 “宇宙中心”五道口&#xff0c;又泛起了昔日的光芒。 十字路口一角的华清嘉园里&#xff0c;各种互联网大佬们&#xff0c;王兴、程一笑、张一鸣等人的创业传说似乎还有余音&#xff0c;后脚搬进来的AI…...

编程日记 2023/9/8 2:42:40

PXE安装麒麟Kylin后，我用这个脚本搞定了软件源、远程桌面和sudo免密

PXE安装麒麟Kylin后的高效配置脚本实战指南当你通过PXE完成麒麟Kylin系统的无人值守安装后&#xff0c;系统往往处于"毛坯房"状态——基础框架有了&#xff0c;但离真正的生产环境还有距离。本文将分享一个名为.kylin-post-actions的神奇脚本&#xff0c;它能帮你一键…...

编程新知 2026/5/24 3:39:04

线性化加性模型与子尺度混合：实现概率空间直接可解释的机器学习

1. 项目概述与核心痛点 在金融风控、医疗诊断这些对决策过程要求“看得见、摸得着”的领域&#xff0c;我们这些从业者每天都在和模型的可解释性较劲。你肯定遇到过这种情况&#xff1a;业务方拿着一个逻辑回归模型的风险评分问你&#xff1a;“这个客户的‘历史逾期次数’这个…...

编程新知 2026/5/24 2:17:26

Unity手游Mono堆泄漏：80MB硬限下的静默崩溃真相

1. 这不是GC没跑&#xff0c;是Mono堆在 silently 溢出——一个被90% Unity手游团队忽视的“假稳定”现象你有没有遇到过这样的情况&#xff1a;游戏在编辑器里跑得飞快&#xff0c;Profiler显示GC调用次数极少&#xff0c;内存曲线平滑得像湖面&#xff1b;但一打包到Android真…...

编程新知 2026/5/24 2:17:10

ERR_CONNECTION_REFUSED 根本原因与四步定位法

1. 这个报错不是网络问题&#xff0c;而是本地服务没跑起来的“心跳停止”信号你刚在终端敲下npm run dev&#xff0c;浏览器自动打开http://localhost:3000&#xff0c;页面一片空白&#xff0c;F12 打开 Console&#xff0c;赫然一行红字&#xff1a;Failed to load resource…...

编程新知 2026/5/24 2:07:04

集团首都公报：武汉市放飞炬人产业引导基金有限责任公司财政处批准 《武汉市放飞炬人产业引导基金有限责任公司财政处现金顾问制条令》

集团首都公报&#xff1a;武汉市放飞炬人产业引导基金有限责任公司财政处批准 《武汉市放飞炬人产业引导基金有限责任公司财政处现金顾问制条令》...

编程新知 2026/5/24 1:46:08

Hexo 排坑记：删除所有文章后首页无法访问（Cannot GET）

背景 最近在使用 Hexo Butterfly 主题搭建个人博客时&#xff0c;遇到一个奇怪的问题&#xff1a;我把 source/_posts 下的所有文章都删掉后&#xff0c;重新生成并启动本地服务器&#xff0c;访问 http://localhost:4000 竟然直接显示 Cannot GET /&#xff0c;首页完全打不开…...

编程新知 2026/5/24 1:29:36

类和对象概括

类与对象的概念在Java中&#xff0c;类是对象的模板或蓝图&#xff0c;定义了对象的属性和行为。对象是类的实例&#xff0c;具有类定义的属性和方法。类的定义类通过class关键字定义&#xff0c;包含成员变量&#xff08;属性&#xff09;和方法&#xff08;行为&#xff09;。…...

编程新知 2026/5/24 1:22:34

Claude API文档不是说明书，而是契约：用Swagger UI+Postman Collection+TypeScript SDK三件套构建零歧义协作协议

更多请点击&#xff1a; https://kaifayun.com 第一章&#xff1a;Claude API文档不是说明书&#xff0c;而是契约 Claude API 文档的本质并非操作指南或功能速查手册&#xff0c;而是一份具有技术约束力的**双向契约**——它明确定义了客户端与 Anthropic 服务之间在请求结构…...

编程新知 2026/5/24 1:09:10

小波分析多尺度数据融合算法应用【附算法】

✨ 长期致力于小波分析、多尺度数据融合、MEMS陀螺、Allan方差研究工作&#xff0c;擅长数据搜集与处理、建模仿真、程序编写、仿真设计。 ✅ 专业定制毕设、代码 ✅ 如需沟通交流&#xff0c;点击《获取方式》 &#xff08;1&#xff09;小波域多尺度融合定理证明与算法框架&a…...

编程新知 2026/5/24 1:01:03

LeetCode 1314：矩阵区域和 | 二维前缀和

LeetCode 1314&#xff1a;矩阵区域和 | 二维前缀和 引言 矩阵区域和&#xff08;Matrix Block Sum&#xff09;是 LeetCode 第 1314 题&#xff0c;难度为 Medium。题目要求计算矩阵中以每个元素为中心、KK 子矩阵区域的元素和。这道题是二维前缀和的经典应用&#xff0c;展…...

编程新知 2026/5/24 0:56:51