当前位置： 首页 > news >正文

机器学习笔记：李宏毅diffusion model

news 2026/4/11 0:29:25

1 概念原理

  • 首先sample 一个都是噪声的vector
  • 然后经过denoise network 过滤一些杂质
  • 接着继续不断denoise，直到最后出来一张清晰图片

  • 【类似于做雕塑，一开始只是一块石头（噪声很杂的雕塑），慢慢雕刻出想要的花纹】

 

 

  • 同一个denoise network的模型反复使用
  • 但每一个stage输入的图片的状况差异很大
  • ——>完全是同一个模型效果不一定好

  • denoise network还多需要一个输入，野鸡现在denoise的阶段
    • 1表示denoise快结束了的阶段
    • 1000表示刚开始denoise的阶段

2   denoise内部原理

  •  预测图片里面的噪声长什么样
  • 输入图片减去输出的噪声，得到这一轮去噪后的图片
    • 预测noise的原因：产生图片和产生noise 难度是不一样的

2.1 noise predictor的ground truth

那么如何训练noise predictor，换句话说，怎么找到ground-truth呢

 

  •  从资料库中拿出图片
  • 再从高斯分布/或者其他分布中产生噪声
  • 将这个噪声加入图片中，就有了带噪声的图片

 这样就形成了一对一对的 输入和ground-truth ，供noise predictor 训练

3 用文字生成图片

如果我们是提供给diffusion model 文字，让他生成图片

 整体的框架没有多少变化，就是 denoise model 输入多了一个文字的vector

 

 

相关文章：

机器学习笔记：李宏毅diffusion model

1 概念原理 首先sample 一个都是噪声的vector然后经过denoise network 过滤一些杂质接着继续不断denoise，直到最后出来一张清晰图片 【类似于做雕塑，一开始只是一块石头（噪声很杂的雕塑），慢慢雕刻出想要的花纹】 同一个…...

编程日记 2023/8/14 17:13:19

STM32--TIM定时器（2）

文章目录 输出比较PWM输出比较通道参数计算舵机简介直流电机简介TB6612 PWM基本结构PWM驱动呼吸灯PWM驱动舵机PWM控制电机 输出比较 输出比较，简称OC（Output Compare）。 输出比较的原理是，当定时器计数值与比较值相等或者满足某种…...

编程日记 2023/8/14 17:12:19

git Authentication failed

情况是这样的，之前看代码只是clone了一份，但随着分支越来越多，有时候切换分支时必须先把修改的代码 stash 一下，觉得很麻烦，于是又clone了一份代码。然后pull代码是正常的，当push 代码的时候，去…...

编程日记 2023/8/14 17:11:17

【软考】2023系统架构设计师考试

目录 1 软考资格设置 2 考试报名 3 考试准备 4 参加考试 5 考试感受 6 其他 1 软考资格设置 2 考试报名 报名网址：https://www.ruankao.org.cn/ 3 考试准备 4 参加考试 2023年下半年系统架构设计师考试时间为11月4、5日。 5 考试感受 6 其他 最近好像有地区…...

编程日记 2023/8/14 17:10:16

opencv基础55-获取轮廓的特征值及示例

轮廓自身的一些属性特征及轮廓所包围对象的特征对于描述图像具有重要意义。本节介绍几个轮廓自身的属性特征及轮廓所包围对象的特征。 宽高比 可以使用宽高比（AspectRation）来描述轮廓，例如矩形轮廓的宽高比为： 宽高比 宽度&am…...

编程日记 2023/8/14 17:09:15

OpenCV图像处理——形态学操作

目录 连通性形态学操作腐蚀和膨胀开闭运算礼帽和黑帽 连通性 形态学操作 形态学转换是基于图像形状的一些简单操作。它通常在二进制图像上执行。腐蚀和膨胀时两个基本的形态学运算符。然后它的变体形式如开运算，闭运算，礼帽黑帽等 腐蚀和膨胀 cv.erode…...

编程日记 2023/8/14 17:08:13

修改VS Code终端的显示行数

文章目录 前言修改VS Code终端显示行数参考 前言 在我们使用VS Code运行代码的过程中，有时需要再终端中显示很多的运行过程信息或者结果。然而，VS Code的终端默认显示1000行的内容，随着显示内容的增多，之前的内容就丢失了。为了解…...

编程日记 2023/8/14 17:07:12

C++学习| MFC简单入门

前言：因为接手了CMFC的程序，所以需要对MFC编程方面有所了解。 C之MFC简单入门 MFC相关的概念MFCWIN32QT MFC项目基本操作MFC项目创建MFC项目文件解读界面和代码数据交互——加法器 MFC相关的概念 MFC MFC（Microsoft Foundation Classes微软…...

编程日记 2023/8/14 17:06:10

“一日之际在于晨”，欢迎莅临WAVE SUMMIT上午场：Arm 虚拟硬件早餐交流会

8月16日，盛夏的北京将迎来第九届WAVE SUMMIT深度学习开发者大会。在峰会主论坛正式开启前，让我们先用一份精美的元气早餐，和一场“Arm虚拟硬件交流会”，唤醒各位开发小伙伴的开发魂！ 8月16日，WAVE SUMMIT大…...

编程日记 2023/8/14 17:05:09

leetcode454. 四数相加 II

题目&#xff1a;leetcode454. 四数相加 II 描述&#xff1a; 给你四个整数数组 nums1、nums2、nums3 和 nums4 &#xff0c;数组长度都是 n &#xff0c;请你计算有多少个元组 (i, j, k, l) 能满足&#xff1a; 0 < i, j, k, l < n nums1[i] nums2[j] nums3[k] num…...

编程日记 2023/8/14 17:04:08

PHP证券交易员学习网站mysql数据库web结构apache计算机软件工程网页wamp

一、源码特点 PHP证券交易员学习网站 是一套完善的web设计系统&#xff0c;对理解php编程开发语言有帮助&#xff0c;系统具有完整的源代码和数据库&#xff0c;系统主要采用B/S模式开发。 下载地址https://download.csdn.net/download/qq_41221322/88205549 PHP证券交易员…...

编程日记 2023/8/14 17:03:07

对p-n结/AlGaN/GaN HEMTs中n-GaN掺杂浓度对栅极可靠性的影响

目录 第35届功率半导体器件与集成电路国际研讨会论文集2023年5月28日至6月1日&#xff0c;中国香港南方科技大学电气电子工程系&#xff0c;深圳标题&#xff1a;Impacts of n-GaN Doping Concentration on Gate Reliability of p-n Junction/AlGaN/GaN HEMTs摘要信息解释研究了…...

编程日记 2023/8/14 17:02:06

Mac M2 Pro安装使用Cocoapods

Mac Pro M2安装使用Cocoapods 在新公司要做iOS开发&#xff0c;所以在新电脑上安装Cocoapods 在升级gem&#xff0c;sudo gem update --system&#xff0c;和安装cocoapods时都遇到如下的提示&#xff1a; ERROR: While executing gem ... (Errno::EPERM)Operation not per…...

编程日记 2023/8/14 17:01:05

枚举缓存工具

此文章为笔记&#xff0c;为阅读其他文章的感受、补充、记录、练习、汇总&#xff0c;非原创&#xff0c;感谢每个知识分享者。 文章目录 1. 背景2. 枚举缓存3. 样例展示4. 性能对比5. 总结 本文通过几种样例展示如何高效优雅的使用java枚举消除冗余代码。 1. 背景 枚举在系统…...

编程日记 2023/8/14 17:00:04

【BASH】回顾与知识点梳理（二十五）

【BASH】回顾与知识点梳理 二十五 二十五. 特殊shell、PAM 模块、讯息传递和大量建置账号25.1 特殊shell特殊的 shell, /sbin/nologin 25.2 PAM模块25.3 Linux 主机上的用户讯息传递查询使用者&#xff1a; w, who, last, lastlog使用者对谈&#xff1a; write, mesg, wall使用…...

编程日记 2023/8/14 16:59:02

什么是Node js?什么是React?有什么区别

JavaScript是当今最流行的编程语言之一&#xff0c;它用于开发多种技术&#xff0c;两种这样的技术是Node.js和React。许多学生很难理解Nodejs和React之间的区别。 React和Nodejs之间的主要区别在于它们的使用位置。Nodejs 用于开发应用程序的服务器端&#xff0c;而Reactjs用于…...

编程日记 2023/8/14 16:58:01

使用postman做接口测试

1.接口测试&#xff1a;针对软件对外提供服务的接口的输入输出进行测试&#xff0c;以及接口间相互逻辑的测试&#xff0c;验证接口功能与接口描述文档的一致性 2.接口测试流程&#xff1a; 1&#xff09;获取接口信息&#xff1a;通过接口文档或抓包来获取接口的基本调用方式和…...

编程日记 2023/8/14 16:57:00

VMware Workstation 如何启用复制粘贴

产品&#xff1a;VMware Workstation 16 Pro 版本&#xff1a;16.1.1 build-17801498 我们刚安装好的 VMware Workstation 会发现无法复制粘贴文件到虚拟机中&#xff0c;如下为解决方案&#xff1a; 1.点击 虚拟机&#xff0c;点击 安装 VMware Tools(T)...。 2.虚拟机下面会…...

编程日记 2023/8/14 16:55:59

免费小程序商城搭建之b2b2c o2o 多商家入驻商城 直播带货商城 电子商务b2b2c o2o 多商家入驻商城 直播带货商城 电子商务 bbc

1. 涉及平台 平台管理、商家端&#xff08;PC端、手机端&#xff09;、买家平台&#xff08;H5/公众号、小程序、APP端&#xff08;IOS/Android&#xff09;、微服务平台&#xff08;业务服务&#xff09; 2. 核心架构 Spring Cloud、Spring Boot、Mybatis、Redis 3. 前端…...

编程日记 2023/8/14 16:54:58

VSCode-Python传参数进行Debug

新建demo.py import argparse def parse_args():description "debug example" parser argparse.ArgumentParser(descriptiondescription) help "The path of address"parser.add_argument(--host,help help) parser.add_ar…...

编程日记 2023/8/14 16:53:56

Oracle归档日志爆满急救指南

作为运维工程师&#xff0c;你一定遇到过这样的紧急情况&#xff1a;/oracle/app/archivelog 目录突然爆满&#xff0c;数据库挂起无法写入&#xff0c;业务全线中断。你慌忙执行了网上找到的 DELETE OBSOLETE 命令&#xff0c;却发现磁盘空间纹丝不动 —— 目录里还躺着好几年…...

编程新知 2026/4/10 21:14:20

echarts-gl 网络图布局算法：ForceAtlas2 GPU 加速原理详解

echarts-gl 网络图布局算法&#xff1a;ForceAtlas2 GPU 加速原理详解 【免费下载链接】echarts-gl Extension pack for Apache ECharts, providing globe visualization and 3D plots. 项目地址: https://gitcode.com/gh_mirrors/ec/echarts-gl Apache ECharts GL 作为…...

编程新知 2026/4/10 20:02:37

3步彻底解决ComfyUI-Manager中SVD模型加载失败的NoneType错误

3步彻底解决ComfyUI-Manager中SVD模型加载失败的NoneType错误 【免费下载链接】ComfyUI-Manager ComfyUI-Manager is an extension designed to enhance the usability of ComfyUI. It offers management functions to install, remove, disable, and enable various custom no…...

编程新知 2026/4/10 19:43:51

如何通过Winhance中文版实现Windows系统全面优化与个性化定制

如何通过Winhance中文版实现Windows系统全面优化与个性化定制 【免费下载链接】Winhance-zh_CN A Chinese version of Winhance. C# application designed to optimize and customize your Windows experience. 项目地址: https://gitcode.com/gh_mirrors/wi/Winhance-zh_CN …...

编程新知 2026/4/10 19:41:38

openclaw平替之nanobot源码解析（六）：子智能体（Subagents）试

插件化架构 v3 版本最大的变化是引入了模块化插件系统。此前版本中集成在核心包里的原生功能&#xff0c;现在被拆分成独立的插件。 每个插件都是一个独立的 Composer 包&#xff0c;包含 Swift 和 Kotlin 代码、权限清单以及原生依赖。开发者只需安装实际用到的插件&#xff0…...

编程新知 2026/4/10 18:21:43

哔哩下载姬DownKyi：三步掌握B站视频下载的终极免费工具

哔哩下载姬DownKyi&#xff1a;三步掌握B站视频下载的终极免费工具 【免费下载链接】downkyi 哔哩下载姬downkyi&#xff0c;哔哩哔哩网站视频下载工具&#xff0c;支持批量下载&#xff0c;支持8K、HDR、杜比视界&#xff0c;提供工具箱&#xff08;音视频提取、去水印等&…...

编程新知 2026/4/10 18:10:34

3大优化策略：霞鹜文楷屏幕阅读版字体解决数字时代视觉疲劳难题

3大优化策略&#xff1a;霞鹜文楷屏幕阅读版字体解决数字时代视觉疲劳难题 【免费下载链接】LxgwWenKai-Screen LXGW WenKai for Screen Reading. 项目地址: https://gitcode.com/gh_mirrors/lx/LxgwWenKai-Screen 你是否经常在长时间面对屏幕后感到眼睛干涩、视觉疲劳&…...

编程新知 2026/4/10 16:31:40

Pico App ID配置全攻略：从注册到Unity集成

1. Pico开发者账号注册与准备 第一次接触Pico VR开发的朋友们&#xff0c;注册开发者账号是第一步。我刚开始用Pico开发时&#xff0c;发现国内和海外账号体系是分开的&#xff0c;这点要特别注意。国内开发者直接访问Pico开发者平台官网&#xff0c;点击右上角的"注册&qu…...

编程新知 2026/4/10 14:16:55

数字孪生项目避坑指南：GIS数据对接Cesium三维地球的7个关键步骤

数字孪生项目避坑指南&#xff1a;GIS数据对接Cesium三维地球的7个关键步骤 在智慧城市和工业4.0的浪潮中&#xff0c;数字孪生技术正成为连接物理世界与数字世界的核心纽带。而将GIS地理信息数据无缝对接至Cesium三维地球平台&#xff0c;则是构建高保真数字孪生体的关键技术路…...

编程新知 2026/4/10 14:10:37

5分钟掌握Hanime1Plugin：构建纯净Android动画观影体验的技术方案

5分钟掌握Hanime1Plugin&#xff1a;构建纯净Android动画观影体验的技术方案 【免费下载链接】Hanime1Plugin Android插件(https://hanime1.me) (NSFW) 项目地址: https://gitcode.com/gh_mirrors/ha/Hanime1Plugin Hanime1Plugin是一款专为Android平台设计的动画观影插…...

编程新知 2026/4/10 13:46:46