当前位置： 首页 > news >正文

深度学习好文记录，反复学习

news 2026/4/1 19:45:29

recent update time：2023.12.2

深度学习入门 - 知乎、这本书也很好，作者写的专栏不错。

机器学习，深度学习一些好文_一只菜得不行的鸟的博客-CSDN博客

卷积神经网络学习路线（五）| 卷积神经网络参数设置，提高泛化能力？_"eval_type\":\"pr"-CSDN博客

一文读懂官方给出torch.nn.RNN API的参数及手写RNN API复现_nn.rnn参数-CSDN博客

关于BN折叠的问题

使用Batch Normalization折叠来加速模型推理-CSDN博客

BN层和前一层（Conv，Linear）

通常，在batch normalization层之前的层中是没有bias的，因为这是无用的，也是对参数的浪费，因为任何常数都会被batch normalization抵消掉。

在深度神经网络中，有时在 Batch Normalization 层之前的线性层（例如全连接层或卷积层）会被设计为没有偏置（bias）。这样的设计是有一些原因的，尤其是在使用 Batch Normalization 时：

Batch Normalization的效果： Batch Normalization 在其操作中包含了均值的减去和方差的除以等操作，这些操作本身具有平移和缩放的效果。如果在 Batch Normalization 层之前加上了偏置，它的作用在某种程度上会被 Batch Normalization 的操作所抵消，从而可能减弱 Batch Normalization 的效果。

BN

标准化与归一化_标准化和归一化_Weber77的博客-CSDN博客

ML领域更常使用标准化，如果数据不为稳定，存在极端的最大最小值，不要用归一化。z值归一化=标准化

BN可以省去dropout，L1, L2等正则化处理方法.

这人写的都不错：

Transformer 相关理解（上）_向量内积 相似性-CSDN博客

相关文章：

深度学习好文记录，反复学习

recent update time：2023.12.2 深度学习入门 - 知乎、这本书也很好，作者写的专栏不错。 机器学习，深度学习一些好文_一只菜得不行的鸟的博客-CSDN博客 卷积神经网络学习路线（五）| 卷积神经网络参数设置，提…...

编程日记 2023/12/3 11:04:49

CSS浅谈动画性能

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录 目的一、举个栗子二、性能分析1.从图层分析2.性能分析 总结 目的 为了探究使用动画时，『transform』和『width、height、margin等』的差异 一、举个栗子…...

编程日记 2023/12/3 11:03:48

万能的视频格式播放器

今天博主给大家带来一款“万能”的视频播放器——VLC Media Player，支持的文件格式非常多，大家快来一起看看吧！ VLC Media Player 是一款可播放大多数格式，而无需安装编解码器包的媒体播放器。可以播放 MPEG-1、MPEG-2、MPEG-4、D…...

编程日记 2023/12/3 11:02:47

设计模式---第五篇

系列文章目录 文章目录 系列文章目录前言一、知道观察者模式吗？前言 前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默，忍不住分享一下给大家。点击跳转到网站，这篇文章男女通用，看懂了就去分享给你的码吧。 一、知道观察者模式吗？ 答：观察者模式是定义对…...

编程日记 2023/12/3 11:01:46

.NET8构建统计Extreme Optimization Numerical Libraries

为 .NET 8 构建统计应用程序 Extreme Optimization Numerical Libraries for .NET V8.1.22 添加了对 .NET 8 的支持，使您可以使用最新版本的 Microsoft 平台。 Extreme Optimization Numerical Libraries for .NET 是通用数学和统计类的集合，为技术和统计…...

编程日记 2023/12/3 11:00:45

07-原型模式-C语言实现

原型模式： Specify the kinds of objects to create using a prototypical instance,and create new objects by copying this prototype.（用原型实例指定创建对象的种类， 并且通过拷贝这些原型创建新的对象。 ） UML图&#xff1…...

编程日记 2023/12/3 10:57:43

深度学习与深度迁移学习有什么区别？

深度学习包含深度迁移学习，它们都利用了深层神经网络（Deep Neural Network，DNN）来处理数据，并从中学习特征。但是，它们也有一些区别。 深度学习是一种机器学习方法，它通过多层神经网络来自动学…...

编程日记 2023/12/3 10:56:42

创建Asp.net MVC项目Ajax实现视图页面数据与后端Json传值显示

简述回顾 继上篇文章创建的mvc传值这里说明一下Json传值。在mvc框架中，不可避免地会遇到前台传值到后台，前台接收后台的值的情况（前台指view，后台指controller），有时只需要从控制器中返回一个处理的结果&a…...

编程日记 2023/12/3 10:55:41

1089 Insert or Merge （插入排序，相邻归并排序，附模拟实现）

注意点1：判断插入排序不能从头开始判断是否为目标数组， 比如：初始为1 2 3 4 3，目标数组也为1 2 3 4 3，则如果是从头开始推的，则下一步会变成1 2 3 4 3，而下一步应该是 1 2 3 3 4。所以我们应该…...

编程日记 2023/12/3 10:53:40

基于算能的国产AI边缘计算盒子8核心A53丨17.6Tops算力

边缘计算盒子 8核心A53丨17.6Tops算力 ● 可提供17.6TOPS（INT8）的峰值计算能力、2.2TFLOPS（FP32）的高精度算力，单芯片最高支持32路H.264 & H.265的实时解码能力。 ● 适配Caffe/TensorFlow/MxNet/PyTorch/ ONNX/…...

编程日记 2023/12/3 10:52:39

Eaxyx 让圆球跟随鼠标移动

如果出现2023，代表配置成功: 进入Eaxy官方网站，点击文档： 选择 函数->绘图函数->initgraph: 可以看见initgraph（）函数有如下三个参数: 现在我们想生成一个1280*720大小的窗口： 我们需写如下代码: 但…...

编程日记 2023/12/3 10:50:37

Node.js 事件循环：定时任务、延迟任务和 I/O 事件的艺术

🤍 前端开发工程师（主业）、技术博主（副业）、已过CET6 🍨 阿珊和她的猫_CSDN个人主页 🕠 牛客高级专题作者、在牛客打造高质量专栏《前端面试必备》 🍚 蓝桥云课签约作者、已在蓝桥云…...

编程日记 2023/12/3 10:49:36

陪诊系统：基于自然语言处理的患者沟通创新

医疗领域的数字化转型正日益引入创新技术，其中基于自然语言处理（NLP）的陪诊系统成为提升患者沟通的一项关键技术。本文将深入研究这一领域，介绍陪诊系统如何借助NLP实现患者沟通的创新，并提供一个简单的Python代码示例…...

编程日记 2023/12/3 10:47:35

实用攻略——SD-WAN网络配置步骤详解

SD-WAN（软件定义广域网）作为一种新兴的网络技术，被广泛应用于构建高效、可靠的企业组网。 本文将详细介绍企业组网中SD-WAN涉及的配置过程，并提供一些配置技巧，以帮助企业快速了解企业组网的配置。通过使用SD-WAN技术&…...

编程日记 2023/12/3 10:45:33

​无人机摄影测量

无人机摄影测量技术是传统航空摄影测量手段的有力补充，具有机动灵活、高效快速、精细准确、作业成本低、生产周期短、影像获取空间分辨率高、高危地区探测等优势。无人机与航空摄影测量相结合使得“无人机数字低空遥感”成为航空遥感领域的一个崭新发展方向。无人机…...

编程日记 2023/12/3 10:44:32

对el-select封装成组件使用

效果与直接使用el-select一样&#xff0c;多处用el-select显得代码冗余就进行了封装 效果图&#xff1a; el-select封装&#xff1a; <template><div class"my-select"><el-selectv-model"person.modelValue":placeholder"placehold…...

编程日记 2023/12/3 10:42:31

pytorch 多卡并行训练

目录 设置参数&#xff1a; 训练时参数&#xff1a; 调用命令&#xff1a; 设置参数&#xff1a; import argparseparser argparse.ArgumentParser()parser.add_argument(--batch_size, typeint, default64, helpBatch size for training)parser.add_argument(--local_rank…...

编程日记 2023/12/3 10:39:28

C# Bin、XML、Json的序列化和反序列化

1&#xff09;序列化前的准备 声明类&#xff1a; [Serializable]public class BandItem{//JsonIgnore&#xff1a;当不想把某字段值序列化到Json时使用//[JsonIgnore]public string Name { get; set; }public string MusicStyle { get; set; }public string Masterpiece { ge…...

编程日记 2023/12/3 10:38:28

mediapipe+opencv实现保存图像中的人脸，抹去其他信息

mediapipeopencv MediaPipe本身不提供图像处理功能&#xff0c;它主要用于检测和跟踪人脸、手势、姿势等。如果您想要从图像中仅提取人脸主要信息并去除其他信息. # codingutf-8 """project: teatAuthor&#xff1a;念卿 刘file&#xff1a; test.pydate&…...

编程日记 2023/12/3 10:37:27

clickhouse的向量化执行

背景 clickhouse快的很大一部分原因来源于数据的向量化执行&#xff0c;本文就来看一下向量化执行和正常标量执行的区别 SIMD的向量化执行 从上图可知&#xff0c;clickhouse通过SIMD指令可以做到一个cpu周期操作两个向量的运算操作&#xff0c;比起普通的cpu指令效率提高了N…...

编程日记 2023/12/3 10:35:25

别再死磕英文手册了！手把手带你用Lisflood-FP跑通第一个洪水模拟案例（附T001_buscot实战）

从零到一&#xff1a;Lisflood-FP洪水模拟实战指南&#xff08;T001_buscot案例详解&#xff09; 刚接触水文模型的研究者常被英文手册劝退——密密麻麻的公式、晦涩的术语、复杂的参数配置让人望而生畏。其实&#xff0c;掌握Lisflood-FP的关键不在于死磕理论&#xff0c;而在…...

编程新知 2026/4/1 19:37:12

Phi-4-mini-reasoning 128K上下文应用创新：法律条文交叉引用推理案例

Phi-4-mini-reasoning 128K上下文应用创新&#xff1a;法律条文交叉引用推理案例 1. 模型简介与核心能力 Phi-4-mini-reasoning 是一个轻量级开源模型&#xff0c;专注于高质量推理任务。作为Phi-4模型家族成员&#xff0c;它通过合成数据训练和微调&#xff0c;特别擅长处理…...

编程新知 2026/4/1 19:07:00

实战指南：基于快马平台与Playwright打造自动化的网站内容监测应用

今天想和大家分享一个非常实用的自动化监测方案——基于Playwright和InsCode(快马)平台搭建的新闻网站更新监测系统。这个项目特别适合需要追踪行业动态或竞品资讯的朋友&#xff0c;整个过程不需要复杂的服务器配置&#xff0c;用快马平台就能轻松实现部署和定时运行。 项目背…...

编程新知 2026/4/1 18:06:09

SlimSAS连接器在高密度存储系统中的关键应用与优化策略

1. SlimSAS连接器为何成为高密度存储的"黄金搭档"&#xff1f; 第一次接触SlimSAS连接器是在去年部署全闪存阵列时。当时机柜里密密麻麻的线缆让我头疼不已&#xff0c;直到工程师拿出这个火柴盒大小的连接器&#xff0c;我才意识到高密度布线的革命真的来了。SlimS…...

编程新知 2026/4/1 17:20:34

文华财经与博易大师双轨期货多空变色线指标实战解析

1. 双轨期货多空变色线指标是什么&#xff1f; 如果你经常使用文华财经或博易大师进行期货交易&#xff0c;一定对主图上的各种技术指标不陌生。今天要介绍的这个双轨期货多空变色线指标&#xff0c;可以说是趋势交易者的"秘密武器"。简单来说&#xff0c;它就像给K线…...

编程新知 2026/4/1 16:53:18

避坑指南：YOLOv8+PaddleOCR车牌识别中，那些让你识别率暴跌的细节

避坑指南&#xff1a;YOLOv8PaddleOCR车牌识别中那些让你识别率暴跌的细节 车牌识别系统在智慧交通、安防监控等领域的应用越来越广泛&#xff0c;但很多工程师在部署YOLOv8PaddleOCR方案时&#xff0c;明明按照教程一步步操作&#xff0c;实际识别效果却远不如预期。本文将揭…...

编程新知 2026/4/1 16:41:03

Java应用内存泄漏排查实战：MAT工具从入门到精通（附常见问题解析）

Java应用内存泄漏排查实战&#xff1a;MAT工具从入门到精通 引言&#xff1a;为什么我们需要关注内存泄漏&#xff1f; 记得去年我们团队接手的一个电商项目吗&#xff1f;上线三个月后&#xff0c;系统开始频繁出现OOM&#xff08;OutOfMemoryError&#xff09;错误。每次重启…...

编程新知 2026/4/1 16:20:41

实战演练：基于Copaw下载的博客代码，在快马平台上快速构建并部署可访问的全栈应用

今天想和大家分享一个实战经验&#xff1a;如何基于Copaw下载的代码&#xff0c;在InsCode(快马)平台上快速构建并部署一个全栈博客应用。整个过程非常流畅&#xff0c;特别适合想快速验证想法的开发者。 项目背景与需求分析 最近在Copaw上找到一个博客系统的代码骨架&#x…...

编程新知 2026/4/1 15:34:11

当企业规模增长后，IT管理为什么越来越“失控”？

在企业早期&#xff0c;IT 管理往往是“够用就好”。 一套简单的工单工具、一份资产台账、几个人工流程&#xff0c;就足以支撑日常运转。但当企业规模逐渐扩大&#xff0c;员工数量增长、系统复杂度提升、业务节奏加快时&#xff0c;原本“还能用”的 IT 管理方式&#xff0c;…...

编程新知 2026/4/1 15:07:30

SimCLR揭秘：自监督学习中的对比学习艺术

1. 自监督学习与对比学习的革命性结合 第一次听说SimCLR这个名词时&#xff0c;我正被海量无标注图像数据的处理问题困扰。传统监督学习需要大量人工标注&#xff0c;成本高得吓人。而SimCLR的出现&#xff0c;就像给计算机视觉领域投下了一颗震撼弹——原来模型可以自己教自己…...

编程新知 2026/4/1 14:41:08