当前位置： 首页 > news >正文

【深度学习基础】

news 2026/5/19 11:32:10

打基础日常记录

  • CNN基础知识
    • 1. 感知机
    • 2. DNN 深度神经网络（全连接神经网络）
      • DNN 与感知机的区别
      • DNN特点，全连接神经网络
      • DNN前向传播和反向传播
    • 3. CNN结构【提取特征+分类】
    • 4. CNN应用于文本
  • RNN基础
    • 1. RNN的本质
  • 词向量模型word2Vec
    • 1. 自然语言处理需要解决的问题
    • 2. 如何解决上述问题
    • 3. 词向量是什么（训练成词向量）
    • 4. 神经网络做什么？
    • 5. 模型如何去训练词向量
    • 6. 构建训练数据
    • 7. 浩大的语料库中，

CNN基础知识

1. 感知机

单层感知机就是一个二分类器，接收输入向量，输出分类结果，先进行线性加权，再进行激活函数的非线性转换，就相当于是一个小模型，里面的权重w和b是模型的参数
参考1
图1
参考2
在这里插入图片描述

2. DNN 深度神经网络（全连接神经网络）

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

DNN 与感知机的区别

在这里插入图片描述

DNN特点，全连接神经网络

在这里插入图片描述

DNN前向传播和反向传播

在这里插入图片描述

3. CNN结构【提取特征+分类】

3.1 CNN特有的卷积层，
3.2 卷积层自带卷积核和relu激活函数，
3.3 CNN特有的池化层（池化层没有激活函数）
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

4. CNN应用于文本

在这里插入图片描述

RNN基础

1. RNN的本质

常用在NLP中，应为NLP是处理语句的，语句之间有先后顺序，RNN可以在预测中加入先后顺序的信息
在这里插入图片描述
–分割线–
在这里插入图片描述
–分割线–
在这里插入图片描述
–分割线–

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

词向量模型word2Vec

把单词转换成向量，也就是一个一个的数值，计算机知道这些数值的含义，人类不需要理解

1. 自然语言处理需要解决的问题

  1. 单词之间应该有先后的顺序，而不是用词频；
  2. 意思相近的单词在空间中的表示也应该相近；

2. 如何解决上述问题

  1. 把单词变成向量，计算两个向量之间的相似度；（解决问题2）

3. 词向量是什么（训练成词向量）

词向量就是在规定的维度内，通常是50-300维度，把单词变成数值，计算机可以认识
在这里插入图片描述
在这里插入图片描述

4. 神经网络做什么？

输入两个单词，预测第三个单词

5. 模型如何去训练词向量

  1. 先有一个词向量库（随机初始化的），Look up embedding, 从中查找到输入词的向量，词向量输入到网络中，预测下一个词向量是什么，通过loss更新网络的权重参数以及词向量库
    在这里插入图片描述
    词训练数据库，是任何正常说话的逻辑数据都可以当成训练数据

6. 构建训练数据

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

7. 浩大的语料库中，

在这里插入图片描述

相关文章：

【深度学习基础】

打基础日常记录 CNN基础知识1. 感知机2. DNN 深度神经网络（全连接神经网络）DNN 与感知机的区别DNN特点，全连接神经网络DNN前向传播和反向传播 3. CNN结构【提取特征分类】4. CNN应用于文本 RNN基础1. RNN的本质 词向量模型word2Vec1. 自然语言…...

编程日记 2024/4/9 1:27:45

银行业架构网络BIAN (Banking IndustryArchitecture Network)详细介绍

BIAN ( The Banking Industry Architecture Network) 是一个业界多方协作的非营利性组织，由全球领先银行、技术提供商、顾问和学者组成，定义了一个用以简化和标准化核心银行体系结构的银行技术框架。这一框架基于面向服务的架构 (SOA) 原则，银…...

编程日记 2024/4/9 1:26:44

[尚硅谷 flink] 基于时间的合流——双流联结（Join）

文章目录 8.1 窗口联结（Window Join）8.2 **间隔联结（Interval Join）** 8.1 窗口联结（Window Join） Flink为基于一段时间的双流合并专门提供了一个窗口联结算子，可以定义时间窗口，并…...

编程日记 2024/4/9 1:24:41

怎样恢复已删除的照片？教你3个方法，一键恢复！

很多人喜欢以拍照的形式记录生活，手机里的照片就很容易堆积成山，但当内存不够用时就不得不选择删除。可是这些美好的照片始终是很多人心中抹不去的记忆，那么该怎样恢复已删除的照片呢？下面几招，教你一键恢复&#xff0…...

编程日记 2024/4/9 1:20:38

植物糖基转移酶数据库-23年-地表最强系列-文献精读-6

pUGTdb: A comprehensive database of plant UDP-dependent glycosyltransferases pUGTdb：植物UDP依赖糖基转移酶的全面数据库 一篇关于植物糖基转移数据库的综述，地表最强，总结的最全面的版本之一，各位看官有推荐请留言评论区~…...

编程日记 2024/4/9 1:19:35

虚拟机打不开

问题 另一个程序已锁定文件的一部分，进程无法访问 打不开磁盘“G:\centeros\hadoop104kl\hadoop100-cl2.vmdk”或它所依赖的某个快照磁盘。 模块“Disk”启动失败。 未能启动虚拟机。 原因 前一次非正常关闭虚拟机导致.lck 文件是VMWare软件的一种磁盘锁文件&…...

编程日记 2024/4/9 1:16:32

MySQL数据库版本为5.5.62，时间戳超出2038年1月19日的解决方案

MySQL数据库版本是 5.5.62，已设置字段的类型为BIGINT，使用FROM_UNIXTIME()函数来转换时间戳，返回NULL。 SELECT FROM_UNIXTIME(1617970800)SELECT FROM_UNIXTIME(2185743121)MySQL数据库版本为5.5.62，已设置字段的类型为BIGINT&a…...

编程日记 2024/4/9 1:15:31

C++20 semaphore(信号量) 详解

头文件在C20中是并发库技术规范（Technical Specification, TS）的一部分。信号量是同步原语，帮助控制多线程程序中对共享资源的访问。头文件提供了标准C方式来使用信号量。 使用环境 Windows：VS中打开项目属性，修改C语…...

编程日记 2024/4/9 1:10:26

【简单讲解下Lisp的学习历程】

🎥博主：程序员不想YY啊 💫CSDN优质创作者，CSDN实力新星，CSDN博客专家 🤗点赞🎈收藏⭐再看💫养成习惯 ✨希望本文对您有所裨益，如有不足之处，欢迎在评论区提出…...

编程日记 2024/4/9 1:05:21

构建高效网络：深入理解正向与反向代理的作用与配置

正向代理 如果把局域网外的互联网环境想象成一个巨大的资源库，则局域网中的客户端要访问互联网则需要通过代理服务器来访问，这种代理成为正向代理。 示例： 用户想要访问 https://chensir.ink （目标服务器）&#xff0…...

编程日记 2024/4/9 1:02:17

Linux：make/makefile的使用

一、什么是makefile/make 会不会写makefile，从一个侧面说明了一个人是否具备完成大型工程的能力 一个工程中的源文件不计数，其按类型、功能、模块分别放在若干个目录中，makefile定义了一系列的 规则来指定，哪些文件需要先编译&am…...

编程日记 2024/4/9 1:01:16

Java设计模式—策略模式（商场打折）

策略这个词应该怎么理解，打个比方说，我们出门的时候会选择不同的出行方式，比如骑自行车、坐公交、坐火车、坐飞机、坐火箭等等，这些出行方式，每一种都是一个策略。 再比如我们去逛商场，商场现在正在搞活动&…...

编程日记 2024/4/9 0:59:14

FOR循环

oracle从入门到总裁:​​​​​​https://blog.csdn.net/weixin_67859959/article/details/135209645 前面两种循环都要根据条件是否成立而确定循环体的执行，具体循环体执行多少次事先并不知道。 FOR 循环可以控制循环执行的次数，由循环变量控制循环体的…...

编程日记 2024/4/9 0:56:09

C++： 命名空间/C++输入输出/缺省参数/函数重载/引用/内联函数

进入C以后，就翻开了新的篇章。C支持C语言的使用。事实上，C是创建者在发现C语言中有很多不好用的地方（在后续学习中会明显看到）后，在C语言基础上又加入了许多语法，于是就成了C。 1.命名空间 来源&#xff…...

编程日记 2024/4/9 0:53:07

Java | Leetcode Java题解之第13题罗马数字转整数

题目&#xff1a; 题解&#xff1a; class Solution {Map<Character, Integer> symbolValues new HashMap<Character, Integer>() {{put(I, 1);put(V, 5);put(X, 10);put(L, 50);put(C, 100);put(D, 500);put(M, 1000);}};public int romanToInt(String s) {int …...

编程日记 2024/4/9 0:42:57

题目：学习使用register定义变量的方法。

题目&#xff1a;学习使用register定义变量的方法。 There is no nutrition in the blog content. After reading it, you will not only suffer from malnutrition, but also impotence. The blog content is all parallel goods. Those who are worried about being cheated …...

编程日记 2024/4/9 0:41:56

IO_DAY7

1:实现2个终端之间的互相聊天 要求:千万不要做出来2个终端之间的消息发送是读一写的&#xff0c;一定要能够做到&#xff0c;一个终端发送n条消息&#xff0c;另一个终端一条消息都不回复都是没有问题的 终端A&#xff1a; #include<myhead.h> int main(int argc, char…...

编程日记 2024/4/9 0:40:55

大模型学习笔记八：手撕AutoGPT

文章目录 一、功能需求二、演示用例三、核心模块流程图四、代码分析1&#xff09;Agent类目录创建智能体对象2&#xff09;开始主流程3&#xff09;在prompt的main目录输入主prompt和最后prompt4&#xff09;增加实际的工具集tools&#xff08;也就是函数&#xff09;5&#xf…...

编程日记 2024/4/9 0:39:54

Java常用API_System——常用方法及代码演示

1.System.exit(int status) 方法的形参int status为状态码&#xff0c;如果是0&#xff0c;说明虚拟机正常停止&#xff0c;如果非0&#xff0c;说明虚拟机非正常停止。需要将程序结束时可以调用这个方法 代码演示&#xff1a; public class Test {public static void main(S…...

编程日记 2024/4/9 0:37:52

neo4j图数据库下载安装配置

neo4j下载地址Index of /doc/neo4j/3.5.8/ 1.说明&#xff1a;jdk 1.8 版本对应的 neo4j 数据库版本 推荐安装3.X版本 2.配置系统环境变量 3.启动 neo4j.bat console 4.访问...

编程日记 2024/4/9 0:36:51

从新手到认证专家：NotebookLM总结能力跃迁路径图（含Google官方未公开的评估矩阵V2.1）

更多请点击&#xff1a; https://intelliparadigm.com 第一章&#xff1a;NotebookLM总结能力跃迁路径总览 NotebookLM 是 Google 推出的面向研究者与开发者的情境化 AI 助手&#xff0c;其核心突破在于将用户上传的文档&#xff08;PDF、TXT、Google Docs&#xff09;转化为可…...

编程新知 2026/5/19 11:13:52

从 JetBrains 全家桶用户视角，聊聊 DataGrip 那些被低估的『协同』技巧：共享查询、布局同步与团队规范

从 JetBrains 全家桶用户视角&#xff0c;聊聊 DataGrip 那些被低估的『协同』技巧&#xff1a;共享查询、布局同步与团队规范 在团队开发环境中&#xff0c;数据库操作往往被视为个人技能而非团队资产。当开发者频繁切换于 IntelliJ IDEA、PyCharm 和 DataGrip 之间时&#xf…...

编程新知 2026/5/19 9:47:59

终极免费方案：如何用Wand-Enhancer解锁WeMod高级功能完整指南

终极免费方案&#xff1a;如何用Wand-Enhancer解锁WeMod高级功能完整指南 【免费下载链接】Wand-Enhancer Advanced UX and interoperability extension for Wand (WeMod) app 项目地址: https://gitcode.com/gh_mirrors/we/Wand-Enhancer 你是否厌倦了WeMod免费版的种种…...

编程新知 2026/5/19 8:39:03

（二）OpenOFDM频偏校正：从原理到实现的信号修复之旅

1. 当信号开始"跳舞"&#xff1a;认识频偏问题 第一次调试无线接收链路时&#xff0c;我看到示波器上的星座图像被熊孩子打翻的跳棋——本该整齐排列的16-QAM信号点&#xff0c;现在像喝醉了一样在屏幕上乱转。这种"信号跳舞"的现象&#xff0c;就是我们今…...

编程新知 2026/5/19 6:18:19

销售跟进转任务，4个实操标准帮你高效交接无遗漏

不少销售朋友反馈&#xff0c;调岗、离职或带新人交接跟进任务时&#xff0c;常出现信息杂乱、关键内容遗漏的问题&#xff0c;要么仅提供大量聊天记录和录音&#xff0c;接手人难以快速找到重点&#xff0c;要么遗漏客户特殊要求、过往承诺&#xff0c;最终导致丢单、承担责任…...

编程新知 2026/5/19 5:36:27

高维光谱数据分析研究与光谱型纳米流式检测系统数据采集处理软件的开发与化学生物学应用【附代码】

✨ 长期致力于光谱型纳米流式检测技术、光谱解耦算法、降维算法、免疫分型、细菌自发荧光研究工作&#xff0c;擅长数据搜集与处理、建模仿真、程序编写、仿真设计。 ✅ 专业定制毕设、代码 ✅ 如需沟通交流&#xff0c;点击《获取方式》 &#xff08;1&#xff09;基于泊松回归…...

编程新知 2026/5/19 5:13:00

日期时间数据在数据分析中的实际应用

下面的内容摘录自《用R探索医药数据科学》专栏文章的部分内容&#xff08;原文6364字&#xff09;。 2篇2章16节&#xff1a;R 语言中日期时间数据的关键处理要点_r语言从数字转为日期-CSDN博客 一、日期时间数据的概念 二、获取当前日期和时间 三、日期时间数据的转换与处理…...

编程新知 2026/5/19 4:31:52

充电桩源头厂家怎么选？五大核心维度教你精准选型

充电桩源头厂家怎么选&#xff1f;五大核心维度教你精准选型新能源充电基础设施建设进入高速发展期&#xff0c;物业、城投、能源企业、物流园区等采购方在选择充电桩源头厂家时&#xff0c;往往陷入“品牌多、难分辨、怕踩坑”的困境&#xff1a;贴牌组装产品质量无保障、小厂…...

编程新知 2026/5/19 4:14:46

告别AI效果波动！掌握“输入供给系统“让模型稳定输出，成本可控

文章指出传统AI系统开发路径固定但效果不稳定&#xff0c;核心问题是模型输入供给无序。文章提出Context Engineering&#xff08;上下文工程&#xff09;是构建可控输入供给系统的关键&#xff0c;强调其本质是工程链路而非功能模块。文章系统阐述了输入供给系统的四类问题&am…...

编程新知 2026/5/19 4:14:45

知识图谱冷启动失败率高达68%？NotebookLM构建中的3类隐性数据断层及实时修复方案

更多请点击&#xff1a; https://intelliparadigm.com 第一章&#xff1a;NotebookLM知识图谱构建的冷启动困境本质 NotebookLM 作为 Google 推出的基于文档理解的 AI 助手&#xff0c;其核心能力依赖于对用户上传文档构建结构化知识图谱。然而在初始阶段&#xff0c;系统面临…...

编程新知 2026/5/18 23:20:31