当前位置： 首页 > news >正文

【深度学习基础】

news 文章来源：https://blog.csdn.net/weixin_44021553/article/details/137240448 2025/5/17 19:58:42

打基础日常记录

  • CNN基础知识
    • 1. 感知机
    • 2. DNN 深度神经网络（全连接神经网络）
      • DNN 与感知机的区别
      • DNN特点，全连接神经网络
      • DNN前向传播和反向传播
    • 3. CNN结构【提取特征+分类】
    • 4. CNN应用于文本
  • RNN基础
    • 1. RNN的本质
  • 词向量模型word2Vec
    • 1. 自然语言处理需要解决的问题
    • 2. 如何解决上述问题
    • 3. 词向量是什么（训练成词向量）
    • 4. 神经网络做什么？
    • 5. 模型如何去训练词向量
    • 6. 构建训练数据
    • 7. 浩大的语料库中，

CNN基础知识

1. 感知机

单层感知机就是一个二分类器，接收输入向量，输出分类结果，先进行线性加权，再进行激活函数的非线性转换，就相当于是一个小模型，里面的权重w和b是模型的参数
参考1
图1
参考2
在这里插入图片描述

2. DNN 深度神经网络（全连接神经网络）

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

DNN 与感知机的区别

在这里插入图片描述

DNN特点，全连接神经网络

在这里插入图片描述

DNN前向传播和反向传播

在这里插入图片描述

3. CNN结构【提取特征+分类】

3.1 CNN特有的卷积层，
3.2 卷积层自带卷积核和relu激活函数，
3.3 CNN特有的池化层（池化层没有激活函数）
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

4. CNN应用于文本

在这里插入图片描述

RNN基础

1. RNN的本质

常用在NLP中，应为NLP是处理语句的，语句之间有先后顺序，RNN可以在预测中加入先后顺序的信息
在这里插入图片描述
–分割线–
在这里插入图片描述
–分割线–
在这里插入图片描述
–分割线–

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

词向量模型word2Vec

把单词转换成向量，也就是一个一个的数值，计算机知道这些数值的含义，人类不需要理解

1. 自然语言处理需要解决的问题

  1. 单词之间应该有先后的顺序，而不是用词频；
  2. 意思相近的单词在空间中的表示也应该相近；

2. 如何解决上述问题

  1. 把单词变成向量，计算两个向量之间的相似度；（解决问题2）

3. 词向量是什么（训练成词向量）

词向量就是在规定的维度内，通常是50-300维度，把单词变成数值，计算机可以认识
在这里插入图片描述
在这里插入图片描述

4. 神经网络做什么？

输入两个单词，预测第三个单词

5. 模型如何去训练词向量

  1. 先有一个词向量库（随机初始化的），Look up embedding, 从中查找到输入词的向量，词向量输入到网络中，预测下一个词向量是什么，通过loss更新网络的权重参数以及词向量库
    在这里插入图片描述
    词训练数据库，是任何正常说话的逻辑数据都可以当成训练数据

6. 构建训练数据

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

7. 浩大的语料库中，

在这里插入图片描述

相关文章：

【深度学习基础】

打基础日常记录 CNN基础知识1. 感知机2. DNN 深度神经网络（全连接神经网络）DNN 与感知机的区别DNN特点，全连接神经网络DNN前向传播和反向传播 3. CNN结构【提取特征分类】4. CNN应用于文本 RNN基础1. RNN的本质 词向量模型word2Vec1. 自然语言…...

编程日记 2024/4/9 1:27:45

银行业架构网络BIAN (Banking IndustryArchitecture Network)详细介绍

BIAN ( The Banking Industry Architecture Network) 是一个业界多方协作的非营利性组织，由全球领先银行、技术提供商、顾问和学者组成，定义了一个用以简化和标准化核心银行体系结构的银行技术框架。这一框架基于面向服务的架构 (SOA) 原则，银…...

编程日记 2024/4/9 1:26:44

[尚硅谷 flink] 基于时间的合流——双流联结（Join）

文章目录 8.1 窗口联结（Window Join）8.2 **间隔联结（Interval Join）** 8.1 窗口联结（Window Join） Flink为基于一段时间的双流合并专门提供了一个窗口联结算子，可以定义时间窗口，并…...

编程日记 2024/4/9 1:24:41

怎样恢复已删除的照片？教你3个方法，一键恢复！

很多人喜欢以拍照的形式记录生活，手机里的照片就很容易堆积成山，但当内存不够用时就不得不选择删除。可是这些美好的照片始终是很多人心中抹不去的记忆，那么该怎样恢复已删除的照片呢？下面几招，教你一键恢复&#xff0…...

编程日记 2024/4/9 1:20:38

植物糖基转移酶数据库-23年-地表最强系列-文献精读-6

pUGTdb: A comprehensive database of plant UDP-dependent glycosyltransferases pUGTdb：植物UDP依赖糖基转移酶的全面数据库 一篇关于植物糖基转移数据库的综述，地表最强，总结的最全面的版本之一，各位看官有推荐请留言评论区~…...

编程日记 2024/4/9 1:19:35

虚拟机打不开

问题 另一个程序已锁定文件的一部分，进程无法访问 打不开磁盘“G:\centeros\hadoop104kl\hadoop100-cl2.vmdk”或它所依赖的某个快照磁盘。 模块“Disk”启动失败。 未能启动虚拟机。 原因 前一次非正常关闭虚拟机导致.lck 文件是VMWare软件的一种磁盘锁文件&…...

编程日记 2024/4/9 1:16:32

MySQL数据库版本为5.5.62，时间戳超出2038年1月19日的解决方案

MySQL数据库版本是 5.5.62，已设置字段的类型为BIGINT，使用FROM_UNIXTIME()函数来转换时间戳，返回NULL。 SELECT FROM_UNIXTIME(1617970800)SELECT FROM_UNIXTIME(2185743121)MySQL数据库版本为5.5.62，已设置字段的类型为BIGINT&a…...

编程日记 2024/4/9 1:15:31

C++20 semaphore(信号量) 详解

头文件在C20中是并发库技术规范（Technical Specification, TS）的一部分。信号量是同步原语，帮助控制多线程程序中对共享资源的访问。头文件提供了标准C方式来使用信号量。 使用环境 Windows：VS中打开项目属性，修改C语…...

编程日记 2024/4/9 1:10:26

【简单讲解下Lisp的学习历程】

🎥博主：程序员不想YY啊 💫CSDN优质创作者，CSDN实力新星，CSDN博客专家 🤗点赞🎈收藏⭐再看💫养成习惯 ✨希望本文对您有所裨益，如有不足之处，欢迎在评论区提出…...

编程日记 2024/4/9 1:05:21

构建高效网络：深入理解正向与反向代理的作用与配置

正向代理 如果把局域网外的互联网环境想象成一个巨大的资源库，则局域网中的客户端要访问互联网则需要通过代理服务器来访问，这种代理成为正向代理。 示例： 用户想要访问 https://chensir.ink （目标服务器）&#xff0…...

编程日记 2024/4/9 1:02:17

Linux：make/makefile的使用

一、什么是makefile/make 会不会写makefile，从一个侧面说明了一个人是否具备完成大型工程的能力 一个工程中的源文件不计数，其按类型、功能、模块分别放在若干个目录中，makefile定义了一系列的 规则来指定，哪些文件需要先编译&am…...

编程日记 2024/4/9 1:01:16

Java设计模式—策略模式（商场打折）

策略这个词应该怎么理解，打个比方说，我们出门的时候会选择不同的出行方式，比如骑自行车、坐公交、坐火车、坐飞机、坐火箭等等，这些出行方式，每一种都是一个策略。 再比如我们去逛商场，商场现在正在搞活动&…...

编程日记 2024/4/9 0:59:14

FOR循环

oracle从入门到总裁:​​​​​​https://blog.csdn.net/weixin_67859959/article/details/135209645 前面两种循环都要根据条件是否成立而确定循环体的执行，具体循环体执行多少次事先并不知道。 FOR 循环可以控制循环执行的次数，由循环变量控制循环体的…...

编程日记 2024/4/9 0:56:09

C++： 命名空间/C++输入输出/缺省参数/函数重载/引用/内联函数

进入C以后，就翻开了新的篇章。C支持C语言的使用。事实上，C是创建者在发现C语言中有很多不好用的地方（在后续学习中会明显看到）后，在C语言基础上又加入了许多语法，于是就成了C。 1.命名空间 来源&#xff…...

编程日记 2024/4/9 0:53:07

Java | Leetcode Java题解之第13题罗马数字转整数

题目&#xff1a; 题解&#xff1a; class Solution {Map<Character, Integer> symbolValues new HashMap<Character, Integer>() {{put(I, 1);put(V, 5);put(X, 10);put(L, 50);put(C, 100);put(D, 500);put(M, 1000);}};public int romanToInt(String s) {int …...

编程日记 2024/4/9 0:42:57

题目：学习使用register定义变量的方法。

题目&#xff1a;学习使用register定义变量的方法。 There is no nutrition in the blog content. After reading it, you will not only suffer from malnutrition, but also impotence. The blog content is all parallel goods. Those who are worried about being cheated …...

编程日记 2024/4/9 0:41:56

IO_DAY7

1:实现2个终端之间的互相聊天 要求:千万不要做出来2个终端之间的消息发送是读一写的&#xff0c;一定要能够做到&#xff0c;一个终端发送n条消息&#xff0c;另一个终端一条消息都不回复都是没有问题的 终端A&#xff1a; #include<myhead.h> int main(int argc, char…...

编程日记 2024/4/9 0:40:55

大模型学习笔记八：手撕AutoGPT

文章目录 一、功能需求二、演示用例三、核心模块流程图四、代码分析1&#xff09;Agent类目录创建智能体对象2&#xff09;开始主流程3&#xff09;在prompt的main目录输入主prompt和最后prompt4&#xff09;增加实际的工具集tools&#xff08;也就是函数&#xff09;5&#xf…...

编程日记 2024/4/9 0:39:54

Java常用API_System——常用方法及代码演示

1.System.exit(int status) 方法的形参int status为状态码&#xff0c;如果是0&#xff0c;说明虚拟机正常停止&#xff0c;如果非0&#xff0c;说明虚拟机非正常停止。需要将程序结束时可以调用这个方法 代码演示&#xff1a; public class Test {public static void main(S…...

编程日记 2024/4/9 0:37:52

neo4j图数据库下载安装配置

neo4j下载地址Index of /doc/neo4j/3.5.8/ 1.说明&#xff1a;jdk 1.8 版本对应的 neo4j 数据库版本 推荐安装3.X版本 2.配置系统环境变量 3.启动 neo4j.bat console 4.访问...

编程日记 2024/4/9 0:36:51

结构化面试-有矛盾的人际沟通题

例题一&#xff1a; 你和小张一起值班&#xff0c;但是小张没来&#xff0c;刚好领导检查发现后批评了他&#xff0c;事后小张埋怨你&#xff0c; 认为你在领导面前表现&#xff0c;并在同事中传播&#xff0c;同事也觉得你不通人情&#xff0c;你怎么处理&#xff1f; 回答&a…...

编程日记 2024/4/9 0:34:49

AI技术创业机会之金融科技

金融科技服务（FinTech）领域正经历着一场由人工智能（AI）技术引领的深刻变革，为创业者提供了无数创新与颠覆传统金融服务模式的机会。以下详述了金融科技服务中AI技术的具体创业机会及其细节与内容，以期为有志于涉足此领域的创业者提供全面的洞察与参考。 一、智能投顾与财…...

编程日记 2024/4/9 0:32:47

LC低通滤波

LC滤波器&#xff0c;是指将电感L与电容器 C进行组合设计构成的滤波电路&#xff0c;可去除或通过特定频率的无源器件。电容器具有隔直流通交流&#xff0c;且交流频率越高越容易通过的特性。而电感则具有隔交流通直流&#xff0c;且交流频率越高越不易通过的特性。因此&#x…...

编程日记 2024/4/9 0:30:44

CS162 Operating System笔记

What is an Operating System? it’s typically a special layer of software that provides the application access to hardware resources.So.it’s convenient abs fractions of complex hardware devices....

编程日记 2024/4/9 0:28:42

mysql慢sql排查与分析

当MySQL遇到慢查询&#xff08;慢SQL&#xff09;时&#xff0c;我们可以通过以下步骤进行排查和优化&#xff1a; 标题开启慢查询日志&#xff1a; 确保MySQL的慢查询日志已经开启。通过查看slow_query_log和slow_query_log_file变量来确认。 如果没有开启&#xff0c;可以…...

编程日记 2024/4/9 0:27:41

基于Springboot+Vue实现前后端分离酒店管理系统

一、&#x1f680;选题背景介绍 &#x1f4da;推荐理由&#xff1a; 近几年来&#xff0c;随着各行各业计算机智能化管理的转型&#xff0c;以及人们经济实力的提升&#xff0c;人们对于酒店住宿的需求不断的提升&#xff0c;用户的增多导致酒店管理信息的不断增多&#xff0c;…...

编程日记 2024/4/9 0:25:39

2024泰迪杯c题详细思路代码讲解：竞赛论文的辅助自动评阅

C&#xff1a;竞赛论文的辅助自动评阅 步骤一&#xff1a;理解拆解题目&#xff0c;并对附件1中的论文集进行初步分析。 步骤二&#xff1a;特征构造 论文完整性&#xff1a;开发算法以检查论文是否全面回答了赛题。这包括自然语言处理(NLP)技术来识别关键段落和论证的完整…...

编程日记 2024/4/9 0:22:37

【GEE实践应用】GEE下载遥感数据以及下载后在ArcGIS中的常见显示问题处理（以下载哨兵2号数据为例）

本期内容我们使用GEE进行遥感数据的下载&#xff0c;使用的相关代码如下所示&#xff0c;其中table是我们提前导入的下载遥感数据的研究区域的矢量边界数据。 var district table;var dsize district.size(); print(dsize);var district_geometry district.geometry();Map.…...

编程日记 2024/4/9 0:18:33

Excel 文件底部sheet 如何恢复

偶然打开一个excel文件&#xff0c;惊奇地发现&#xff1a;原来excel文件底部的若干个sheet居然全都看不到了。好神奇啊。 用其它的电脑打开同样的excel文件&#xff0c;发现&#xff1a;其实能看到的。说明这个excel文件并没有被损坏。只要将修改相关设置。就可以再次看…...

编程日记 2024/4/9 0:17:32

spring boot3登录开发-3(2短信验证登录/注册逻辑实现）

⛰️个人主页: 蒾酒 &#x1f525;系列专栏&#xff1a;《spring boot实战》 &#x1f30a;山高路远&#xff0c;行路漫漫&#xff0c;终有归途 目录 写在前面 上文衔接 内容简介 功能分析 短信验证登录实现 1.创建交互对象 用户短信登录/注册DTO 创建用户登录VO…...

编程日记 2024/4/9 0:15:30