transformer学习
transformer
李宏毅老师的课：https://www.youtube.com/watch?v=ugWDIIOHtPA&list=PLJV_el3uVTsOK_ZK5L0Iv_EQoL1JefRL4&index=60
知乎上的文章：Transformer模型详解（图解最完整版）
主要参考tensorflow的官方文档：理解语言的 Transformer 模型
还有一篇英文文章讲得也不错：The Illustrated Transformer
google官方的blog里面有动画也不错：Transformer：一种用于语言理解的新型神经网络架构，建议翻译着看
根据tensorflow的官方文档写的代码，包含了数据集：
关于新机器测试，李沐老师也有在做：https://t.bilibili.com/695161992084717573?tab=2
bert
知乎bert简介：什么是BERT？
ensorflow的官方文档（还没有中文版）：使用 BERT 对文本进行分类
bert源码实现：从零实现BERT网络模型
gpt
相关文章：
transformer学习
transformer 李宏毅老师的课：https://www.youtube.com/watch?vugWDIIOHtPA&listPLJV_el3uVTsOK_ZK5L0Iv_EQoL1JefRL4&index60 知乎上的文章：Transformer模型详解（图解最完整版） 主要参考tensorflow的官方文档…...
基于LNMP架构搭建Discuz论坛
LNMP: L---->linux系统，操作系统。 N----->nginx网站服务（前端),提供前端的静态页面服务。同时具有代理、转发的作用。（转发就是转发后端请求，转发PHP），nginx没有处理动态资源的功能，他有…...
乐鑫科技2021笔试题
笔试时间：2020.09.09，10：00-11：30 岗位：嵌入式软件工程师 题型：单选题20道，40分。编程题2道，60分。 单选题 1、算术右移指令执行的操作是？符号位会变化吗？…...
VL 模型 Open-Set Domain Adaptation with Visual-Language Foundation Models 论文阅读笔记
Open-Set Domain Adaptation with Visual-Language Foundation Models 论文阅读笔记 一、Abstract 写在前面 又是一周周末，在家的时间感觉过得很快呀。今天没得时间写博客，留下个标题，明天搞完。 论文地址：Open-Set Domain Adapta…...
在IDEA同一个窗口中同时打开多个独立项目
文章说明 本文主要说明如何在Intellij Idea中同时打开多个独立的Maven项目。 我在使用idea的时候，由于自己负责了很多项目，经常要在不通的代码之间切换来切换去。然后搜索代码的时候也只能搜到当前打开的这个项目。因为这个原因，一些小项目…...
flask-session、数据库连接池
flask 自带session---》以cookie的形式放到了浏览器中---》加密 真正的session，是在服务端存储 -django中存在djangosession表中 -flask中，使用第三方，保存在---》redis中---》flask-session 使用步骤 pip install flask-session …...
基于EEGLAB的ICA分析
目录 1.ICA原理 2.ICA的实现 3.ICA成分识别 4.ICLabel识别并去除伪迹 5.ICA成分识别练习 1.ICA原理 得到的每一个地形图，实际上就是它的权重谱。 投射：根据原成分恢复原始信号。 选择性投射：去伪。 2.ICA的实现 extended，1&…...
Pytorch深度学习-----神经网络之线性层用法
系列文章目录 PyTorch深度学习——Anaconda和PyTorch安装 Pytorch深度学习-----数据模块Dataset类 Pytorch深度学习------TensorBoard的使用 Pytorch深度学习------Torchvision中Transforms的使用（ToTensor，Normalize，Resize ，Co…...
代码随想录算法训练营day58
文章目录 Day58 每日温度题目思路代码 下一个更大元素 I题目思路代码 Day58 每日温度 739. 每日温度 - 力扣（LeetCode） 题目 请根据每日 气温 列表，重新生成一个列表。对应位置的输出为：要想观测到更高的气温，至少需…...
Grafana集成prometheus(4.Grafana添加预警)
上文已经完成了grafana对prometheus的集成及数据导入，本文主要记录grafana的预警功能（以内存为例） 添加预警 添加入口（2个） databorard面板点击edit，下方有个Alert的tab，创建Alert rules依赖…...
宏观上看Spring创建对象的过程
宏观上看Spring创建对象的过程 对于对象而言，可以分为简单对象和复杂对象； 简单对象 简单对象指可以直接new的对象； Spring在创建这些对象时，是基于反射来完成的。复杂对象 复杂对象指不能直接new的对象。 比如：要得到…...
Jtti：linux如何配置dns域名解析服务器
要配置Linux上的DNS域名解析服务器，您可以按照以下步骤进行操作： 1. 安装BIND软件包：BIND是Linux上最常用的DNS服务器软件，您可以使用以下命令安装它： sudo apt-get install bind9 2. 配置BIND：BIND的配置…...
上网速度慢解决方案
方法 1：手动设置 Proxy 服务器 假如你是使用宽带的用户，使用宽带路由器后可能会发觉无法浏览一些网页，其中一个原因是一些 ISP 商 在后台使用了隐形的代理服务器，使部分网页无法正常显示。假如你多次按“F5”键也无法刷新网页&…...
解决 “fatal: Could not read from remote repository.
问题描述： 在使用Git将本地仓库推送到远程仓库或将远程仓库克隆到本地的时候，发生了如下错误：“fatal: Could not read from remote repository.” 原因分析： 出现这错误一般是以下两种原因： 客户端与服务端未生成 …...
TypeScript知识点总结
typescript是js的超集，目前很多前端框架都开始使用它来作为项目的维护管理的工具，还在不断地更新，添加新功能中，我们学习它，才能更好的在的项目中运用它，发挥它的最大功效 let b: null nulllet c: null …...
Map简单介绍
Map 是 Java 中用于存储键值对的接口，它是一个抽象类，有多个实现类，如 HashMap、TreeMap、LinkedHashMap 等。我将为你提供一些关于 Map 接口的源码解读。 首先，Map 接口的定义如下： public interface Map<K, V&g…...
Linux文本处理工具和正则表达式
Linux文本处理工具和正则表达式 一.查看、截取和修改文本的工具 1.查看文本的工具 cat 最常用的文件查看命令；当不指明文件或者文件名为一杠’-时，读取标准输入。 cat [OPTION]... [FILE]... -A：显示所有控制符(tab键:^I;行结束符:$) -…...
【WebRTC---源码篇】（二十三）JitterBuffer
PacketBuffer packetbuffer类中重要的一些变量 // buffer_.size() and max_size_ must always be a power of two.const size_t max_size_;//能存储的最大元素个数// The fist sequence number currently in the buffer.uint16_t first_seq_num_ RTC_GUARDED_BY(crit_);//这个…...
基于SpringBoot+Vue的在线考试系统设计与实现（源码+LW+部署文档等）
博主介绍： 大家好，我是一名在Java圈混迹十余年的程序员，精通Java编程语言，同时也熟练掌握微信小程序、Python和Android等技术，能够为大家提供全方位的技术支持和交流。 我擅长在JavaWeb、SSH、SSM、SpringBoot等框架…...
用Rust实现23种设计模式之 外观模式
关注我，学习Rust不迷路！！ 外观模式是一种结构型设计模式，它提供了一个统一的接口，用于访问子系统中的一组接口。以下是外观模式的优点和使用场景： 优点： 简化客户端代码：外观模式…...
R语言AI模型部署方案：精准离线运行详解
R语言AI模型部署方案：精准离线运行详解 一、项目概述 本文将构建一个完整的R语言AI部署解决方案，实现鸢尾花分类模型的训练、保存、离线部署和预测功能。核心特点： 100%离线运行能力自包含环境依赖生产级错误处理跨平台兼容性模型版本管理# 文件结构说明 Iris_AI_Deployme…...
Redis相关知识总结（缓存雪崩，缓存穿透，缓存击穿，Redis实现分布式锁，如何保持数据库和缓存一致）
文章目录 1.什么是Redis？2.为什么要使用redis作为mysql的缓存？3.什么是缓存雪崩、缓存穿透、缓存击穿？3.1缓存雪崩3.1.1 大量缓存同时过期3.1.2 Redis宕机 3.2 缓存击穿3.3 缓存穿透3.4 总结 4. 数据库和缓存如何保持一致性5. Redis实现分布式…...
8k长序列建模，蛋白质语言模型Prot42仅利用目标蛋白序列即可生成高亲和力结合剂
蛋白质结合剂（如抗体、抑制肽）在疾病诊断、成像分析及靶向药物递送等关键场景中发挥着不可替代的作用。传统上，高特异性蛋白质结合剂的开发高度依赖噬菌体展示、定向进化等实验技术，但这类方法普遍面临资源消耗巨大、研发周期冗长…...
Mybatis逆向工程，动态创建实体类、条件扩展类、Mapper接口、Mapper.xml映射文件
今天呢，博主的学习进度也是步入了Java Mybatis 框架，目前正在逐步杨帆旗航。 那么接下来就给大家出一期有关 Mybatis 逆向工程的教学，希望能对大家有所帮助，也特别欢迎大家指点不足之处，小生很乐意接受正确的建议&…...
可靠性+灵活性：电力载波技术在楼宇自控中的核心价值
可靠性灵活性：电力载波技术在楼宇自控中的核心价值 在智能楼宇的自动化控制中，电力载波技术（PLC）凭借其独特的优势，正成为构建高效、稳定、灵活系统的核心解决方案。它利用现有电力线路传输数据，无需额外布…...
376. Wiggle Subsequence
376. Wiggle Subsequence 代码 class Solution { public:int wiggleMaxLength(vector<int>& nums) {int n nums.size();int res 1;int prediff 0;int curdiff 0;for(int i 0;i < n-1;i){curdiff nums[i1] - nums[i];if( (prediff > 0 && curdif…...
sqlserver 根据指定字符 解析拼接字符串
DECLARE LotNo NVARCHAR(50)A,B,C DECLARE xml XML ( SELECT <x> REPLACE(LotNo, ,, </x><x>) </x> ) DECLARE ErrorCode NVARCHAR(50) -- 提取 XML 中的值 SELECT value x.value(., VARCHAR(MAX))…...
多种风格导航菜单 HTML 实现（附源码）
下面我将为您展示 6 种不同风格的导航菜单实现，每种都包含完整 HTML、CSS 和 JavaScript 代码。 1. 简约水平导航栏 <!DOCTYPE html> <html lang"zh-CN"> <head><meta charset"UTF-8"><meta name"viewport&qu…...
力扣热题100 k个一组反转链表题解
题目: 代码: func reverseKGroup(head *ListNode, k int) *ListNode {cur : headfor i : 0; i < k; i {if cur nil {return head}cur cur.Next}newHead : reverse(head, cur)head.Next reverseKGroup(cur, k)return newHead }func reverse(start, end *ListNode) *ListN…...
比较数据迁移后MySQL数据库和OceanBase数据仓库中的表
设计一个MySQL数据库和OceanBase数据仓库的表数据比较的详细程序流程，两张表是相同的结构，都有整型主键id字段，需要每次从数据库分批取得2000条数据，用于比较，比较操作的同时可以再取2000条数据，等上一次比较完成之后，开始比较，直到比较完所有的数据。比较操作需要比较…...