当前位置： 首页 > news >正文

机器学习-无监督算法之降维

news 2026/3/30 17:47:30
  • 降维：将训练数据中的样本从高维空间转换到低维空间，降维是对原始数据线性变换实现的。
  • 为什么要降维？高维计算难，泛化能力差，防止维数灾难
  • 优点：减少冗余特征，方便数据可视化，减少内存。
  • 缺点：可能丢失数据，需要确定保留多少主成分

奇异值分解

  • 把一个矩阵拆成三个，对角矩阵起到拉伸作用，正交矩阵起到旋转作用。
  • A = UΣVT：U和V为正交矩阵，Σ为对角矩阵
Created with Raphaël 2.3.0 开始 M = UΣV^T 求M^TM的特征向量得到V 求MM^T的特征向量得到U 求M^TM或MM^T的特征值，然后开放得到奇异值 构成对角矩阵Σ
  • 应用：节省存储空间，降维，图片压缩

主成分分析

  1. PCA识别在训练集中占方差最大的轴
  2. 步骤
  • Z值化
  • 计算协方差矩阵，它的特征向量就是主成分
    • 利用SVD求特征向量
    • 基于特征值求特征向量
  1. 对角矩阵代表方差，其余代表相关性
  2. 缺点：分类问题效果不好

t-SNE

  1. 归一化
  2. 计算在二维空间中数据的相似度
  3. 将二维随机映射到一维，然后按照高纬度和低纬度相似度的差异，设计损失函数，用梯度下降来优化

在这里插入图片描述
常见降维算法

相关文章：

机器学习-无监督算法之降维

降维：将训练数据中的样本从高维空间转换到低维空间，降维是对原始数据线性变换实现的。为什么要降维？高维计算难，泛化能力差，防止维数灾难优点：减少冗余特征，方便数据可视化，减少内存…...

编程日记 2023/10/17 21:43:06

ubuntu20.04下Kafka安装部署及基础使用

Ubuntu安装kafka基础使用 kafka 安装环境基础安装下载kafka解压文件修改配置文件启动kafka创建主题查看主题发送消息接收消息 工具测试kafka Assistant 工具连接测试基础连接连接成功查看topic查看消息查看分区查看消费组 Idea 工具测试基础信息配置信息当前消费组发送消息消费…...

编程日记 2023/10/17 21:42:05

汉得欧洲x甄知科技 | 携手共拓全球化布局，助力出海中企数智化发展

HAND Europe 荣幸获得华为云颁发的 GrowCloud 合作伙伴奖项，进一步巩固了其在企业数字化领域的重要地位。于 2023 年 10 月 5 日，HAND Europe 参加了华为云荷比卢峰会，并因其在全球拓展方面的杰出贡献而荣获 GrowCloud 合作伙伴奖项的认可。 …...

编程日记 2023/10/17 21:41:05

【Javascript保姆级教程】显示类型转换和隐式类型转换

文章目录 前言一、显式类型转换1.1 字符串转换1.2 数字转换1.3 布尔值转换 二、隐式类型转换2.1 数字与字符串相加2.2 布尔值与数字相乘 总结 前言 JavaScript是一种灵活的动态类型语言，这意味着变量的数据类型可以在运行时自动转换，或者通过显式类型转…...

编程日记 2023/10/17 21:40:04

C++算法前缀和的应用：分割数组的最大值的原理、源码及测试用例

分割数组的最大值 相关知识点 C算法：前缀和、前缀乘积、前缀异或的原理、源码及测试用例：付视频课程 二分 过些天整理基础知识 题目 给定一个非负整数数组 nums 和一个整数 m ，你需要将这个数组分成 m 个非空的连续子数组。 设计一个算法…...

编程日记 2023/10/17 21:39:02

gitlab自编译 源码下载

网上都是怎么用 gitlab，但是实际开发中有需要针对 gitlab 进行二次编译自定义实现功能的想法。 搜索了网上的资料以及在官网的查找，查到了如下 gitlab 使用 ruby 开发。 gitlab 下载包 gitlab/gitlab-ce - Packages packages.gitlab.com gitlab/gitl…...

编程日记 2023/10/17 21:38:01

SBD（Schottky Barrier Diode）与JBS（Junction Barrier Schottky）

SBD和JBS二极管都是功率二极管，具有单向导电性，在电路中主要用于整流、箝位、续流等应用。两者的主要区别在于结构和性能。 结构 SBD是肖特基二极管的简称，其结构由一个金属和一个半导体形成的金属-半导体结构成。 JBS是结势垒肖特基二极…...

编程日记 2023/10/17 21:37:00

HANA:计算视图-图形化Aggregation组件-踩坑小记（注意事项）

今天遇到在做HANA视图开发的时候，遇到一个事，一直以为是个BUG，可把我气坏了，具体逻辑是这样的，是勇图形化处理的，ACDOCA innerjoin 一个时间维度表，就这么简单，完全按照ACDOCA的主键…...

编程日记 2023/10/17 21:35:59

【milkv】更新rndis驱动

问题 由于windows升级到了11，导致rndis驱动无法识别到。 解决 打开设备管理器，查看网络适配器，没有更新会显示黄色的图标。 右击选择更新驱动...

编程日记 2023/10/17 21:34:58

基于混沌博弈优化的BP神经网络（分类应用） - 附代码

基于混沌博弈优化的BP神经网络（分类应用） - 附代码 文章目录 基于混沌博弈优化的BP神经网络（分类应用） - 附代码1.鸢尾花iris数据介绍2.数据集整理3.混沌博弈优化BP神经网络3.1 BP神经网络参数设置3.2 混沌博弈算法应用 4.测试结果…...

编程日记 2023/10/17 21:33:58

基于人工水母优化的BP神经网络（分类应用） - 附代码

基于人工水母优化的BP神经网络（分类应用） - 附代码 文章目录 基于人工水母优化的BP神经网络（分类应用） - 附代码1.鸢尾花iris数据介绍2.数据集整理3.人工水母优化BP神经网络3.1 BP神经网络参数设置3.2 人工水母算法应用 4.测试结果…...

编程日记 2023/10/17 21:32:57

【C++】哈希学习

哈希学习 unordered系列关联式容器哈希结构除留余数法哈希冲突闭散列线性探测二次探测 负载因子开散列开散列增容 闭散列 VS 开散列字符串哈希算法 线性探测 & 二次探测实现拉链法实现 unordered系列关联式容器 unordered系列关联式容器是从C11开始，STL提供的。…...

编程日记 2023/10/17 21:31:56

Nginx的安装——window环境

1、下载Nginx 在官网下载稳定版本： http://nginx.org/en/download.html 以nginx/Windows-1.24.0为例，直接下载 nginx-1.24.0.zip。 下载后解压，解压后如下： 2、启动nginx 在window环境下启动nginx的方法有以下两种： …...

编程日记 2023/10/17 21:30:55

C语言笔记之指针

一.指针含义 1.a、*a与&a的区别 a存储指向变量的地址,*a为指针的值,&a为指针的地址 #include <stdio.h>int main(){/** 测试代码部分一 **/int a12;int *b1;b1&a1;printf(" a1 %d, &a1 %d, b1 %d, *b1 %d, &b1 %d\n\n",a1,&a1…...

编程日记 2023/10/17 21:28:53

【 OpenGauss源码学习 —— 列存储（CU）（二）】

列存储&#xff08;CU&#xff09;&#xff08;二&#xff09; 概述GetCUHeaderSize 函数Compress 函数CU::FillCompressBufHeader 函数CU::CompressNullBitmapIfNeed 函数CU::CompressData 函数 声明&#xff1a;本文的部分内容参考了他人的文章。在编写过程中&#xff0c;我们…...

编程日记 2023/10/17 21:27:52

Java并发面试题：（四）synchronized和lock区别

synchronized 关键字 synchronized关键字解决的是多个线程之间访问资源的同步性&#xff0c;synchronized关键字可以保证被它 修饰的方法或者代码块在任意时刻只能有一个线程执行。 另外&#xff0c;在 Java 早期版本中&#xff0c; synchronized属于重量级锁&#xff0c;效率…...

编程日记 2023/10/17 21:26:51

使用Nginx实现采集端和数据分析平台的数据加密传输

1. 需求描述 目前鸿鹄暴露出来的重要ports如下表&#xff1a; 在实际的生产环境中&#xff0c;结合我司的使用场景&#xff0c;需要在鸿鹄前端安装proxy&#xff0c;用以解决如下两个问题&#xff1a; 1.1 实现http到https的强制跳转 企业环境中&#xff0c;一般会关闭http 80端…...

编程日记 2023/10/17 21:25:51

appium---如何判断原生页面和H5页面

目前app中存在越来越多的H5页面了&#xff0c;对于一些做app自动化的测试来说&#xff0c;要求也越来越高&#xff0c;自动化不仅仅要支持原生页面&#xff0c;也要可以H5中进行操作自动化&#xff0c; webview是什么 webview是属于android中的一个控件&#xff0c;也相当于一…...

编程日记 2023/10/17 21:24:48

【WIFI】【WPS】如何从log角度判断WPS 已经连接上

在Android项目中，由于WPS在Framework 接口中已经remove了 只能通过wpa-supplicant 代码中去判断是否连接上了 这段代码log 表示 PBC模式下没有激活 09-21 22:42:16.221503 3782 3782 D wpa_supplicant: wlan0: 0: 04:cf:4b:21:a0:3e ssid=Openwrt-WPS-tp wpa_ie_len=0 rsn…...

编程日记 2023/10/17 21:23:46

[正式学习java①]——java项目结构，定义类和创建对象，一个标准javabean的书写

目录 一、创建第一个java文件 二、 初始类和对象 三、符合javabean规范的类 一、创建第一个java文件 要想写代码&#xff0c;你得有文件啊 以前的创建方式&#xff1a; 右键新建文本文档&#xff0c;开始写代码&#xff0c;写完改后缀名&#xff0c;保存……这样文件一旦多了…...

编程日记 2023/10/17 21:20:41

3步打造跨设备开发工作站：code-server全场景部署指南

3步打造跨设备开发工作站&#xff1a;code-server全场景部署指南 【免费下载链接】code-server VS Code in the browser 项目地址: https://gitcode.com/GitHub_Trending/co/code-server 作为开发者&#xff0c;你是否曾面临设备限制带来的开发困境&#xff1f;高性能电…...

编程新知 2026/3/30 17:22:02

中文文本结构化落地指南：BERT-通用领域模型多行业应用案例

中文文本结构化落地指南&#xff1a;BERT-通用领域模型多行业应用案例 1. 文本分割技术背景 在日常工作和学习中&#xff0c;我们经常会遇到大段的连续文本&#xff0c;比如会议记录、讲座文稿、采访实录等。这些文本通常缺乏段落分隔&#xff0c;读起来费时费力&#xff0c;…...

编程新知 2026/3/30 15:48:53

AI净界RMBG-1.4快速上手指南：小白也能轻松搞定透明素材

AI净界RMBG-1.4快速上手指南&#xff1a;小白也能轻松搞定透明素材 1. 为什么你需要这个工具 如果你曾经尝试过用传统软件抠图&#xff0c;一定遇到过这些烦恼&#xff1a;发丝边缘总是有残留背景色、半透明物体抠出来像蒙了一层雾、宠物毛发看起来像被啃过一样参差不齐。AI净…...

编程新知 2026/3/30 14:28:09

Cursor试用限制终极解决方案：一篇文章彻底解决你的AI编程困境

Cursor试用限制终极解决方案&#xff1a;一篇文章彻底解决你的AI编程困境 【免费下载链接】go-cursor-help 解决Cursor在免费订阅期间出现以下提示的问题: Youve reached your trial request limit. / Too many free trial accounts used on this machine. Please upgrade to p…...

编程新知 2026/3/30 14:03:26

如何用RecastNavigation构建高效AI导航系统：5个实战技巧揭秘

如何用RecastNavigation构建高效AI导航系统&#xff1a;5个实战技巧揭秘 【免费下载链接】recastnavigation Navigation-mesh Toolset for Games 项目地址: https://gitcode.com/gh_mirrors/re/recastnavigation 你是否曾为游戏中的AI角色设计路径规划而头疼&#xff1f…...

编程新知 2026/3/30 13:59:25

【图灵完备(Turing Complete)】五、从逻辑门到LEG：指令集与条件跳转的构建

1. 从逻辑门到处理器&#xff1a;LEG架构的诞生之路 记得我第一次用面包板搭建简单逻辑电路时&#xff0c;连个LED灯闪烁都要折腾半天。而现在我们要做的&#xff0c;是把这些基础逻辑门像乐高积木一样拼接成真正的处理器核心。LEG架构的设计初衷就是要解决原始图灵机指令宽度受…...

编程新知 2026/3/30 13:33:01

如何10分钟快速上手：语音转换工具完全指南

如何10分钟快速上手&#xff1a;语音转换工具完全指南 【免费下载链接】Retrieval-based-Voice-Conversion-WebUI 语音数据小于等于10分钟也可以用来训练一个优秀的变声模型&#xff01; 项目地址: https://gitcode.com/GitHub_Trending/re/Retrieval-based-Voice-Conversion…...

编程新知 2026/3/30 13:24:57

Phi-4-reasoning-vision-15B高算力适配：双GPU显存占用监控与低并发稳定性验证

Phi-4-reasoning-vision-15B高算力适配&#xff1a;双GPU显存占用监控与低并发稳定性验证 1. 模型概述与技术背景 Phi-4-reasoning-vision-15B是微软推出的视觉多模态推理模型&#xff0c;专为复杂视觉理解任务设计。作为2026年发布的重要模型&#xff0c;它在图像理解、文档…...

编程新知 2026/3/30 12:44:18

FRCRN命令行工具使用详解：从音频文件到降噪输出的完整流程

FRCRN命令行工具使用详解&#xff1a;从音频文件到降噪输出的完整流程 你是不是也遇到过这种情况&#xff1f;手头有一堆录音文件&#xff0c;背景里混杂着各种杂音——可能是空调的嗡嗡声、键盘的敲击声&#xff0c;或者是窗外的车流声。手动处理这些音频不仅费时费力&#x…...

编程新知 2026/3/30 12:34:15

雪女-斗罗大陆-造相Z-Turbo集成开发：在IntelliJ IDEA中配置模型调试环境

雪女-斗罗大陆-造相Z-Turbo集成开发&#xff1a;在IntelliJ IDEA中配置模型调试环境 你是不是也遇到过这种情况&#xff1f;拿到一个功能强大的AI模型&#xff0c;比如这个“雪女-斗罗大陆-造相Z-Turbo”&#xff0c;知道它能生成惊艳的斗罗大陆风格图像&#xff0c;但一说到要…...

编程新知 2026/3/30 11:41:57