当前位置： 首页 > news >正文

机器学习-无监督算法之降维

news 2025/7/5 11:48:53
  • 降维：将训练数据中的样本从高维空间转换到低维空间，降维是对原始数据线性变换实现的。
  • 为什么要降维？高维计算难，泛化能力差，防止维数灾难
  • 优点：减少冗余特征，方便数据可视化，减少内存。
  • 缺点：可能丢失数据，需要确定保留多少主成分

奇异值分解

  • 把一个矩阵拆成三个，对角矩阵起到拉伸作用，正交矩阵起到旋转作用。
  • A = UΣVT：U和V为正交矩阵，Σ为对角矩阵
Created with Raphaël 2.3.0 开始 M = UΣV^T 求M^TM的特征向量得到V 求MM^T的特征向量得到U 求M^TM或MM^T的特征值，然后开放得到奇异值 构成对角矩阵Σ
  • 应用：节省存储空间，降维，图片压缩

主成分分析

  1. PCA识别在训练集中占方差最大的轴
  2. 步骤
  • Z值化
  • 计算协方差矩阵，它的特征向量就是主成分
    • 利用SVD求特征向量
    • 基于特征值求特征向量
  1. 对角矩阵代表方差，其余代表相关性
  2. 缺点：分类问题效果不好

t-SNE

  1. 归一化
  2. 计算在二维空间中数据的相似度
  3. 将二维随机映射到一维，然后按照高纬度和低纬度相似度的差异，设计损失函数，用梯度下降来优化

在这里插入图片描述
常见降维算法

相关文章：

机器学习-无监督算法之降维

降维：将训练数据中的样本从高维空间转换到低维空间，降维是对原始数据线性变换实现的。为什么要降维？高维计算难，泛化能力差，防止维数灾难优点：减少冗余特征，方便数据可视化，减少内存…...

编程日记 2023/10/17 21:43:06

ubuntu20.04下Kafka安装部署及基础使用

Ubuntu安装kafka基础使用 kafka 安装环境基础安装下载kafka解压文件修改配置文件启动kafka创建主题查看主题发送消息接收消息 工具测试kafka Assistant 工具连接测试基础连接连接成功查看topic查看消息查看分区查看消费组 Idea 工具测试基础信息配置信息当前消费组发送消息消费…...

编程日记 2023/10/17 21:42:05

汉得欧洲x甄知科技 | 携手共拓全球化布局，助力出海中企数智化发展

HAND Europe 荣幸获得华为云颁发的 GrowCloud 合作伙伴奖项，进一步巩固了其在企业数字化领域的重要地位。于 2023 年 10 月 5 日，HAND Europe 参加了华为云荷比卢峰会，并因其在全球拓展方面的杰出贡献而荣获 GrowCloud 合作伙伴奖项的认可。 …...

编程日记 2023/10/17 21:41:05

【Javascript保姆级教程】显示类型转换和隐式类型转换

文章目录 前言一、显式类型转换1.1 字符串转换1.2 数字转换1.3 布尔值转换 二、隐式类型转换2.1 数字与字符串相加2.2 布尔值与数字相乘 总结 前言 JavaScript是一种灵活的动态类型语言，这意味着变量的数据类型可以在运行时自动转换，或者通过显式类型转…...

编程日记 2023/10/17 21:40:04

C++算法前缀和的应用：分割数组的最大值的原理、源码及测试用例

分割数组的最大值 相关知识点 C算法：前缀和、前缀乘积、前缀异或的原理、源码及测试用例：付视频课程 二分 过些天整理基础知识 题目 给定一个非负整数数组 nums 和一个整数 m ，你需要将这个数组分成 m 个非空的连续子数组。 设计一个算法…...

编程日记 2023/10/17 21:39:02

gitlab自编译 源码下载

网上都是怎么用 gitlab，但是实际开发中有需要针对 gitlab 进行二次编译自定义实现功能的想法。 搜索了网上的资料以及在官网的查找，查到了如下 gitlab 使用 ruby 开发。 gitlab 下载包 gitlab/gitlab-ce - Packages packages.gitlab.com gitlab/gitl…...

编程日记 2023/10/17 21:38:01

SBD（Schottky Barrier Diode）与JBS（Junction Barrier Schottky）

SBD和JBS二极管都是功率二极管，具有单向导电性，在电路中主要用于整流、箝位、续流等应用。两者的主要区别在于结构和性能。 结构 SBD是肖特基二极管的简称，其结构由一个金属和一个半导体形成的金属-半导体结构成。 JBS是结势垒肖特基二极…...

编程日记 2023/10/17 21:37:00

HANA:计算视图-图形化Aggregation组件-踩坑小记（注意事项）

今天遇到在做HANA视图开发的时候，遇到一个事，一直以为是个BUG，可把我气坏了，具体逻辑是这样的，是勇图形化处理的，ACDOCA innerjoin 一个时间维度表，就这么简单，完全按照ACDOCA的主键…...

编程日记 2023/10/17 21:35:59

【milkv】更新rndis驱动

问题 由于windows升级到了11，导致rndis驱动无法识别到。 解决 打开设备管理器，查看网络适配器，没有更新会显示黄色的图标。 右击选择更新驱动...

编程日记 2023/10/17 21:34:58

基于混沌博弈优化的BP神经网络（分类应用） - 附代码

基于混沌博弈优化的BP神经网络（分类应用） - 附代码 文章目录 基于混沌博弈优化的BP神经网络（分类应用） - 附代码1.鸢尾花iris数据介绍2.数据集整理3.混沌博弈优化BP神经网络3.1 BP神经网络参数设置3.2 混沌博弈算法应用 4.测试结果…...

编程日记 2023/10/17 21:33:58

基于人工水母优化的BP神经网络（分类应用） - 附代码

基于人工水母优化的BP神经网络（分类应用） - 附代码 文章目录 基于人工水母优化的BP神经网络（分类应用） - 附代码1.鸢尾花iris数据介绍2.数据集整理3.人工水母优化BP神经网络3.1 BP神经网络参数设置3.2 人工水母算法应用 4.测试结果…...

编程日记 2023/10/17 21:32:57

【C++】哈希学习

哈希学习 unordered系列关联式容器哈希结构除留余数法哈希冲突闭散列线性探测二次探测 负载因子开散列开散列增容 闭散列 VS 开散列字符串哈希算法 线性探测 & 二次探测实现拉链法实现 unordered系列关联式容器 unordered系列关联式容器是从C11开始，STL提供的。…...

编程日记 2023/10/17 21:31:56

Nginx的安装——window环境

1、下载Nginx 在官网下载稳定版本： http://nginx.org/en/download.html 以nginx/Windows-1.24.0为例，直接下载 nginx-1.24.0.zip。 下载后解压，解压后如下： 2、启动nginx 在window环境下启动nginx的方法有以下两种： …...

编程日记 2023/10/17 21:30:55

C语言笔记之指针

一.指针含义 1.a、*a与&a的区别 a存储指向变量的地址,*a为指针的值,&a为指针的地址 #include <stdio.h>int main(){/** 测试代码部分一 **/int a12;int *b1;b1&a1;printf(" a1 %d, &a1 %d, b1 %d, *b1 %d, &b1 %d\n\n",a1,&a1…...

编程日记 2023/10/17 21:28:53

【 OpenGauss源码学习 —— 列存储（CU）（二）】

列存储&#xff08;CU&#xff09;&#xff08;二&#xff09; 概述GetCUHeaderSize 函数Compress 函数CU::FillCompressBufHeader 函数CU::CompressNullBitmapIfNeed 函数CU::CompressData 函数 声明&#xff1a;本文的部分内容参考了他人的文章。在编写过程中&#xff0c;我们…...

编程日记 2023/10/17 21:27:52

Java并发面试题：（四）synchronized和lock区别

synchronized 关键字 synchronized关键字解决的是多个线程之间访问资源的同步性&#xff0c;synchronized关键字可以保证被它 修饰的方法或者代码块在任意时刻只能有一个线程执行。 另外&#xff0c;在 Java 早期版本中&#xff0c; synchronized属于重量级锁&#xff0c;效率…...

编程日记 2023/10/17 21:26:51

使用Nginx实现采集端和数据分析平台的数据加密传输

1. 需求描述 目前鸿鹄暴露出来的重要ports如下表&#xff1a; 在实际的生产环境中&#xff0c;结合我司的使用场景&#xff0c;需要在鸿鹄前端安装proxy&#xff0c;用以解决如下两个问题&#xff1a; 1.1 实现http到https的强制跳转 企业环境中&#xff0c;一般会关闭http 80端…...

编程日记 2023/10/17 21:25:51

appium---如何判断原生页面和H5页面

目前app中存在越来越多的H5页面了&#xff0c;对于一些做app自动化的测试来说&#xff0c;要求也越来越高&#xff0c;自动化不仅仅要支持原生页面&#xff0c;也要可以H5中进行操作自动化&#xff0c; webview是什么 webview是属于android中的一个控件&#xff0c;也相当于一…...

编程日记 2023/10/17 21:24:48

【WIFI】【WPS】如何从log角度判断WPS 已经连接上

在Android项目中，由于WPS在Framework 接口中已经remove了 只能通过wpa-supplicant 代码中去判断是否连接上了 这段代码log 表示 PBC模式下没有激活 09-21 22:42:16.221503 3782 3782 D wpa_supplicant: wlan0: 0: 04:cf:4b:21:a0:3e ssid=Openwrt-WPS-tp wpa_ie_len=0 rsn…...

编程日记 2023/10/17 21:23:46

[正式学习java①]——java项目结构，定义类和创建对象，一个标准javabean的书写

目录 一、创建第一个java文件 二、 初始类和对象 三、符合javabean规范的类 一、创建第一个java文件 要想写代码&#xff0c;你得有文件啊 以前的创建方式&#xff1a; 右键新建文本文档&#xff0c;开始写代码&#xff0c;写完改后缀名&#xff0c;保存……这样文件一旦多了…...

编程日记 2023/10/17 21:20:41

使用docker在3台服务器上搭建基于redis 6.x的一主两从三台均是哨兵模式

一、环境及版本说明 如果服务器已经安装了docker,则忽略此步骤,如果没有安装,则可以按照一下方式安装: 1. 在线安装(有互联网环境): 请看我这篇文章 传送阵>> 点我查看 2. 离线安装(内网环境):请看我这篇文章 传送阵>> 点我查看 说明&#xff1a;假设每台服务器已…...

编程新知 2025/7/4 19:22:07

Python｜GIF 解析与构建（5）：手搓截屏和帧率控制

目录 Python&#xff5c;GIF 解析与构建&#xff08;5&#xff09;&#xff1a;手搓截屏和帧率控制 一、引言 二、技术实现&#xff1a;手搓截屏模块 2.1 核心原理 2.2 代码解析&#xff1a;ScreenshotData类 2.2.1 截图函数&#xff1a;capture_screen 三、技术实现&…...

编程新知 2025/6/27 2:57:24

内存分配函数malloc kmalloc vmalloc

内存分配函数malloc kmalloc vmalloc malloc实现步骤： 1）请求大小调整：首先，malloc 需要调整用户请求的大小，以适应内部数据结构（例如，可能需要存储额外的元数据）。通常，这包括对齐调整，确保分配的内存地址满足特定硬件要求（如对齐到8字节或16字节边界）。 2）空闲…...

编程新知 2025/6/18 0:49:30

蓝桥杯 2024 15届国赛 A组 儿童节快乐

P10576 [蓝桥杯 2024 国 A] 儿童节快乐 题目描述 五彩斑斓的气球在蓝天下悠然飘荡&#xff0c;轻快的音乐在耳边持续回荡&#xff0c;小朋友们手牵着手一同畅快欢笑。在这样一片安乐祥和的氛围下&#xff0c;六一来了。 今天是六一儿童节&#xff0c;小蓝老师为了让大家在节…...

编程新知 2025/6/27 7:21:20

什么是库存周转？如何用进销存系统提高库存周转率？

你可能听说过这样一句话&#xff1a; “利润不是赚出来的&#xff0c;是管出来的。” 尤其是在制造业、批发零售、电商这类“货堆成山”的行业&#xff0c;很多企业看着销售不错&#xff0c;账上却没钱、利润也不见了&#xff0c;一翻库存才发现&#xff1a; 一堆卖不动的旧货…...

编程新知 2025/7/5 2:52:28

深入解析C++中的extern关键字：跨文件共享变量与函数的终极指南

&#x1f680; C extern 关键字深度解析&#xff1a;跨文件编程的终极指南 &#x1f4c5; 更新时间&#xff1a;2025年6月5日 &#x1f3f7;️ 标签&#xff1a;C | extern关键字 | 多文件编程 | 链接与声明 | 现代C 文章目录 前言&#x1f525;一、extern 是什么&#xff1f;&…...

编程新知 2025/6/22 1:04:56

Pinocchio 库详解及其在足式机器人上的应用

Pinocchio 库详解及其在足式机器人上的应用 Pinocchio (Pinocchio is not only a nose) 是一个开源的 C 库&#xff0c;专门用于快速计算机器人模型的正向运动学、逆向运动学、雅可比矩阵、动力学和动力学导数。它主要关注效率和准确性&#xff0c;并提供了一个通用的框架&…...

编程新知 2025/6/16 13:45:11

网站指纹识别

网站指纹识别 网站的最基本组成&#xff1a;服务器&#xff08;操作系统&#xff09;、中间件&#xff08;web容器&#xff09;、脚本语言、数据厍 为什么要了解这些&#xff1f;举个例子&#xff1a;发现了一个文件读取漏洞&#xff0c;我们需要读/etc/passwd&#xff0c;如…...

编程新知 2025/7/4 11:46:51

基于Java+MySQL实现（GUI）客户管理系统

客户资料管理系统的设计与实现 第一章 需求分析 1.1 需求总体介绍 本项目为了方便维护客户信息为了方便维护客户信息&#xff0c;对客户进行统一管理&#xff0c;可以把所有客户信息录入系统&#xff0c;进行维护和统计功能。可通过文件的方式保存相关录入数据&#xff0c;对…...

编程新知 2025/7/4 10:38:01

20个超级好用的 CSS 动画库

分享 20 个最佳 CSS 动画库。 它们中的大多数将生成纯 CSS 代码&#xff0c;而不需要任何外部库。 1.Animate.css 一个开箱即用型的跨浏览器动画库&#xff0c;可供你在项目中使用。 2.Magic Animations CSS3 一组简单的动画&#xff0c;可以包含在你的网页或应用项目中。 3.An…...

编程新知 2025/7/2 8:50:43