当前位置：首页 > news >正文

decison tree 决策树

news 2025/12/28 2:53:43

熵

信息增益

信息增益描述的是在分叉过程中获得的熵减，信息增益即熵减。

熵减可以用来决定什么时候停止分叉，当熵减很小的时候你只是在不必要的增加树的深度，并且冒着过拟合的风险

决策树训练(构建)过程

离散值特征处理：One-Hot编码

一个具有 N 个取值的离散特征可以转换为 N 个二进制特征，每个二进制特征对应一个可能的取值。

连续值特征处理：

计算不同阈值的熵减，选取熵减最大的阈值作为分叉阈值

回归树

回归树用来预测一个连续值，训练时跟决策树的区别是训练时最小化方差，而决策树是最大化熵减

集成树

单个决策树的一个缺点是对数据的变化比较敏感，我们需要尝试降低树的敏感度提高鲁棒性，此时我们可以构建集成树，即一组决策树

有放回抽样(sample with replacement)

从训练集中随机取出一个之后放回，确保它在后续抽取中仍有可能被再次抽到。

随机森林

利用有放回抽样，我们可以连续抽样并组成新的训练集，使用新的训练集训练一棵新的树。重复该行为可以生成多棵树，称为随机森林。

如果有 n 个特征，一般要生成 $k = \sqrt{n}$ 棵树

XGBoost

对随机森林的提升：从第二次迭代开始，不是等概率随机抽样，而是让上一轮预测错误的样本有更大的概率被抽样到，以类似错误修正的方式训练树。

决策树与神经网络的选择

决策树在结构化数据下可用，非结构化数据不推荐；可解释

decison tree 决策树

熵信息增益信息增益描述的是在分叉过程中获得的熵减，信息增益即熵减。熵减可以用来决定什么时候停止分叉，当熵减很小的时候你只是在不必要的增加树的深度，并且冒着过拟合的风险决策树训练(构建)过程离散值特征处理：One-Hot…...

编程日记 2025/1/27 14:52:53

GO语言链表（单向链表

链表的前提 GO语言的链表类似于C语言的链表，它通过结构体和结构体指针实现。结构体 GO语言定义结构体如下 type user struct {name stringage intnext *user } 结构体指针结构体指针就是指向结构体的指针，我们在链表中会用到结构体指针实现链…...

编程日记 2025/1/27 14:51:44

Java：初识Java

初识Java 一.Java语言概述 1. Java是什么 Java是一种优秀的程序设计语言，它具有令人赏心悦目的语法和易于理解的语义。不仅如此，Java还是一个有一系列计算机软件和规范形成的技术体系，这个技术体系提供了完整的用于软件开发和跨平台部署的…...

编程日记 2025/1/27 14:48:21

Spring WebSocket 与 STOMP 协议结合实现私聊私信功能

目录后端pom.xmlConfig配置类Controller类DTO 前端安装相关依赖websocketService.js接口javascripthtmlCSS 效果展示简单测试连接： 报错解决方法1、vue3 使用SockJS报错 ReferenceError: global is not defined 功能补充拓展1. 安全性和身份验证2. 异常处理3. 消息…...

编程日记 2025/1/27 14:36:36

从0到1：C++ 开启游戏开发奇幻之旅（一）

目录为什么选择 C 进行游戏开发性能卓越内存管理精细跨平台兼容性强搭建 C 游戏开发环境集成开发环境（IDE） Visual Studio CLion 图形库 SDL（Simple DirectMedia Layer） SFML（Simple and Fast Multim…...

编程日记 2025/1/27 14:34:29

基于Flask的哔哩哔哩综合指数UP榜单数据分析系统的设计与实现

【Flask】基于Flask的哔哩哔哩综合指数UP榜单数据分析系统的设计与实现（完整系统源码开发笔记详细部署教程）✅ 目录一、项目简介二、项目界面展示三、项目视频展示一、项目简介该系统旨在通过大数据分析和数据挖掘技术，结合Flask轻量级We…...

编程日记 2025/1/27 14:25:56

在php中怎么打开OpenSSL

（点击即可进入聊天助手） 背景在使用php做一些项目时,有用到用户邮箱注册等,需要开启openssl的能力在php系统中openssl默认是关闭状态的,在一些低版本php系统中,有的甚至需要在服务器终端后台,手动安装要打开OpenSSL扩展，需要进行以下步骤 …...

编程日记 2025/1/27 14:23:34

oracle 分区表介绍

oracle 分区表介绍 Oracle 分区表是一个非常强大的数据库功能，可以将一个大的表分割成多个更小、更易管理的块（分区）。这种分区结构在处理大规模数据时非常有用，因为它能改善性能、简化维护和管理，并支持高效的数据存取…...

编程日记 2025/1/27 14:18:04

wxwidgets直接获取系统图标，效果类似QFileIconProvider

目前只做了windows版本，用法类似QFileIconProvider // 头文件 #ifndef WXFILEICONPROVIDER_H #define WXFILEICONPROVIDER_H#include <wx/wx.h> #include <wx/icon.h> #include <wx/image.h> #include <wx/bmpcbox.h> // Include for wxB…...

编程日记 2025/1/27 14:14:47

Arduino大师练成手册 -- 控制 PN532 NFC 模块

要在 Arduino 上控制 PN532 NFC 模块，你可以按照以下步骤进行： 硬件连接 VCC：连接到 Arduino 的 3.3V 引脚。 GND：连接到 Arduino 的 GND 引脚。 SDA：连接到 Arduino 的 SDA 引脚（通常是 A4&#xff09…...

编程日记 2025/1/27 14:13:44

解决日志中 `NOT NULL constraint failed` 异常的完整指南

在开发和运维过程中，日志是我们排查问题的重要工具。然而，当日志中出现类似 NOT NULL constraint failed 的异常时，往往意味着数据库约束与代码逻辑不匹配。本文将详细分析此类问题的原因，并提供完整的解决方案。 © ivwdcwso (ID: u012172506) 问题描述在同步 AWS …...

编程日记 2025/1/27 14:07:23

C动态库的生成与在Python和QT中的调用方法

目录一、动态库生成 1）C语言生成动态库 2）c类生成动态库二、动态库调用 1）Python调用DLL 2）QT调用DLL 三、存在的一些问题 1）python调用封装了类的DLL可能调用不成功 2）DLL格式不匹配的问题四、…...

编程日记 2025/1/27 14:04:15

UE求职Demo开发日志#7 强化属性完善

1 实现思路设计定义一个结构体记录技能树一个单元的信息，命名为FStrengthenCellInfo，一个TArray记录技能树整体信息，需要以下信息： 1.TArray前置技能index 2.FString 描述文本 3.TArray<FMyItemInfo>激活需要的物品ID和…...

编程日记 2025/1/27 14:02:03

Day35：字符串的大小写转换

在 Python 中，字符串的大小写转换是一个常见的操作，它可以帮助我们快速地将字符串中的字母从大写转换为小写，或者从小写转换为大写。Python 提供了多种方法来进行字符串大小写的转换，包括 upper()、lower()、capitalize()、title(…...

编程日记 2025/1/27 14:00:52

喜报丨迪捷软件入选2025年浙江省“重点省专”

根据《浙江省经济和信息化厅浙江省财政厅关于进一步支持专精特新中小企业高质量发展的通知》（浙经信企业〔2024〕232号）有关要求，经企业自主申报、地方推荐、材料初审以及专家评审等程序，浙江省经济和信息化厅发布了2025年浙江省…...

编程日记 2025/1/27 13:58:38

深度剖析 PyTorch框架：从基础概念到高级应用的深度学习之旅！

目录一、引言二、PyTorch 简介 （一）诞生背景与发展历程 （二）核心特点三、PyTorch 基础概念 （一）张量（Tensor）：数据的基石 （二）自动微分&…...

编程日记 2025/1/27 13:56:30

基于C++的DPU医疗领域编程初探

一、大型医院数据处理困境与 DPU 的崛起在数字化浪潮的席卷下，医疗行业正经历着深刻变革，大型医院作为医疗服务的核心枢纽，积累了海量的数据，涵盖患者的基本信息、诊断记录、检验报告、影像资料等多个维度。这些数据不仅规模庞大，而且增长速度迅猛，传统的中央处理器（C…...

编程日记 2025/1/27 13:50:13

Linux 执行 fdisk -l 出现 GPT PMBR 大小不符解决方法

目录前言1. 问题所示2. 原理分析3. 解决方法前言 🤟 找工作，来万码优才：👉 #小程序://万码优才/r6rqmzDaXpYkJZF 1. 问题所示执行fdisk -l的时候出现如下提示： [root@VMS-Centos-test1 ~]# fdisk -l GPT PMBR 大小不符（419430399 != 4294967295），将用写入予以更正…...

编程日记 2025/1/27 13:49:07

图漾相机搭配VisionPro使用简易教程

1.下载并安装VisionPro软件请自行下载VisonPro软件。 VisionPro 9.0 /9.5/9.6版本经测试，可正常打开图漾相机，建议使用图漾测试过的版本。 2.下载PercipioCameraForVisionPro软件包使用浏览器下载：https://gitee.com/percipioxyz/camport…...

编程日记 2025/1/27 13:47:51

第一届“启航杯”网络安全挑战赛WP

misc PvzHE 去这个文件夹有一张图片 QHCTF{300cef31-68d9-4b72-b49d-a7802da481a5} QHCTF For Year 2025 攻防世界有一样的 080714212829302316092230 对应Q 以此类推 QHCTF{FUN} 请找出拍摄地所在位置柳城顺丰 forensics win01 这个软件云沙盒分析一下 md5 ad4…...

编程日记 2025/1/27 13:46:33

地震勘探——干扰波识别、井中地震时距曲线特点

目录干扰波识别反射波地震勘探的干扰波井中地震时距曲线特点干扰波识别有效波：可以用来解决所提出的地质任务的波；干扰波：所有妨碍辨认、追踪有效波的其他波。地震勘探中，有效波和干扰波是相对的。例如，在反射波…...

编程新知 2025/12/25 12:02:23

大数据零基础学习day1之环境准备和大数据初步理解

学习大数据会使用到多台Linux服务器。一、环境准备 1、VMware 基于VMware构建Linux虚拟机是大数据从业者或者IT从业者的必备技能之一也是成本低廉的方案所以VMware虚拟机方案是必须要学习的。 （1）设置网关打开VMware虚拟机，点击编辑…...

编程新知 2025/12/19 13:26:11

汽车生产虚拟实训中的技能提升与生产优化

在制造业蓬勃发展的大背景下，虚拟教学实训宛如一颗璀璨的新星，正发挥着不可或缺且日益凸显的关键作用，源源不断地为企业的稳健前行与创新发展注入磅礴强大的动力。就以汽车制造企业这一极具代表性的行业主体为例，汽车生产线上各类…...

编程新知 2025/12/20 13:54:16

服务器硬防的应用场景都有哪些？

服务器硬防是指一种通过硬件设备层面的安全措施来防御服务器系统受到网络攻击的方式，避免服务器受到各种恶意攻击和网络威胁，那么，服务器硬防通常都会应用在哪些场景当中呢？ 硬防服务器中一般会配备入侵检测系统和预防系统&#x…...

编程新知 2025/11/9 19:17:07

在Ubuntu中设置开机自动运行（sudo）指令的指南

在Ubuntu系统中，有时需要在系统启动时自动执行某些命令，特别是需要 sudo权限的指令。为了实现这一功能，可以使用多种方法，包括编写Systemd服务、配置 rc.local文件或使用 cron任务计划。本文将详细介绍这些方法，并提供…...

编程新知 2025/12/23 11:20:24

Spring AI 入门：Java 开发者的生成式 AI 实践之路

一、Spring AI 简介在人工智能技术快速迭代的今天，Spring AI 作为 Spring 生态系统的新生力量，正在成为 Java 开发者拥抱生成式 AI 的最佳选择。该框架通过模块化设计实现了与主流 AI 服务（如 OpenAI、Anthropic）的无缝对接&…...

编程新知 2025/12/25 18:03:56

Java多线程实现之Thread类深度解析

Java多线程实现之Thread类深度解析一、多线程基础概念1.1 什么是线程1.2 多线程的优势1.3 Java多线程模型二、Thread类的基本结构与构造函数2.1 Thread类的继承关系2.2 构造函数三、创建和启动线程3.1 继承Thread类创建线程3.2 实现Runnable接口创建线程四、Thread类的核心…...

编程新知 2025/8/28 21:52:02

在web-view 加载的本地及远程HTML中调用uniapp的API及网页和vue页面是如何通讯的？

uni-app 中 Web-view 与 Vue 页面的通讯机制详解一、Web-view 简介 Web-view 是 uni-app 提供的一个重要组件，用于在原生应用中加载 HTML 页面： 支持加载本地 HTML 文件支持加载远程 HTML 页面实现 Web 与原生的双向通讯可用于嵌入第三方网页或 H5 应…...

编程新知 2025/8/6 2:19:46