当前位置： 首页 > news >正文

Kaggle实践之《Home Credit Default Risk》的逐步优化

news 2025/7/9 1:41:19

记录下每一次的改进及其score。

1、只用训练集的特征+简单处理

特征只用训练集的特征，把string型的特征全部进行one-hot转化，然后随机1:4分成测试集训练集，模型也调参直接出结果。

最终的score是训练集80.13%、验证集76.33%、线上74.28%。
在这里插入图片描述

实验2：SK_ID_CURR作为唯一的ID，特征重要性能排在第12位?
处理方法：做个消融实验，去掉这个特征，80.44%、75.82%、74.62%。
结论：虽然训练集auc相比上一次实验下降了0.51pt，但是线上score却增加了0.34pt，可见虽然SK_ID_CURR的特征重要性较高，但对模型的泛化性有负向作用。

实验3：很多flag特征也被当做string类型进行了one-hot处理，导致其实是两个一样的特征?
处理方法：在做特征one-hot的时候，去掉一个特征。81.66、76.08、74.42%。

实验下来差异都没什么增益，明天增加bureau的数据试试。

相关文章：

Kaggle实践之《Home Credit Default Risk》的逐步优化

记录下每一次的改进及其score。 1、只用训练集的特征简单处理 特征只用训练集的特征，把string型的特征全部进行one-hot转化，然后随机1:4分成测试集训练集，模型也调参直接出结果。 最终的score是训练集80.13%、验证集76.33%、线上74.28%。 …...

编程日记 2024/2/22 6:16:54

django rest framework 学习笔记-实战商城2

01收货地址模型类和视图定义_哔哩哔哩_bilibili 本博客借鉴至大佬的视频学习笔记 地址信息的管理：增删改查的实现 # 序列化器配置 class AddrSerializer(serializers.ModelSerializer):"""收货地址的模型序列化器"""class Meta:mo…...

编程日记 2024/2/22 6:15:53

WEB 3D技术 three.js 3D贺卡(4) 添加鼠标滚轮移动屏幕 改变贺卡文字功能

好，上文 WEB 3D技术 three.js 3D贺卡(3) 点光源灯光动画效果 那么 我们来做一下 鼠标滚动相机和滚动时不同文字的切换 首先 我们要设置多个场景 其实也不能完全叫场景 也可以说多个位置 反正简单说就是多个位置 展现多个场景 我们先在代码的最下面 加上一个对象数…...

编程日记 2024/2/22 6:11:50

爬虫在网页抓取的过程中可能会遇到哪些问题？

在网页抓取（爬虫）过程中，开发者可能会遇到多种问题，以下是一些常见问题及其解决方案： 1. IP封锁： 问题：封IP是最常见的问题，抓取的目标网站会识别并封锁频繁请求的IP地址。 解决方案…...

编程日记 2024/2/22 6:09:48

Eclipse中Run As On Server和Run As Java Application

一、名词释义 run java application （作为Java应用程序运行）是运行 java main方法。 run on server是启动一个web 应用服务器。 二、两者的区别 Eclipse中可以创建java project 也可以创建java web poject 。java project是可以直接在命令行运行,或者…...

编程日记 2024/2/22 6:07:46

【MySQL】库的操作——MySQL数据库 、库的操作、表的操作、字符集和校验规则、备份和恢复

文章目录 MySQL1. 库的操作2. 表的操作3. 字符集和校验规则3.1 查看系统默认字符集以及校验规则3.2 查看数据库支持的字符集3.3 查看数据库支持的字符集校验规则 4. 备份和恢复4.1 备份4.2 还原 MySQL 1. 库的操作 连接服务器 mysql -h 127.0.0.1 -P 3306 -u root -pmysql -u…...

编程日记 2024/2/22 6:06:44

pytorch 用F.normalization的逆归一化如何操作

逆归一化的时候再把这个数乘回去就行了 magnitude a.norm(p2, dim1, keepdimTrue) # NEW atorch.nn.functional.normalize(a, p2, dim1) a_or a* magnitude # NEW print(a_or) Outputs: tensor([]1,2,3)...

编程日记 2024/2/22 6:05:43

LabVIEW多通道压力传感器实时动态检测

LabVIEW多通道压力传感器实时动态检测 介绍了一种基于LabVIEW的多通道压力传感器实时动态检测系统，解决压阻式压力传感器温度补偿过程的复杂度，提高测量的准确性。通过自动轮询检测方法，结合硬件检测模型和多通道检测系统设计，本…...

编程日记 2024/2/22 6:04:42

Jenkins解决Host key verification failed （2）

Jenkins解决Host key verification failed 分析原因情况 一、用OpenSSH的人都知ssh会把你每个你访问过计算机的公钥(public key)都记录在~/.ssh/known_hosts。当下次访问相同计算机时，OpenSSH会核对公钥。如果公钥不同，OpenSSH会发出警告，避免…...

编程日记 2024/2/22 5:59:38

C#，数值计算，矩阵的乔莱斯基分解（Cholesky decomposition）算法与源代码

一、安德烈路易斯乔尔斯基 安德烈路易斯乔尔斯基出生于法国波尔多以北的查伦特斯海域的蒙古扬。他在波尔多参加了Lyce e，并于1892年11月14日获得学士学位的第一部分，于1893年7月24日获得第二部分。1895年10月15日，乔尔斯基进入莱科尔理工学院…...

编程日记 2024/2/22 5:57:36

docker 备份 mysql

使用 Docker 执行 MySQL 备份是一个实用的操作，可以帮助你确保数据的安全性和可恢复性。这里有一步步的指导帮你完成： 1. 确定 MySQL 容器名称或 ID 首先，你需要知道运行 MySQL 数据库的容器的名称或 ID。可以通过下面的命令查看所有正在运…...

编程日记 2024/2/22 5:56:34

使用C# Net6连接国产达梦数据库记录

达梦官网：http://www.dameng.com/ 1 下载达梦并进行安装 下载地址：官网首页——服务与合作——下载中心（https://www.dameng.com/list_103.html） 根据需要自行下载需要的版本，测试版本为：x86 win64 DM8版…...

编程日记 2024/2/22 5:53:31

docker （八）-dockerfile制作镜像

一 dockerfile dockerfile通常包含以下几个常用命令： FROM ubuntu:18.04 WORKDIR /app COPY . . RUN make . CMD python app.py EXPOSE 80 FROM 打包使用的基础镜像WORKDIR 相当于cd命令，进入工作目录COPY 将宿主机的文件复制到容器内RUN 打包时执…...

编程日记 2024/2/22 5:51:29

springcloud-网关(gateway)

springcloud-网关(gateway) 概述 \Spring Cloud Gateway旨在提供一种简单而有效的方式来路由到API，并为其提供跨领域的关注，如：安全、监控/指标和容错 常用术语 Route（路由）: 网关的基本构件。它由一个ID、一个目的地…...

编程日记 2024/2/22 5:50:28

2.20 day2 QT

自由发挥登录窗口的应用场景，实现一个登录窗口界面 #include "widget.h"Widget::Widget(QWidget *parent): QWidget(parent) {//窗口相关设置this->setWindowTitle("登入页面"); //设置 窗口 标题this->setWindowIcon(QIcon("D:…...

编程日记 2024/2/22 5:48:26

【C++语法基础】4.分支和循环结构（✨新手推荐阅读）

前言 在C编程中，分支和循环结构是控制程序流程的基本工具。分支结构允许程序根据特定条件执行不同的代码块，而循环结构则允许程序重复执行某个代码块。 分支结构 if 语句 if 语句是最基本的分支结构，它根据条件的真假来决定是否执行某段代…...

编程日记 2024/2/22 5:47:25

朋友圈程序全开源版源码，附带系统搭建教程

前台一键发布图文，视频，音乐。发布内容支持定位或自定义位置信息。支持将发布内容设为广告模式消息站内通知或邮件通知。支持其他用户注册,支持其他用户发布文章,管理自己的文章。拥有丰富的后台管理功能，一键操作。安装环境 Nginx ≥1.22 …...

编程日记 2024/2/22 5:46:23

思维方式系列文章目录 -《清单革命》实践

思维方式系列文章目录 -《清单革命》 文章目录 思维方式系列文章目录 -《清单革命》前言一、《清单革命》思维导图二、清单制作原则 前言 请记住，现在开始心灵转变，人人都会犯错，而错误分为：无知之错、无能之错。 无知之错&#…...

编程日记 2024/2/22 5:45:22

RAID 创建使用以及ubuntu安装和使用zfs文件系统及Ubuntu软件安装

RAID 创建使用 部署 RAID 10 的学习 1. 搭建 RAID 10 就是 RAID 1 加上 RAID 0,准备四块磁盘，用于创建 RAID 10,配置vmware虚拟机，创建四个虚拟硬盘。 2. 检查磁盘信息 rootubuntu:~# ls /dev/sd* /dev/sda /dev/sda1 /dev/sda2 /dev/sda3 /dev/s…...

编程日记 2024/2/22 5:44:21

yarn常用命令小记

安装 npm install -g yarn查看版本 yarn -v初始化项目与依赖管理 yarn init&#xff1a;与npm init一样通过交互式会话生成一个新的package.jason文件以初始化项目&#xff1b;跳过会话可使用yarn init --yes&#xff0c;简写yarn init -yyarn add <package><versi…...

编程日记 2024/2/22 5:43:19

K8S认证|CKS题库+答案| 11. AppArmor

目录 11. AppArmor 免费获取并激活 CKA_v1.31_模拟系统 题目 开始操作&#xff1a; 1&#xff09;、切换集群 2&#xff09;、切换节点 3&#xff09;、切换到 apparmor 的目录 4&#xff09;、执行 apparmor 策略模块 5&#xff09;、修改 pod 文件 6&#xff09;、…...

编程新知 2025/7/8 17:08:14

数据链路层的主要功能是什么

数据链路层&#xff08;OSI模型第2层&#xff09;的核心功能是在相邻网络节点&#xff08;如交换机、主机&#xff09;间提供可靠的数据帧传输服务&#xff0c;主要职责包括&#xff1a; &#x1f511; 核心功能详解&#xff1a; 帧封装与解封装 封装&#xff1a; 将网络层下发…...

编程新知 2025/6/16 23:36:50

OpenPrompt 和直接对提示词的嵌入向量进行训练有什么区别

OpenPrompt 和直接对提示词的嵌入向量进行训练有什么区别 直接训练提示词嵌入向量的核心区别 您提到的代码： prompt_embedding = initial_embedding.clone().requires_grad_(True) optimizer = torch.optim.Adam([prompt_embedding...

编程新知 2025/7/4 0:50:01

Web 架构之 CDN 加速原理与落地实践

文章目录 一、思维导图二、正文内容&#xff08;一&#xff09;CDN 基础概念1. 定义2. 组成部分 &#xff08;二&#xff09;CDN 加速原理1. 请求路由2. 内容缓存3. 内容更新 &#xff08;三&#xff09;CDN 落地实践1. 选择 CDN 服务商2. 配置 CDN3. 集成到 Web 架构 &#xf…...

编程新知 2025/7/7 17:43:40

【生成模型】视频生成论文调研

工作清单 上游应用方向&#xff1a;控制、速度、时长、高动态、多主体驱动 类型工作基础模型WAN / WAN-VACE / HunyuanVideo控制条件轨迹控制ATI~镜头控制ReCamMaster~多主体驱动Phantom~音频驱动Let Them Talk: Audio-Driven Multi-Person Conversational Video Generation速…...

编程新知 2025/6/19 5:33:21

Linux离线（zip方式）安装docker

目录 基础信息操作系统信息docker信息 安装实例安装步骤示例 遇到的问题问题1&#xff1a;修改默认工作路径启动失败问题2 找不到对应组 基础信息 操作系统信息 OS版本&#xff1a;CentOS 7 64位 内核版本&#xff1a;3.10.0 相关命令&#xff1a; uname -rcat /etc/os-rele…...

编程新知 2025/6/16 16:58:04

JVM 内存结构 详解

内存结构 运行时数据区&#xff1a; Java虚拟机在运行Java程序过程中管理的内存区域。 程序计数器&#xff1a; ​ 线程私有&#xff0c;程序控制流的指示器&#xff0c;分支、循环、跳转、异常处理、线程恢复等基础功能都依赖这个计数器完成。 ​ 每个线程都有一个程序计数…...

编程新知 2025/7/8 10:15:49

【笔记】WSL 中 Rust 安装与测试完整记录

#工作记录 WSL 中 Rust 安装与测试完整记录 1. 运行环境 系统&#xff1a;Ubuntu 24.04 LTS (WSL2)架构&#xff1a;x86_64 (GNU/Linux)Rust 版本&#xff1a;rustc 1.87.0 (2025-05-09)Cargo 版本&#xff1a;cargo 1.87.0 (2025-05-06) 2. 安装 Rust 2.1 使用 Rust 官方安…...

编程新知 2025/7/6 21:07:56

SQL慢可能是触发了ring buffer

简介 最近在进行 postgresql 性能排查的时候，发现 PG 在某一个时间并行执行的 SQL 变得特别慢。最后通过监控监观察到并行发起得时间 buffers_alloc 就急速上升，且低水位伴随在整个慢 SQL，一直是 buferIO 的等待事件，此时也没有其他会话的争抢。SQL 虽然不是高效 SQL ，但…...

编程新知 2025/6/21 16:18:00

现有的 Redis 分布式锁库（如 Redisson）提供了哪些便利？

现有的 Redis 分布式锁库&#xff08;如 Redisson&#xff09;相比于开发者自己基于 Redis 命令&#xff08;如 SETNX, EXPIRE, DEL&#xff09;手动实现分布式锁&#xff0c;提供了巨大的便利性和健壮性。主要体现在以下几个方面&#xff1a; 原子性保证 (Atomicity)&#xff…...

编程新知 2025/6/20 16:41:45