当前位置： 首页 > news >正文

【李宏毅】深度学习6：机器学习任务攻略

news 2026/1/31 1:50:07
  1. 如果在测试集上的效果不佳，应该要做什么？
  2. Optimization 如何选择？
  3. 解决 overfitting 的方法？

测试集上的效果不佳

  1. 看训练数据的loss，是不是模型本身就没训练好？
    • 问题：model 太简单了，func set 中没有满足条件的 func (我觉得这就是一种欠拟合的状态吧)
    • 解决方案：使用更复杂的模型
  2. 优化法 Optimization 没有选对，比如通过梯度下降，结果收敛到局部最优。
  • 如何确定是 model 不够复杂还是优化法没有选对呢？可以先选择更复杂的模型，看有没有提升。假设换了更复杂的模型，还是没有学好的话，表明是 Optimization 的问题。

备注：如果训练层数变多，在训练集上的 loss 先减小后增大，这是的过拟合问题吗？（不是，因为过拟合是相对测试集来讲的，所以不是过拟合 overfitting
在这里插入图片描述

overfitting 的解决方案

在这里插入图片描述

mismatch

mismatch 是说训练和测试数据分布不一致带来的。不能靠增加训练数据来解决
在这里插入图片描述

相关文章：

【李宏毅】深度学习6：机器学习任务攻略

如果在测试集上的效果不佳，应该要做什么？Optimization 如何选择？解决 overfitting 的方法？ 测试集上的效果不佳 看训练数据的loss，是不是模型本身就没训练好？ 问题：model 太简单了&#xff0c…...

编程日记 2023/9/10 5:19:45

如何使用SQL SERVER的OpenQuery

如何使用SQL SERVER的OpenQuery 一、OpenQuery使用说明二、 OpenQuery语法2.1 参数说明2.2注解 三、示例3.1 执行 SELECT 传递查询3.2 执行 UPDATE 传递查询3.3 执行 INSERT传递查询3.4 执行 DELETE 传递查询 一、OpenQuery使用说明 在指定的链接服务器上执行指定的传递查询。 …...

编程日记 2023/9/10 5:18:44

element-tree树结构-默认选中第一个节点高亮-根据id选中节点高亮

前言 tree树结构是在开发中经常使用的组件，比如区域树，楼层树，组织架构树，等等包含节点关系 实际开发可能需要我们一进到页面选中树形结构第一个节点，并且调用数据，来达到用户体验 在用户选择之后&#x…...

编程日记 2023/9/10 5:17:42

Python实操 PDF自动识别并提取Excel文件

最近几天，paddleOCR开发了新的功能，通过将图片中的表格提取出来，效果还不错，今天，作者按照步骤测试了一波。 首先，讲下这个工具是干什么用的：它的功能主要是针对一张完整的PDF图片，可…...

编程日记 2023/9/10 5:16:41

JVM监控和调优常用命令jps|jstat|jinfo|jmap|jhat|jstack实战

1.JVM监控和调优的主要目的 性能优化：通过JVM调优，可以提高Java应用程序的性能，减少响应时间，提高吞吐量，以更好地满足用户需求。性能优化可以加快应用程序的执行速度，减少延迟，提高用户体验。 内存管理：JVM负责管理Java应用程序的内存。正确的内存管理可以避免内存泄漏…...

编程日记 2023/9/10 5:15:40

chatglm2-6b在P40上做LORA微调 | 京东云技术团队

背景： 目前，大模型的技术应用已经遍地开花。最快的应用方式无非是利用自有垂直领域的数据进行模型微调。chatglm2-6b在国内开源的大模型上，效果比较突出。本文章分享的内容是用chatglm2-6b模型在集团EA的P40机器上进行垂直领域的LORA微调。 …...

编程日记 2023/9/10 5:14:39

WebGL 同时使用多幅纹理

目录 前言 ​编辑 示例代码 颜色矢量的分量乘法来计算两个纹素最终的片元颜色 注册事件响应函数：loadTexture（），最后一个参数是纹理单元编号。 请求浏览器加载图像： 配置纹理：loadTexture&#xff0…...

编程日记 2023/9/10 5:13:36

探索云计算和大数据分析的崛起：API行业的机遇与挑战【电商大数据与电商API接入】

I. 引言 随着云计算和大数据分析技术的快速发展，企业和个人对数据分析和处理的需求不断增加。在这个信息爆炸的时代，数据已成为企业决策和战略规划的重要基础。云计算提供了强大的计算和存储能力，使得大规模数据的处理和分析变得更加容易和高…...

编程日记 2023/9/10 5:12:35

android studio通过wifi、无线连接设备

AndroidStudio无线wifi调试设备_android studio wifi_zwylovemzj的博客-CSDN博客 使用​​adbWireless​​工具，其能够让手机用无线来取代USB连接而使用ADB工具 1. 手机需要与电脑在同一局域网内 2. 把adbWireless安装到手机上，并开启，上面…...

编程日记 2023/9/10 5:11:34

kafka 3.5 主题分区ISR伸缩源码

ISR(In-sync Replicas)：保持同步的副本 OSR(Outof-sync Replicas)：不同步的副本。最开始所有的副本都在ISR中，在kafka工作的过程中，如果某个副本同步速度慢于replica.lag.time.max.ms指定的阈值，则被踢出ISR存入OSR&am…...

编程日记 2023/9/10 5:10:33

1-centOS7搭建伪分布式

前言：虚拟机快照的使用 VMware Workstation 软件可以用快照进行迅速的虚拟机状态的切换 ※. 类似于虚拟机备份， 可以使用备份进行快速恢复。 比如没安装jdk之前拍摄快照来备份 ※. 若jdk没安装好或者jdk环境变量配置的有问题， 可以用安装之…...

编程日记 2023/9/10 5:09:32

对开源自动化测试平台MeterSphere的使用感触

1：该平台可以通过接口，参数，配置的维护，然后继续接口自动化“一键测试”，功能还是挺强大的，具体的使用需要研究 MeterSphere的官网：MeterSphere - 专业测试云 2：一键测试在生产环境…...

编程日记 2023/9/10 5:08:31

Spring boot 第一个程序

新建工程 选择spring-boot版本 右键创建类TestController： 代码如下： package com.example.demo; import org.springframework.web.bind.annotation.GetMapping; import org.springframework.web.bind.annotation.RequestMapping; import org.springf…...

编程日记 2023/9/10 5:07:30

【SpringMVC】实现增删改查(附源码)

目录 引言 一、前期准备 1.1.搭建Maven环境 1.2.导入pom.xml依赖 1.3.导入配置文件 ①jdbc.properties ②generatorConfig.xml ③log4j2.xml ④spring-mybatis.xml ⑤spring-context.xml ⑥spring-mvc.xml ⑦修改web.xml文件 二、逆向生成增删改查 2.1.导入相关u…...

编程日记 2023/9/10 5:06:29

理财是什么？怎样学习理财？

大家好，我是财富智星，今天跟大家分享一下理财是什么？怎样学习理财的方法。 一、理财的基本原则 1、理财应注重投资而不是投机，要与时间为友。 让我们先考虑以下问题：什么样的回报才算是真正的高回报？假设有…...

编程日记 2023/9/10 5:05:28

华为云云耀云服务器L实例评测 | 开启OPC UA之旅

OPC Unified Architecture (OPC UA)是一种用于工业自动化的M2M协议(Machine-to-machine)，具有平台独立性，在Windows和Linux上都可以运行。随着云服务在工业现场的不断普及，OPCUA服务也开始大量部署在云端。 本文以华为云云耀云服务器L为基础…...

编程日记 2023/9/10 5:04:28

帝国CMS灵动标签如何调用$ecms_hashur[‘ehref‘]函数

我们在二次开发时，后台调用链接就需要加上帝国CMS的$ecms_hashur[ehref]函数，这是帝国CMS后台的安全函数，防止外部直接访问后台页面，直接强制访问后台链接就会提示“非法来源”。 我的站长站分享下制作自定义php页面，用帝国CMS灵动标签如何调用$ecms_hashur[ehref]函数方…...

编程日记 2023/9/10 5:03:27

ES6 拓展（下）

一、函数的拓展 1.1、默认参数 在ES5中设置默认参数： function func(words, name) {name name || "闷墩儿";console.log(words, name); } func("大家好！我是"); func("大家好！我是", "憨憨");func(…...

编程日记 2023/9/10 5:02:24

TouchGFX之自定义触发条件和操作

通过TouchGFX Designer，您可以自己定义具有触发条件和操作的交互组件。 自定义容器创建自定义触发条件：通过自定义容器的属性选项卡添加自定义触发条件 使用交互系统发送自定义触发条件： 通过自定义容器的“交互”选项卡，创建新的…...

编程日记 2023/9/10 5:01:23

Linux防火墙(iptables)

一、linux的防火墙组成 linux的防火墙由netfilter和iptables组成。用户空间的iptables制定防火墙规则，内核空间的netfilter实现防火墙功能。 netfilter（内核空间）位于Linux内核中的包过滤防火墙功能体系，称为Linux防火墙的“内核…...

编程日记 2023/9/10 5:00:20

2025年能源电力系统与流体力学国际会议 (EPSFD 2025)

2025年能源电力系统与流体力学国际会议（EPSFD 2025）将于本年度在美丽的杭州盛大召开。作为全球能源、电力系统以及流体力学领域的顶级盛会，EPSFD 2025旨在为来自世界各地的科学家、工程师和研究人员提供一个展示最新研究成果、分享实践经验及…...

编程新知 2026/1/23 7:37:38

Qwen3-Embedding-0.6B深度解析：多语言语义检索的轻量级利器

第一章 引言：语义表示的新时代挑战与Qwen3的破局之路 1.1 文本嵌入的核心价值与技术演进 在人工智能领域，文本嵌入技术如同连接自然语言与机器理解的“神经突触”——它将人类语言转化为计算机可计算的语义向量，支撑着搜索引擎、推荐系统、…...

编程新知 2025/11/6 8:47:31

镜像里切换为普通用户

如果你登录远程虚拟机默认就是 root 用户，但你不希望用 root 权限运行 ns-3（这是对的，ns3 工具会拒绝 root），你可以按以下方法创建一个 非 root 用户账号 并切换到它运行 ns-3。 一次性解决方案：创建非 roo…...

编程新知 2025/9/11 11:00:29

ardupilot 开发环境eclipse 中import 缺少C++

目录 文章目录 目录摘要1.修复过程摘要 本节主要解决ardupilot 开发环境eclipse 中import 缺少C++，无法导入ardupilot代码，会引起查看不方便的问题。如下图所示 1.修复过程 0.安装ubuntu 软件中自带的eclipse 1.打开eclipse—Help—install new software 2.在 Work with中…...

编程新知 2026/1/29 21:38:36

【C++从零实现Json-Rpc框架】第六弹 —— 服务端模块划分

一、项目背景回顾 前五弹完成了Json-Rpc协议解析、请求处理、客户端调用等基础模块搭建。 本弹重点聚焦于服务端的模块划分与架构设计，提升代码结构的可维护性与扩展性。 二、服务端模块设计目标 高内聚低耦合：各模块职责清晰，便于独立开发…...

编程新知 2025/10/13 4:15:41

MySQL用户和授权

开放MySQL白名单 可以通过iptables-save命令确认对应客户端ip是否可以访问MySQL服务： test: # iptables-save | grep 3306 -A mp_srv_whitelist -s 172.16.14.102/32 -p tcp -m tcp --dport 3306 -j ACCEPT -A mp_srv_whitelist -s 172.16.4.16/32 -p tcp -m tcp -…...

编程新知 2025/8/25 19:12:45

初学 pytest 记录

安装 pip install pytest用例可以是函数也可以是类中的方法 def test_func():print()class TestAdd: # def __init__(self): 在 pytest 中不可以使用__init__方法 # self.cc 12345 pytest.mark.api def test_str(self):res add(1, 2)assert res 12def test_int(self):r…...

编程新知 2026/1/21 19:46:26

Java毕业设计：WML信息查询与后端信息发布系统开发

JAVAWML信息查询与后端信息发布系统实现 一、系统概述 本系统基于Java和WML(无线标记语言)技术开发，实现了移动设备上的信息查询与后端信息发布功能。系统采用B/S架构，服务器端使用Java Servlet处理请求，数据库采用MySQL存储信息&#xff0…...

编程新知 2025/10/27 13:29:11

Go 并发编程基础：通道（Channel）的使用

在 Go 中，Channel 是 Goroutine 之间通信的核心机制。它提供了一个线程安全的通信方式，用于在多个 Goroutine 之间传递数据，从而实现高效的并发编程。 本章将介绍 Channel 的基本概念、用法、缓冲、关闭机制以及 select 的使用。 一、Channel…...

编程新知 2025/12/4 8:54:35

【 java 虚拟机知识 第一篇 】

目录 1.内存模型 1.1.JVM内存模型的介绍 1.2.堆和栈的区别 1.3.栈的存储细节 1.4.堆的部分 1.5.程序计数器的作用 1.6.方法区的内容 1.7.字符串池 1.8.引用类型 1.9.内存泄漏与内存溢出 1.10.会出现内存溢出的结构 1.内存模型 1.1.JVM内存模型的介绍 内存模型主要分…...

编程新知 2026/1/28 9:02:11