当前位置： 首页 > news >正文

书生·浦语大模型实战营-学习笔记1

news 2026/2/11 1:45:12

目录

  • 书生·浦语大模型全链路开源体系
    • 数据集
    • 预训练
    • 微调
    • 评测
    • 部署
    • 多智能体

视频地址：
(1)书生·浦语大模型全链路开源体系

开源工具github：
https://github.com/InternLM/InternLM

书生·浦语大模型全链路开源体系

在这里插入图片描述

这次视频中介绍了由上海人工智能实验室OpenMMLab开发的大模型全链路体系框架，框架涵盖了大模型的生命周期中数据集构建、预训练、微调、部署、评测到应用的所有会用到的功能。

这套全链路开放体系是我见到国内最全面的大模型体系框架，个人认为，这套框架能给国内的大模型科研人员提供实验平台，减少科研人员在部署环境上花费的时间。非常感谢OpenMMLab能提供这次公开课程和开源这套全链路体系框架。

数据集

在这里插入图片描述在这里插入图片描述

预训练

在这里插入图片描述

微调

在这里插入图片描述
在这里插入图片描述
这里最亮眼的是进行了极致的显存优化，能在8GB的消费级显卡上微调大模型，紧跟端侧大模型的热点。使资源不足的研究机构也能够进行大模型的实验。
在这里插入图片描述

评测

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

部署

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

多智能体

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

相关文章：

书生·浦语大模型实战营-学习笔记1

目录 书生浦语大模型全链路开源体系数据集预训练微调评测部署多智能体 视频地址： (1)书生浦语大模型全链路开源体系 开源工具github： https://github.com/InternLM/InternLM 书生浦语大模型全链路开源体系 这次视频中介绍了由上海人工智能实验室OpenMMLa…...

编程日记 2024/1/12 12:27:18

ELF解析03 - 加载段

本文主要讨论 mmap 函数以及如何使用 mmap 函数来加载一个 ELF 的可加载段。 01纠错 Android 8 及以后是会读取 section header 的，但不是所有的 section 都会读取。 https://cs.android.com/android/platform/superproject/main//main:bionic/linker/linker_phdr…...

编程日记 2024/1/12 12:24:16

Mysql——索引相关的数据结构

索引 引入 我们知道，数据库查询是数据库的最主要功能之一。我们都希望查询数据的速度能尽可能的快，因此数据库系统的设计者会从查询算法的角度进行优化。最基本的查询算法当然是顺序查找（linear search），这种复杂度为…...

编程日记 2024/1/12 12:22:15

无代码DIY图像检索

软件环境准备 可参见《HuggingFists-低代码玩转LLM RAG-准备篇》中的HuggingFists安装及Milvus安装。 流程环境准备 图片准备 进入HuggingFists内置的文件系统，数据源->文件系统->sengee_fs_settings_201创建Image文件夹将事先准备的多张相同或不同种类的图…...

编程日记 2024/1/12 12:21:14

Elasticsearch--Master选举

角色 主节点（active master）：一般指的是活跃的主节点，避免负载任务，主节点主要用来管理集群，专用master节点仍将充当协调节点 候选节点（master-eligible nodes）：默认具备…...

编程日记 2024/1/12 12:19:13

微服务实战系列之Filter

前言 Filter，又名过滤器，当然不是我们日常中见到的，诸如此类构件： 而应该是微服务中常使用的，诸如此类（图片来自官网，点击可查看原图）： 一般用于字符编码转换&#xf…...

编程日记 2024/1/12 12:16:10

使用GPT大模型调用工具链

本文特指openai使用sdk的方式调用工具链。 安装openai pip install openai export OPENAI_API_KEY"YOUR OPENAI KEY" 定义工具函数 from openai import OpenAI import jsonclient OpenAI() #工具函数 def get_current_weather(location, unit"fahrenheit&q…...

编程日记 2024/1/12 12:15:09

C语言实现bmp图像底层数据写入与创建

要用C语言实现bmp图像底层数据写入进而创建一张bmp图像，需要对bmp图像文件格式非常了解，如果不太熟悉bmp图像文件格式请先移步bmp图像文件格式超详解 创建bmp图像文件的方式有很多，比如用halcon，用qt，这些都是把已经画…...

编程日记 2024/1/12 12:14:08

基于BP神经网络的定位算法，基于BP神经网络定位预测

目录 摘要 BP神经网络参数设置及各种函数选择 参数设置 训练函数 传递函数 学习函数 性能函数 显示函数 前向网络创建函数 BP神经网络训练窗口详解 训练窗口例样 训练窗口四部详解 基于BP神经网络的定位算法，基于BP神经网络定位预测 代码下载：基于BP神经网络的定位算法，基于…...

编程日记 2024/1/12 12:13:07

Java Http各个请求类型详细介绍

1. 前言 在Spring Boot框架中，HTTP请求类型是构建Web应用程序的重要组成部分。常见的请求类型包括GET、POST、PUT和DELETE，每种类型都有其特定的用途和特点。本文将详细比较这四种请求类型，帮助您在开发过程中做出明智的选择。 2. GET请求…...

编程日记 2024/1/12 12:12:06

python函数装饰器参数统计调用时间和次数

1 python函数装饰器参数统计调用时间和次数 python在函数装饰器外层定义一个函数生成封闭作用域来保存装饰器入参，供装饰器使用。 1.1 装饰器统计调用时间和次数 描述 通过类的可调用实例装饰器来统计函数每次调用时间和总调用时间，以及调用次数。 …...

编程日记 2024/1/12 12:11:05

机器学习之集成学习AdaBoost

概念 AdaBoost（Adaptive Boosting）是一种迭代的集成学习算法，其主要目标是通过组合多个弱学习器来创建一个强大的模型。以下是AdaBoost算法的主要步骤： 初始化样本权重： 为每个训练样本分配相等的权重，通常设为 w i = 1 N w_i = \frac{1}{N} w...

编程日记 2024/1/12 12:10:04

行云部署成长之路 -- 慢 SQL 优化之旅 | 京东云技术团队

当项目的SQL查询慢得像蜗牛爬行时，用户的耐心也在一点点被消耗，作为研发，我们可不想看到这样的事。这篇文章将结合行云部署项目的实践经验，带你走进SQL优化的奇妙世界，一起探索如何让那些龟速的查询飞起来！…...

编程日记 2024/1/12 12:06:59

Windows权限提升

0x01 简介 提权可分为纵向提权与横向提权： 纵向提权：低权限角色获得高权限角色的权限； 横向提权：获取同级别角色的权限。 Windows常用的提权方法有：系统内核溢出漏洞提权、数据库提权、错误的系统配置提权、组策略首…...

编程日记 2024/1/12 12:02:56

win系统搭建Minecraft世界服务器，MC开服教程，小白开服教程

Windows系统搭建我的世界世界服务器，Minecraft开服教程，小白开服教程，MC 1.19.4版本服务器搭建教程。 此教程使用 Mohist 1.19.4 服务端，此服务端支持Forge模组和Bukkit/Spigot/Paper插件，如果需要开其他服务端也可参…...

编程日记 2024/1/12 12:00:54

word2vec中的CBOW和Skip-gram

word2cev简单介绍 Word2Vec是一种用于学习词嵌入（word embeddings）的技术，旨在将单词映射到具有语义关联的连续向量空间。Word2Vec由Google的研究员Tomas Mikolov等人于2013年提出，它通过无监督学习从大规模文本语料库中学习词汇…...

编程日记 2024/1/12 11:58:53

在ios上z-index不起作用问题的总结

最近在维护一个H5老项目时，遇到一个问题，就是在ios上z-index不起作用，在安卓上样式都是好的。 项目的架构组成是vue2.x vux vuex vue-router等 用的UI组件库是vux 在页面中有一个功能点，就是点选择公司列表的时候，会…...

编程日记 2024/1/12 11:57:52

力扣labuladong一刷day59天动态规划

力扣labuladong一刷day59天动态规划 文章目录 力扣labuladong一刷day59天动态规划一、509. 斐波那契数二、322. 零钱兑换 一、509. 斐波那契数 题目链接：https://leetcode.cn/problems/fibonacci-number/description/ 思路：这是非常典型的一道题&#x…...

编程日记 2024/1/12 11:54:49

pyenv环境找不到sqlite:No module named _sqlite3

前言 一般遇到这个问题都在python版本管理或者虚拟环境切换中遇到，主要有两个办法解决，如下： 解决方法1 如果使用的pyenv管理python环境时遇到没有_sqlite3 库，可以将当前pyenv的python环境卸载 pyenv uninstall xxx然后在系统…...

编程日记 2024/1/12 11:50:46

Histone H3K4me2 Antibody, SNAP-Certified™ for CUTRUN

EpiCypher是一家为表观遗传学和染色质生物学研究提供高质量试剂和工具的专业制造商。EpiCypher推出的CUT&RUN级别的Histone H3K4me2 Antibody符合EpiCypher的批次特异性SNAP-CertifiedTM标准，在CUT&RUN中具有特异性和高效的靶点富集。通过SNAP-CUTANA™K-Me…...

编程日记 2024/1/12 11:48:44

Docker 离线安装指南

参考文章 1、确认操作系统类型及内核版本 Docker依赖于Linux内核的一些特性，不同版本的Docker对内核版本有不同要求。例如，Docker 17.06及之后的版本通常需要Linux内核3.10及以上版本，Docker17.09及更高版本对应Linux内核4.9.x及更高版本。…...

编程新知 2026/2/7 6:10:30

RocketMQ延迟消息机制

两种延迟消息 RocketMQ中提供了两种延迟消息机制 指定固定的延迟级别 通过在Message中设定一个MessageDelayLevel参数，对应18个预设的延迟级别指定时间点的延迟级别 通过在Message中设定一个DeliverTimeMS指定一个Long类型表示的具体时间点。到了时间点后&#xf…...

编程新知 2026/2/10 7:12:07

IGP（Interior Gateway Protocol，内部网关协议）

IGP（Interior Gateway Protocol，内部网关协议） 是一种用于在一个自治系统（AS）内部传递路由信息的路由协议，主要用于在一个组织或机构的内部网络中决定数据包的最佳路径。与用于自治系统之间通信的 EGP&…...

编程新知 2025/10/12 11:54:26

PPT|230页| 制造集团企业供应链端到端的数字化解决方案：从需求到结算的全链路业务闭环构建

制造业采购供应链管理是企业运营的核心环节，供应链协同管理在供应链上下游企业之间建立紧密的合作关系，通过信息共享、资源整合、业务协同等方式，实现供应链的全面管理和优化，提高供应链的效率和透明度，降低供应链的成…...

编程新知 2026/1/30 22:07:56

深入理解JavaScript设计模式之单例模式

目录 什么是单例模式为什么需要单例模式常见应用场景包括 单例模式实现透明单例模式实现不透明单例模式用代理实现单例模式javaScript中的单例模式使用命名空间使用闭包封装私有变量 惰性单例通用的惰性单例 结语 什么是单例模式 单例模式（Singleton Pattern&#…...

编程新知 2026/1/31 17:09:43

Frozen-Flask ：将 Flask 应用“冻结”为静态文件

Frozen-Flask 是一个用于将 Flask 应用“冻结”为静态文件的 Python 扩展。它的核心用途是：将一个 Flask Web 应用生成成纯静态 HTML 文件，从而可以部署到静态网站托管服务上，如 GitHub Pages、Netlify 或任何支持静态文件的网站服务器。 &am…...

编程新知 2025/12/5 20:57:13

UR 协作机器人「三剑客」：精密轻量担当（UR7e）、全能协作主力（UR12e）、重型任务专家（UR15）

UR协作机器人正以其卓越性能在现代制造业自动化中扮演重要角色。UR7e、UR12e和UR15通过创新技术和精准设计满足了不同行业的多样化需求。其中，UR15以其速度、精度及人工智能准备能力成为自动化领域的重要突破。UR7e和UR12e则在负载规格和市场定位上不断优化&#xf…...

编程新知 2026/2/2 2:47:37

【生成模型】视频生成论文调研

工作清单 上游应用方向：控制、速度、时长、高动态、多主体驱动 类型工作基础模型WAN / WAN-VACE / HunyuanVideo控制条件轨迹控制ATI~镜头控制ReCamMaster~多主体驱动Phantom~音频驱动Let Them Talk: Audio-Driven Multi-Person Conversational Video Generation速…...

编程新知 2025/9/9 8:40:47

Yolov8 目标检测蒸馏学习记录

yolov8系列模型蒸馏基本流程，代码下载：这里本人提交了一个demo:djdll/Yolov8_Distillation: Yolov8轻量化_蒸馏代码实现 在轻量化模型设计中，**知识蒸馏（Knowledge Distillation）**被广泛应用，作为提升模型…...

编程新知 2026/1/25 7:20:01

C++ 设计模式 《小明的奶茶加料风波》

👨‍🎓 模式名称：装饰器模式（Decorator Pattern） 👦 小明最近上线了校园奶茶配送功能，业务火爆，大家都在加料： 有的同学要加波霸 🟤，有的要加椰果…...

编程新知 2026/1/31 8:45:21