当前位置： 首页 > article >正文

通过数据集微调LLM后怎么调用

article 2026/3/17 10:07:56

通过数据集微调LLM后怎么调用

在这里插入图片描述

1. 导入必要的库

from transformers import AutoTokenizer, AutoModelForCausalLM
  • AutoTokenizer：这是 transformers 库中的一个实用类，它能够根据指定的模型名称或路径自动选择合适的分词器。分词器的主要作用是将输入的文本字符串转换为模型可以处理的词元（token）序列，通常是一系列的整数 ID。
  • AutoModelForCausalLM：同样来自 transformers 库，用于自动加载适合因果语言模型任务的模型。因果语言模型的任务是根据输入的前文来预测下一个词，从而生成连贯的文本。

相关文章：

通过数据集微调LLM后怎么调用

通过数据集微调LLM后怎么调用 1. 导入必要的库 from transformers import AutoTokenizer, AutoModelForCausalLMAutoTokenizer：这是 transformers 库中的一个实用类，它能够根据指定的模型名称或路径自动选择合适的分词器。分词器的主要作用是将输入的文本字符串转换为模型可…...

编程日记 2026/3/16 0:44:36

thinkphp+mysql+cast解决text类型字段的文本型数字排序错误的方法 - 数据库文本字段排序ASC、DESC的失效问题

TP中使用cast order $lists AmdCommonTable::where(..............) ->field(*,CAST(w6 AS UNSIGNED) as sort) ->order(sort, asc) ->select() ->toArray(); 先转换为数字，再order by 效果对比 (1/2) 不ok - 直接order by 某字段 asc - 只能按照文本…...

编程日记 2026/3/16 2:36:07

【Manus资料合集】激活码内测渠道+《Manus Al：Agent应用的ChatGPT时刻》（附资源）

DeepSeek 之后，又一个AI沸腾，冲击的不仅仅是通用大模型。 ——全球首款通用AI Agent的破圈启示录 2025年3月6日凌晨，全球AI圈被一款名为Manus的产品彻底点燃。由Monica团队（隶属中国夜莺科技）推出的“全球首款通用AI…...

编程日记 2026/3/16 2:36:08

C++----红黑树map和set的封装

一、红黑树 1.概念 红黑树，是一种二叉搜索树，但在每个结点上增加一个存储位表示结点的颜色，可以是Red或Black。 通过对任何一条从根到叶子的路径上各个结点着色方式的限制，红黑树确保没有一条路径会比其他路径长出2倍&#xff0…...

编程日记 2026/3/16 0:59:51

【报错】微信小程序预览报错”60001“

1.问题描述 我在微信开发者工具写小程序时，使用http://localhost:8080是可以请求成功的，数据全都可以无报错，但是点击【预览】，用手机扫描二维码浏览时，发现前端图片无返回且报错60001（打开开发者模式查看日…...

编程日记 2026/3/15 13:29:26

软考 数据通信基础——信道

信道特性 带宽 在模拟信号里频率的差，表示信道能通过的频率 在数字信号里表示最大传输速率，单位用bit/s 通常用W表示 波特率 即码元速率，码元可看作一个时间周期 码元速率B2W也可写成B1/T 码元种类n和码元信息量个数N存在以下关系 Nl…...

编程日记 2026/3/15 13:35:22

windows 平台如何点击网页上的url ,会打开远程桌面连接服务器

你可以使用自定义协议方案（Protocol Scheme）实现网页上点击URL后自动启动远程桌面连接（mstsc），参考你提供的C代码思路，如下实现： 第一步：注册自定义协议 使用类似openmstsc://协议…...

编程日记 2026/3/3 0:57:23

uni-app开发的App和H5嵌套封装的App，以及原生App有什么区别

uni-app 开发的 App 和 H5 嵌套封装的 App 是两种不同的开发模式，虽然它们都可以实现跨平台开发，但在技术实现、性能、功能支持等方面有显著区别。以下是详细对比： 1. uni-app 开发的 App uni-app 是一个基于 Vue.js 的跨平台开发框架&#…...

编程日记 2026/2/23 23:25:53

Anaconda中虚拟环境安装g++和gcc相同版本

安装torchSDF的时候遇到的，这是g和gcc版本不一致的问题 gcc: fatal error: cannot execute cc1plus: execvp: No such file or directory compilation terminated.查看gcc, g版本 gcc --version | head -n1 g --version | head -n1发现gcc的是anaconda中的&#x…...

编程日记 2025/12/10 4:40:28

Docker数据管理，端口映射与容器互联

1.Docker 数据管理 在生产环境中使用 Docker，往往需要对数据进行持久化，或者需要在多个容器之间进行数据共享，这必然涉及容器的数据管理操作。 容器中的管理数据主要有两种方式： 数据卷（Data Volumns）&a…...

编程日记 2026/3/16 2:04:43

部署前后端项目

部署项目 liunx 软件安装 软件安装方式 在Linux系统中，安装软件的方式主要有四种，这四种安装方式的特点如下： 建议nginx、MySQL、Redis等等使用docker安装，会很便捷，这里只演示JDK、ngxin手动的安装 安装JDK 上述我…...

编程日记 2026/3/16 9:12:58

从零构建逻辑回归: sklearn 与自定义实现对比

文章目录 理论基础1. 逻辑回归模型2. 损失函数3. 梯度推导(1) 计算 ∂ L ∂ y ^ \frac{\partial L}{\partial \hat{y}} ∂y^​∂L​(2) 计算 ∂ y ^ ∂ z \frac{\partial \hat{y}}{\partial z} ∂z∂y^​​(3) 计算 ∂ L ∂ z \frac{\partial L}{\partial z} ∂z∂L​(4) 计…...

编程日记 2026/2/14 16:36:18

1256：献给阿尔吉侬的花束--BFS多组输入--memset

1256：献给阿尔吉侬的花束--BFS多组输入--memset 题目 解析代码【结构体】用book标记且计步数的代码[非结构体法] 题目 解析 标准的BFS题目，在多组输入中要做的就是先找到这一组的起点和终点，然后将其传给bfs，在多组输入中最易忘记…...

编程日记 2026/3/16 0:38:44

【JavaEE】SpringBoot快速上手，探秘 Spring Boot，搭建 Java 项目的智慧脚手架

1.Spring Boot介绍 在学习SpringBoot之前, 我们先来认识⼀下Spring ，我们看下Spring官⽅的介绍 可以看到，Spring让Java程序更加快速, 简单和安全。 Spring对于速度、简单性和⽣产⼒的关注使其成为世界上最流⾏的Java框架。 Spring官⽅提供了很多开源的…...

编程日记 2026/3/16 2:02:13

【C】初阶数据结构9 -- 直接插入排序

前面我们学习了数据结构二叉树，接下来我们将开启一个新的章节，那就是在日常生活中经常会用到的排序算法。 所谓排序算法就是给你一堆数据，让你从小到大（或从大到小）的将这些数据排成一个有序的序列（这些数据…...

编程日记 2026/3/16 1:26:10

Lottie与LottieFiles：快速为前端Web开发注入精美动画的利器

目录 Lottie与LottieFiles：快速为前端Web开发注入精美动画的利器 一、Lottie是什么？从GIF到JSON的动画技术演进 1、传统动画臃肿的Gif 2、Lottie的突破性创新 二、Lottie的核心组件解析（Lottie的技术架构） 1、Lottie核心三要…...

编程日记 2026/3/16 5:05:12

Spring boot创建时常用的依赖

新建SpringBoot Maven项目中pom常用依赖配置及常用的依赖的介绍 1.springboot项目的总(父)依赖大全 <parent><artifactId>spring-boot-dependencies</artifactId><groupId>org.springframework.boot</groupId><version>2.3.3.RELEASE<…...

编程日记 2026/3/6 10:18:56

音乐API

https://neteasecloudmusicapi.vercel.app/docs/#/https://neteasecloudmusicapi.vercel.app/docs/#/ 使用实例 所有榜单内容摘要 说明 : 调用此接口,可获取所有榜单内容摘要 接口地址 : /toplist/detail 调用例子 : /toplist/detail 获取歌单所有歌曲 说明 : 由于网易云…...

编程日记 2026/3/16 1:30:21

UML（统一建模语言）详解：从理论到实践

1. UML概述 1.1 定义与历史背景 统一建模语言&#xff08;Unified Modeling Language, UML&#xff09; 是一种标准化的可视化建模语言&#xff0c;用于描述、设计、构造和文档化软件系统。它诞生于1994-1997年&#xff0c;由Grady Booch、James Rumbaugh和Ivar Jacobson&…...

编程日记 2026/3/7 15:12:55

C语言练习题--洛谷P5143攀爬者

题目背景 HKE 考完 GDOI 之后跟他的神犇小伙伴们一起去爬山。 题目描述 他在地形图上标记了 N 个点&#xff0c;每个点 Pi​ 都有一个坐标 (xi​,yi​,zi​)。所有点对中&#xff0c;高度值 z 不会相等。HKE 准备从最低的点爬到最高的点&#xff0c;他的攀爬满足以下条件&am…...

编程日记 2026/2/14 15:34:47

MySQL常见字段值处理

一、数据拼接 1、CONCAT CONCAT(string1, string2, ..., stringN)&#xff0c;将两个或多个字符串连接在一起 自动忽略 NULL 值参数&#xff0c;仅拼接非 NULL 的字符串。 第一个参数必须是分隔符&#xff08;字符串&#xff09;。 SELECT CONCAT(Hello, , World); -- 输…...

编程日记 2025/12/11 12:18:25

OpenCV实现图像分割与无缝合并

一、图像分割核心方法 1、阈值分割 #include <opencv2/opencv.hpp> using namespace cv; int main() {Mat img imread("input.jpg", IMREAD_GRAYSCALE);Mat binary;threshold(img, binary, 127, 255, THRESH_BINARY); // 固定阈值分割imwrite("binary.…...

编程日记 2026/2/25 20:02:45

百度之星2023——公园

这道题目用bfs做反而麻烦了。 首先抓题目关键字&#xff0c;要求“最少”&#xff0c;那大概率就是最短路径问题。虽然这题是一个无权图&#xff0c;用bfs也能求最短路径&#xff0c;但是我们知道使用dijkstra是能够利用dist数组持久化最短路径的&#xff0c;相比每次都要bfs&…...

编程日记 2025/7/15 0:40:30

从零搭建微服务项目Pro（第3-1章——本地/OSS图片文件存取）

前言&#xff1a; 在小型demo项目中&#xff0c;一般将图片音频等字节流文件存放本地数据库&#xff0c;但企业级项目中&#xff0c;由于数据量容量有限&#xff0c;需要借助OSS来管理大规模文件。 OSS&#xff08;对象存储服务&#xff0c;Object Storage Service&#xff0…...

编程日记 2026/3/16 2:33:55

游戏引擎学习第147天

仓库:https://gitee.com/mrxiao_com/2d_game_3 上一集回顾 具体来说&#xff0c;我们通过隐式计算来解决问题&#xff0c;而不是像数字微分分析器那样逐步增加数据。我们已经涵盖了这个部分&#xff0c;并计划继续处理音量问题。不过&#xff0c;实际上我们现在不需要继续处理…...

编程日记 2026/3/16 2:33:55

Spring boot启动原理及相关组件

优质博文&#xff1a;IT-BLOG-CN 一、Spring Boot应用启动 一个Spring Boot应用的启动通常如下&#xff1a; SpringBootApplication Slf4j public class ApplicationMain {public static void main(String[] args) {ConfigurableApplicationContext ctx SpringApplication.…...

编程日记 2026/3/16 1:56:50

【Linux】信号处理以及补充知识

目录 一、信号被处理的时机&#xff1a; 1、理解&#xff1a; 2、内核态与用户态&#xff1a; 1、概念&#xff1a; 2、重谈地址空间&#xff1a; 3、处理时机&#xff1a; 补充知识&#xff1a; 1、sigaction&#xff1a; 2、函数重入&#xff1a; 3、volatile&…...

编程日记 2026/3/16 1:26:11

微服务——网关、网关登录校验、OpenFeign传递共享信息、Nacos共享配置以及热更新、动态路由

之前学习了Nacos&#xff0c;用于发现并注册、管理项目里所有的微服务&#xff0c;而OpenFeign简化微服务之间的通信&#xff0c;而为了使得前端可以使用微服务项目里的每一个微服务的接口&#xff0c;就应该将所有微服务的接口管理起来方便前端调用&#xff0c;所以有了网关。…...

编程日记 2026/3/9 4:56:44

【leetcode hot 100 19】删除链表的第N个节点

解法一&#xff1a;将ListNode放入ArrayList中&#xff0c;要删除的元素为num list.size()-n。如果num 0则将头节点删除&#xff1b;否则利用num-1个元素的next删除第num个元素。 /*** Definition for singly-linked list.* public class ListNode {* int val;* Lis…...

编程日记 2026/2/21 0:02:52

comctl32!ListView_OnSetItem函数分析LISTSUBITEM结构中的image表示图标位置

第一部分&#xff1a; BOOL ListView_SetSubItem(LV* plv, const LV_ITEM* plvi) { LISTSUBITEM lsi; BOOL fChanged FALSE; int i; int idpa; HDPA hdpa; if (plvi->mask & ~(LVIF_DI_SETITEM | LVIF_TEXT | LVIF_IMAGE | LVIF_STATE)) { …...

编程日记 2026/3/11 21:54:26