当前位置： 首页 > news >正文

机器学习笔记 - 使用CLIP在没有数据的情况下创建图像分类器

news 2026/2/10 8:48:01

        想象一下，如果我们现在需要对人们是否戴眼镜进行分类，但您没有数据或资源来训练自定义模型。该怎么办？这里我们了解如何使用预先训练的 CLIP 模型来创建自定义分类器，而无需任何培训。这种方法称为零样本图像分类，它可以对原始 CLIP 模型训练期间未明确看到的类别图像进行分类。

一、CLIP理论背景

        CLIP（对比语言-图像预训练）模型由OpenAI开发，是一种多模态视觉和语言模型。它将图像和文本描述映射到相同的潜在空间，从而允许它确定图像和描述是否匹配。CLIP 采用对比方式进行训练，以预测哪些字幕对应于来自互联网的超过 4 亿个图像文本对的数据集中的哪些图像。令人难以置信的是，由预训练的 CLIP 生成的分类器被证明可以实现与监督模型基线竞争的结果，这里我们将利用这个预训练的模型来生成眼镜检测器。

        CLIP 模型由图像编码器和文本编码器组成（下图）。在训练期间，通过图像编码器（ResNet 变体或 ViT）处理一批图像以获得图像表示张量（嵌入）。同时，它们对应的描述通过文本编码器（Transformer）进行处理，得到文本嵌入。CLIP 模型经过训练可以预

相关文章：

机器学习笔记 - 使用CLIP在没有数据的情况下创建图像分类器

想象一下，如果我们现在需要对人们是否戴眼镜进行分类，但您没有数据或资源来训练自定义模型。该怎么办？这里我们了解如何使用预先训练的 CLIP 模型来创建自定义分类器，而无需任何培训。这种方法称为零样本图像分类，它可以对原始 CLIP 模型训练期间未明确看到的类别图像进行…...

编程日记 2023/8/8 8:26:17

42.利用 牛顿迭代法解非线性高维方程组（matlab程序）

1.简述 若向量记号为X,方程组就可以写成F(X)0的形式。 我们知道，对于一元函数的牛顿迭代法求根公式 类似的，对于多元函数求根公式 其中X是向量，是非线性方程组对应的雅可比矩阵。 具体求解的时候，我们可以先通过绘图命令绘制图形…...

编程日记 2023/8/8 8:25:16

我在leetcode用动态规划炒股

事情是这样的，突然兴起的我在letcode刷题 121. 买卖股票的最佳时机122. 买卖股票的最佳时机 II123. 买卖股票的最佳时机 III 以上三题。 1. 121. 买卖股票的最佳时机 1.1. 暴力遍历，两次遍历 1.1.1. 算法代码 public class Solution {public int Ma…...

编程日记 2023/8/8 8:24:14

rust实践-异步并发socket通信

客户端 [package] name = "rust_client" version = "0.1.0" edition = "2021"[dependencies] tokio = {version = "1.14.0", features = ["full"] }use tokio::io::{self, AsyncReadExt, AsyncWriteExt}; use tokio::net::…...

编程日记 2023/8/8 8:23:13

SolidUI社区-根据Prompt打造人设

背景 随着文本生成图像的语言模型兴起，SolidUI想帮人们快速构建可视化工具，可视化内容包括2D,3D,3D场景，从而快速构三维数据演示场景。SolidUI 是一个创新的项目，旨在将自然语言处理（NLP）与计算机图形学相…...

编程日记 2023/8/8 8:22:12

设计模式行为型——观察者模式

目录 什么是观察者模式 观察者模式的实现 观察者模式角色 观察者模式类图 观察者模式举例 观察者模式代码实现 观察者模式的特点 优点 缺点 使用场景 注意事项 实际应用 什么是观察者模式 观察者模式（Observer Pattern）是一种行为型设计模式…...

编程日记 2023/8/8 8:21:11

Kernel Exception导致手机重启案例分析

和你一起终身学习，这里是程序员Android 经典好文推荐，通过阅读本文，您将收获以下知识点: 一、高温触发 Kernel Exception 重启问题二、解决方案三、提高电池温度方案 一、 高温触发 Kernel Exception 重启问题 手机 电池温度 默认60度以上高温…...

编程日记 2023/8/8 8:20:09

C++入门篇5---模板

相信大家都遇到过这么一种情况，为了满足不同类型的需求，我们要写多个功能相同，参数类型不同的代码，为此，C引入了泛型编程这一概念，而模板就是实现泛型编程的基础，其实本质就是我们写一个类似”模…...

编程日记 2023/8/8 8:19:07

L2CS-Net: 3D gaze estimation

L2CS-Net: Fine-Grained Gaze Estimation in Unconstrained Environments论文解析 摘要1. 简介2. Related Work3. METHOD3.1 Proposed loss function3.2 L2CS-Net 结构3.3 数据集3.4 评价指标 4. 实验4.1 实验结果 论文地址：L2CS-Net: Fine-Grained Gaze Estimation…...

编程日记 2023/8/8 8:18:05

kenernetes/k8s笔试面试

k8s的基础概念 k8s本质是一个容器编排系统，可以管理容器的生命周期，应用部署，更新，维护，应用提供服务，扩容缩容应用，故障自愈。 k8s与docker的关系 docker:是一种轻量级的虚拟化技术。运维层…...

编程日记 2023/8/8 8:17:03

我们真的是在做数据治理吗

我们真的是在做数据治理吗？ 什么是数据治理？ 数据治理和数据管理有什么区别？ 相信即使是考过数据治理工程师的人，面对这2个问题也仍然会有这个疑问。 目前国际和国内对于数据治理没有明确统一的定义，对于数据治理的服…...

编程日记 2023/8/8 8:16:02

聊聊汽车电子的话题

当谈到汽车电子时，有许多有趣的话题可以探讨。以下是一些可能感兴趣的话题： 自动驾驶技术：自动驾驶技术正变得越来越先进，它们如何在汽车中实现？它们将如何改变我们的交通方式以及对道路安全的影响？ 电动汽…...

编程日记 2023/8/8 8:15:01

ThinkPHP6企业OA办公系统

有需要请加文章底部Q哦 可远程调试 ThinkPHP6企业OA办公系统 一 介绍 勾股OA基于ThinkPHP6开发，前端Layui，数据库mysql，是一款实用的企业办公系统。可多角色登录，集成了系统设置、人事管理、消息管理、审批管理、日常办公、客户…...

编程日记 2023/8/8 8:14:00

PPS Tester测量原理和实施方法

怿星科技发布了新品PPS Tester，这是一款基于1PPS方法的时间同步精度测试设备。PPS Tester由硬件模块ETS2110和上位机软件ePPSTester构成。本文将围绕此设备的应用场景，介绍相关概念和设备使用方法。 什么是时间同步？ 时间同步就是采取某项技…...

编程日记 2023/8/8 8:12:58

浅谈新电改背景下电网企业综合能源服务商业模式研究及发展方向

安科瑞 华楠 摘要: 新电改方案实施后，由于输配电价的改革和售电侧的放开，电网企业的盈利模式也随之发生了变化。这就要求电网企业转变服务理念与经营方式，来寻求竞争优势。基于“魏朱六要素商业模式”模型，对电网企业综合能源服务…...

编程日记 2023/8/8 8:11:57

SpringBoot + Docker 实现一次构建到处运行~

一、容器化部署的好处 图片 Docker 作为一种新兴的虚拟化方式，它可以更高效的利用系统资源，不需要进行硬件虚拟以及运行完整操作系统等额外开销。 传统的虚拟机技术启动应用服务往往需要数分钟，而 Docker 容器应用，由于直接运行…...

编程日记 2023/8/8 8:10:57

clang-format格式化代码

1. clang-format简介 Clang-Format可用于格式化（排版）多种不同语言的代码。其自带的排版格式主要有：LLVM, Google, Chromium, Mozilla, WebKit等; 利用style参数配置风格。通过编写 .clang-format 文件，可以实现代码风格的配置。…...

编程日记 2023/8/8 8:09:55

品牌宣传与媒体传播是声誉管理的主要方式之一

企业声誉是现如今影响品牌信任度、客户忠诚度的重要因素，也被视为企业的一种无形资，更影响着企业未来的发展。因此，企业声誉管理也日渐成为企业管理的重要课题之一，尤其在品牌营销管理领域。 什么是声誉管理？声誉管理有…...

编程日记 2023/8/8 8:08:54

2023年8月7日-8月13日，（上午熟悉公司代码，周一到周五晚上优先工作所急视频教程，其他业余时间进行ue视频教程，为独立游戏做准备）

按照规划，上午熟悉公司源码，下午进行filament和ue渲染，晚上写工作代码。回家后泛读pbrt或者其他书籍催眠。 业余学习ue的各种视频教程，为独立游戏做准备（公司也实行末位淘汰，给自己留条后路）。累…...

编程日记 2023/8/8 8:07:53

Vue3 第二节 Vue3的响应式

1.Vue3的响应式原理 2.ref函数和reactive函数的对比 3.setup注意点 一.Vue3的响应式原理 1.Vue2.x中的响应式原理 ① 实现原理 对象类型：通过Object.defineProperty() 对属性的读取，修改进行拦截（数据劫持）数组类型&#xf…...

编程日记 2023/8/8 8:06:52

Android Wi-Fi 连接失败日志分析

1. Android wifi 关键日志总结 (1) Wi-Fi 断开 (CTRL-EVENT-DISCONNECTED reason3) 日志相关部分： 06-05 10:48:40.987 943 943 I wpa_supplicant: wlan0: CTRL-EVENT-DISCONNECTED bssid44:9b:c1:57:a8:90 reason3 locally_generated1解析： CTR…...

编程新知 2025/9/14 19:44:52

从WWDC看苹果产品发展的规律

WWDC 是苹果公司一年一度面向全球开发者的盛会，其主题演讲展现了苹果在产品设计、技术路线、用户体验和生态系统构建上的核心理念与演进脉络。我们借助 ChatGPT Deep Research 工具，对过去十年 WWDC 主题演讲内容进行了系统化分析，形成了这份…...

编程新知 2026/2/2 21:52:33

【力扣数据库知识手册笔记】索引

索引 索引的优缺点 优点1. 通过创建唯一性索引，可以保证数据库表中每一行数据的唯一性。2. 可以加快数据的检索速度（创建索引的主要原因）。3. 可以加速表和表之间的连接，实现数据的参考完整性。4. 可以在查询过程中，…...

编程新知 2026/1/25 4:36:37

Mybatis逆向工程，动态创建实体类、条件扩展类、Mapper接口、Mapper.xml映射文件

今天呢，博主的学习进度也是步入了Java Mybatis 框架，目前正在逐步杨帆旗航。 那么接下来就给大家出一期有关 Mybatis 逆向工程的教学，希望能对大家有所帮助，也特别欢迎大家指点不足之处，小生很乐意接受正确的建议&…...

编程新知 2026/1/31 15:00:15

【Java_EE】Spring MVC

目录 Spring Web MVC ​编辑注解 RestController RequestMapping RequestParam RequestParam RequestBody PathVariable RequestPart 参数传递 注意事项 ​编辑参数重命名 RequestParam ​编辑​编辑传递集合 RequestParam 传递JSON数据 ​编辑RequestBody ​…...

编程新知 2026/2/1 16:32:53

如何在最短时间内提升打ctf（web)的水平？

刚刚刷完2遍 bugku 的 web 题，前来答题。 每个人对刷题理解是不同，有的人是看了writeup就等于刷了，有的人是收藏了writeup就等于刷了，有的人是跟着writeup做了一遍就等于刷了，还有的人是独立思考做了一遍就等于刷了。…...

编程新知 2026/1/28 5:55:15

OPenCV CUDA模块图像处理-----对图像执行 均值漂移滤波（Mean Shift Filtering）函数meanShiftFiltering()

操作系统：ubuntu22.04 OpenCV版本：OpenCV4.9 IDE:Visual Studio Code 编程语言：C11 算法描述 在 GPU 上对图像执行 均值漂移滤波（Mean Shift Filtering），用于图像分割或平滑处理。 该函数将输入图像中的…...

编程新知 2026/1/20 12:53:30

Mobile ALOHA全身模仿学习

一、题目 Mobile ALOHA：通过低成本全身远程操作学习双手移动操作 传统模仿学习（Imitation Learning）缺点：聚焦与桌面操作，缺乏通用任务所需的移动性和灵活性 本论文优点：（1）在ALOHA…...

编程新知 2026/1/27 14:18:20

RSS 2025｜从说明书学习复杂机器人操作任务：NUS邵林团队提出全新机器人装配技能学习框架Manual2Skill

视觉语言模型（Vision-Language Models, VLMs），为真实环境中的机器人操作任务提供了极具潜力的解决方案。 尽管 VLMs 取得了显著进展，机器人仍难以胜任复杂的长时程任务（如家具装配），主要受限于人…...

编程新知 2026/1/31 5:30:51

uniapp 集成腾讯云 IM 富媒体消息（地理位置/文件）

UniApp 集成腾讯云 IM 富媒体消息全攻略（地理位置/文件） 一、功能实现原理 腾讯云 IM 通过 消息扩展机制 支持富媒体类型，核心实现方式： 标准消息类型：直接使用 SDK 内置类型（文件、图片等）自…...

编程新知 2025/10/25 5:53:05