当前位置： 首页 > news >正文

向量数据库

news 文章来源：https://blog.csdn.net/beingstrong/article/details/130893203 2025/5/14 10:18:05

向量数据库可以做哪些事情

  • 存储和索引向量
  • 检索相似向量，还具有过滤功能
  • 自动将文档转变成向量，所以会自动化分词、向量化、索引等操作

目前存在的向量数据库：

名称github开源协议
chromahttps://github.com/chroma-core/chromaApache 2.0
Milvushttps://github.com/milvus-io/milvusApache 2.0
Pinecone未开源/
weaviatehttps://github.com/weaviate/weaviateBSD-3-Clause license
qdranthttps://github.com/qdrant/qdrantApache 2.0
vespahttps://github.com/vespa-engine/vespaApache 2.0
zilliz基于Milvus的商业版向量数据库/

其他跟向量数据库相关，严格来说不算向量数据库

  • Faiss 是一个提供高维向量相似性搜索和聚类的算法库，不算向量数据库，向量数据库的相似性检索可以使用到Faiss中的算法。
  • ScaNN 是google开源的相似向量搜索方法
  • vald 是一个可扩展的向量搜索引擎
  • pgvector 为Postgres 提供向量相似度搜索的库
  • typesense 可替代ElasticSearch， 也有向量搜索功能

对于文本，如何挑选向量类型，可参考比较基准：MTEB: Massive Text Embedding Benchmark

参考资料

  1. https://towardsdatascience.com/milvus-pinecone-vespa-weaviate-vald-gsi-what-unites-these-buzz-words-and-what-makes-each-9c65a3bd0696
  2. https://byby.dev/vector-databases
  3. https://platform.openai.com/docs/guides/embeddings/what-are-embeddings

相关文章：

向量数据库

向量数据库可以做哪些事情 存储和索引向量检索相似向量，还具有过滤功能自动将文档转变成向量，所以会自动化分词、向量化、索引等操作 目前存在的向量数据库： 名称github开源协议chromahttps://github.com/chroma-core/chromaApache 2.0Mil…...

编程日记 2023/6/3 22:42:03

leetcode 11.盛最多水的容器

题目描述 跳转到leetocde题目 给定一个长度为 n 的整数数组 height 。有 n 条垂线，第 i 条线的两个端点是 (i, 0) 和 (i, height[i]) 。 找出其中的两条线，使得它们与 x 轴共同构成的容器可以容纳最多的水。 返回容器可以储存的最大水量。 说明&#xff…...

编程日记 2023/6/3 22:37:02

都说00后已经躺平了，但是有一说一，该卷的还是卷啊。

这不，三月份春招我们公司来了个00后，工作没两年，跳槽到我们公司起薪20K，都快接近我了。 后来才知道人家是个卷王，从早干到晚就差搬张床到工位睡觉了。 最近和他聊了一次天，原来这位小老弟家里条件不太好&…...

编程日记 2023/6/3 22:32:01

牛客网刷题学习SQL(二)

SQL22 统计每个学校的答过题的用户的平均答题数 描述 运营想要了解每个学校答过题的用户平均答题数量情况，请你取出数据。 用户信息表 user_profile，其中device_id指终端编号（认为每个用户有唯一的一个终端），gender指…...

编程日记 2023/6/3 22:26:59

深蓝学院 C++笔记 先导篇章 - 绪论

一、介绍-老师寄语 为什么选择C？ 高性能解决问题 二、C推荐书目 1. 基础 《C Primer》，Stanley B. Lippman 等著，王刚、杨巨峰等译 2. 进阶 《Effective C》，Scott Meyers 著，侯捷译。 《More Effective C》&am…...

编程日记 2023/6/3 22:21:58

R7-19 天梯赛团队总分

“天梯赛”的竞赛题目一共有 15 道，分为 3 个梯级： 基础级设 8 道题，其中 5 分、10 分、15 分、20 分的题各 2 道，满分为 100 分；题目编号相应为L1-X，X取1,2,3,4,5,6,7,8，分别表示基础级的8道题…...

编程日记 2023/6/3 22:16:57

使用 Kotlin 的 Opt-in （选择加入）功能注解API提示当前非稳定API

前言 之前在给公司项目封装库的时候，领导告诉我封装的漂亮一点，等以后公司发展起来了可能需要把这个库提供给第三方接入使用。 此时，就有这么一个问题：某些功能函数使用条件比较苛刻，直接使用可能会出现意想不到的后…...

编程日记 2023/6/3 22:11:56

webpack配置排除打包

webpack配置排除打包 思路 打包时，不要把类似于element-ui第三方的这些包打进来 从网络上，通过url地址直接引入这些包 操作 （1）先找到 vue.config.js， 添加 externals 项，具体如下： config…...

编程日记 2023/6/3 22:06:54

HNU-操作系统OS-ucoreLab系列-感悟

谨以此片篇，献给熬夜的8个晚上，以及逝去的时光。 感悟： 今天结束了所有的Lab实验（2023.6.3），感慨万千。 喜是这个实验终于结束了，悲是其实有好多地方我都没有理解。 应该指出，由于验收的助教学长学姐们的宽容，HNU实际上在验收这一块的要求还是比较低的。 但是这个…...

编程日记 2023/6/3 22:01:53

MySQL运维篇（三）

五.读写分离 5.1 介绍 读写分离,简单地说是把对数据库的读和写操作分开,以对应不同的数据库服务器。主数据库提供写操作，从数据库提供读操作，这样能有效地减轻单台数据库的压力。 通过MyCat即可轻易实现上述功能，不仅可以支持MySQL&#x…...

编程日记 2023/6/3 21:56:52

Lecture 2 Text Preprocessing

目录 Some DefinitionsReasons for PreprocessingPreprocessing StepsSentence Segmentation 句子分割Binary Classifier 二元分类器Word Tokenization: English 英文词元标记化Word Tokenization: Chinese 中文词元标记化Word Tokenization: German 德语词元标记化Subword Tok…...

编程日记 2023/6/3 21:51:51

web练习第二周

前言：（博主个人学习笔记，不用看）web练习第二周，仅做出前3题。相比于第一周，难度大幅增加，写题时就算看了wp还是像个无头苍蝇一样到处乱创，大多都是陌生知识点，工具的使用…...

编程日记 2023/6/3 21:46:50

LC-1439. 有序矩阵中的第 k 个最小数组和（二分答案、多路归并）

1439. 有序矩阵中的第 k 个最小数组和 难度困难120 给你一个 m * n 的矩阵 mat，以及一个整数 k ，矩阵中的每一行都以非递减的顺序排列。 你可以从每一行中选出 1 个元素形成一个数组。返回所有可能数组中的第 k 个 最小 数组和。 示例 1：…...

编程日记 2023/6/3 21:41:49

一文1000字从0到1实现Jenkins+Allure+Pytest的持续集成

一、配置 allure 环境变量 1、下载 allure是一个命令行工具，可以去 github 下载最新版：https://github.com/allure-framework/allure2/releases 2、解压到本地 3、配置环境变量 复制路径如：F:\allure-2.13.7\bin 环境变量、Path、添加 F:\…...

编程日记 2023/6/3 21:36:48

给一个有序数组生成平衡搜索二叉树(java)

给一个有序数组生成平衡搜索二叉树 给一个有序数组生成平衡搜索二叉树递归生成二叉树专题 给一个有序数组生成平衡搜索二叉树 给定一个有序的数组,用这个数组生成一个平衡搜索二叉树. 这个题还是很简单的,知道什么时平衡搜索二叉树就行了, 左边值小于头节点值,头节点值小于右边…...

编程日记 2023/6/3 21:31:47

【JavaSE】Java基础语法(二十二)：包装类

文章目录 1. 基本类型包装类2. Integer类3. 自动拆箱和自动装箱4. int和String类型的相互转换 1. 基本类型包装类 基本类型包装类的作用 将基本数据类型封装成对象的好处在于可以在对象中定义更多的功能方法操作该数据常用的操作之一：用于基本数据类型与字符串之间的…...

编程日记 2023/6/3 21:26:46

javascript基础十八：说说你对JavaScript中事件循环的理解​

一、是什么 JavaScript 在设计之初便是单线程，即指程序运行时，只有一个线程存在，同一时间只能做一件事 为什么要这么设计，跟JavaScript的应用场景有关 JavaScript 初期作为一门浏览器脚本语言，通常用于操作 DOM &#…...

编程日记 2023/6/3 21:21:45

详解js中的浅拷贝与深拷贝

详解js中的浅拷贝与深拷贝 1、前言1.1 栈（stack）和堆（heap）1.2 基本数据类型和引用数据类型1.2.1 概念1.2.2 区别1.2.3 基本类型赋值方式1.2.4 引用类型赋值方式 2、浅拷贝2.1 概念2.2 常见的浅拷贝方法2.2.1 Object.assign()2.2.…...

编程日记 2023/6/3 21:16:44

Day9 敏捷测试——敏捷开发的特征、什么是敏捷测试？、极限编程、极限测试

Day9 敏捷测试——敏捷开发的特征、什么是敏捷测试？、极限编程、极限测试 文章目录 Day9 敏捷测试——敏捷开发的特征、什么是敏捷测试？、极限编程、极限测试敏捷开发的特征1、迭代式开发2、增量交付3、及时反馈4、持续集成5、自我管理敏捷开发和迭代式开发的根本区别1、性质…...

编程日记 2023/6/3 21:11:43

k8s 维护node与驱逐pod

1.维护node节点 设置节点状态为不可调度状态，执行以下命令后，节点状态会多出一个SchedulingDisabled的状态，即新建的pod不会往该节点上调度，本身存在node中的pod保持正常运行 kubectl cordon k8s-node01 kubectl get node 2.驱…...

编程日记 2023/6/3 21:06:42

SouapUI接口测试之创建性能测试

SouapUI也是一个能生动的体现一个系统（项目）性能状态的工具，本篇就来说说如何在SouapUI工具下创建性能测试 一、创建测试用例 由于在《SouapUI接口测试之使用Excel进行参数化》篇已经创建好了测试用例，本篇就不讲解如何创建测试…...

编程日记 2023/6/3 21:01:41

springboot整合kafka入门

kafka基本概念 producer： 生产者，负责发布消息到kafka cluster(kafka集群)中。生产者可以是web前端产生的page view，或者是服务器日志，系统CPU、memory等。 consumer： 消费者，每个consumer属于一个特定的c…...

编程日记 2023/6/3 20:56:40

Rust 笔记：Rust 语言中的字符串

Rust 笔记 Rust 语言中的字符串 作者：李俊才 （jcLee95）：https://blog.csdn.net/qq_28550263?spm1001.2101.3001.5343 邮箱 ：291148484163.com 本文地址：https://blog.csdn.net/qq_28550263/article/detail…...

编程日记 2023/6/3 20:51:39

华为OD机试真题 Java 实现【将真分数分解为埃及分数】【牛客练习题】

一、题目描述 分子为1的分数称为埃及分数。现输入一个真分数(分子比分母小的分数，叫做真分数)，请将该分数分解为埃及分数。如：8/11 = 1/2+1/5+1/55+1/110。 注：真分数指分子小于分母的分数，分子和分母有可能gcd不为1！ 如有多个解，请输出任意一个。 二、输入描述 输…...

编程日记 2023/6/3 20:46:38

Zemax Lumerical | 二维光栅出瞳扩展系统优化

简介 本文提出并演示了一种以二维光栅耦出的光瞳扩展（EPE）系统优化和公差分析的仿真方法。 在这个工作流程中，我们将使用3个软件进行不同的工作 ，以实现优化系统的大目标。首先，我们使用 Lumerical 构建光栅模型并使用…...

编程日记 2023/6/3 20:41:36

Linux-0.11 文件系统read_write.c详解

Linux-0.11 文件系统read_write.c详解 模块简介 该模块实现了文件系统通用的读写的方法read/write/lseek。 根据文件类型的不同，在内部将调用不同的方法。如果是管道文件，则调用pipe.c中的读写方法，如果是字符设备，则会调用cha…...

编程日记 2023/6/3 20:36:35

什么是用户态和内核态？用户态切换内核态会有什么影响？

一、什么是用户态和内核态？ 简单来讲，像使用java开发时，调用java中封装的普通方法程序时属于用户态，而操作内存或者cpu比如 new Thread()创建一个线程，Class.forName(xxx.class)这种属于内核态 用户态和内核态是操作系…...

编程日记 2023/6/3 20:31:34

探索iOS之CoreImage框架

CoreImage提供图像处理、人脸识别、图像增强、图像滤镜、图像转场。它操作的数据来自Core Graphics、Core Video、Image IO，使用CPU或GPU进行渲染。CoreImage对底层实现进行封装，为上层提供简单易用的API。 一、CoreImage框架 CoreImage框架分为&#…...

编程日记 2023/6/3 20:26:33

qml 使用Shape 画图形

最近在做项目的时候想这实现一个能够根据相对位置动态改变大小的进度条提示框，偶尔发现了一个很有用的组件Shape这个控件里面可以画各种线条,实线虚线矩形三角形圆角的三角形或者各种自定义形状。下面提供一个2条虚线加上一个矩形的小栗子。更多的自定义形状还是请自…...

编程日记 2023/6/3 20:21:32

MySQL数据库修改root账户密码

博主今天登录数据库遇到了一个问题，通过这篇文章（http://t.csdn.cn/58ECT）解决了。文中关于修改root账户密码的部分，博主觉得有必要写一篇文章总结下。 第一步：用管理员账户打开CMD 第二步：开启mysql服务 …...

编程日记 2023/6/3 20:16:31