当前位置： 首页 > news >正文

项目实战 ---- 商用落地视频搜索系统（8）---优化（2）---查询逻辑层优化

news 2026/1/2 7:46:03

目录

背景

技术衡量与方案

一种可实现方案

可实现方案及设计描述

可能存在的问题

一种创新实现方案

方案的改良设计

策略公式

优化的实现

完整代码

代码解释

异常场景的考量

处理方式

运行注意事项

运行结果

结果优化对比与解释

背景

在项目实战 ---- 商用落地视频搜索系统(3) --- 数据综合查询设计与实现-CSDN博客中，已经设计并实现了基于视频的查询，这种前期较完善的设计机制结合了向量数据库本身的特点与系统的并发性，同时兼顾了并在向量collection设计阶段尽量减少冗余，达到标准的范式设计的目标。但作为一款完整商用落地的视频搜索系统，可能还需要借助语义文本一起辅助完成最终的搜索。在视频内容搜索的基础上加入视频描述的搜索，并实现最终的排序输出才能是一个完美的视频搜索。但作为商用落地系统，有很多情况需要考虑，比如描述标签的缺失，如何综合衡量内容与描述的一致性给出综合判断，如何考虑客户的喜好，从极限的角度蜕变系统为从内容或从语义角度搜索。当内容与语义搜索出现很多不一致性时，该如何校正处理。整个过程的衡量算法该如何建模等等问题。应该说整个搜索的过程及建模看似已经非常清晰，但在实际建模及商用过程中，你会发现很多问题需要处理。我们一步一步完善这一部分，我会讲清楚里面的设计思路，代码构建，及给出源码，

相关文章：

项目实战 ---- 商用落地视频搜索系统（8）---优化（2）---查询逻辑层优化

目录 背景 技术衡量与方案 一种可实现方案 可实现方案及设计描述 可能存在的问题 一种创新实现方案 方案的改良设计 策略公式 优化的实现 完整代码 代码解释 异常场景的考量 处理方式 运行注意事项 运行结果 结果优化对比与解释 背景 在项目实战 ---- 商用落地…...

编程日记 2024/9/6 9:09:09

山东大学机试试题合集

🍰🍰🍰高分篇已经涵盖了绝大多数的机试考点，由于临近预推免，各校的机试蜂拥而至，我们接下来先更一些各高校机试题合集，算是对前边学习成果的深入学习，也是对我们代码能力的锻炼。加油…...

编程日记 2024/9/6 9:04:05

餐厅食品留样管理系统小程序的设计

管理员账户功能包括：系统首页，个人中心，窗口负责人管理，窗口员工管理，冰柜管理，排班信息管理，留样食品管理，教育宣传管理，系统管理 微信端账号功能包括：系统…...

编程日记 2024/9/6 9:03:05

亚马逊运营：如何提高亚马逊销量和运营效率？

不少亚马逊卖家们为了扩大业务规模和提高销量，会创建多个卖家账户来同时运营多个亚马逊店铺。问题是，这种多店铺运营模式并非没有风险——亚马逊运营的一个重要方面就是账户的健康管理。一旦某个账户出现问题，亚马逊的算法就可能会启动关联检…...

编程日记 2024/9/6 8:53:58

设计模式背后的设计原则和思想

设计模式背后的设计原则和思想是一套指导我们如何设计高质量软件系统的准则和方法论。这些原则和思想不仅有助于提升软件的可维护性、可扩展性和可复用性，还能帮助开发团队更好地应对复杂多变的需求。以下是一些核心的设计原则和思想： 1. 设计原则 设计…...

编程日记 2024/9/6 8:52:57

项目总体框架

一.后端（包装servlet） 使用BaseServlet进行请求的初步处理（利用继承进行执行这个） 在BaseServlet中 处理请求的类型找到对象的方法，并使用注解找到参数名，执行参数自动注入。 package com.csdn.controlle…...

编程日记 2024/9/6 8:51:55

k8s Prometheus

一、部署 Prometheus kubectl create ns kube-ops# 创建 prometheus-cm.yaml apiVersion: v1 kind: ConfigMap metadata:name: prometheus-confignamespace: kube-ops data:prometheus.yml: |global:scrape_interval: 15s # 表示 prometheus 抓取指标数据的频率，默…...

编程日记 2024/9/6 8:48:52

glsl着色器学习（九）屏幕像素空间和设置颜色

在上一篇文章中，使用的是裁剪空间进行绘制，这篇文章使用屏幕像素空间的坐标进行绘制。 上一篇的顶点着色器大概是这样子的 回归一下顶点着色的主要任务： 通常情况下，顶点着色器会进行一系列的矩阵变换操作，将输入的顶…...

编程日记 2024/9/6 8:47:51

前端框架有哪些？

前言 用户体验是每个开发网站的企业中的重中之重。无论后台有多方面的操作和功能，用户的视图和体验都必须是无缝的最友好的。这需要使用前端框架来简化交互式、以用户为中心的网站的开发。 前端框架是一种用于简化Web开发的工具，它提供了一套预定义的代…...

编程日记 2024/9/6 8:45:49

分类预测|基于黑翅鸢优化轻量级梯度提升机算法数据预测Matlab程序BKA-LightGBM多特征输入多类别输出 含对比

分类预测|基于黑翅鸢优化轻量级梯度提升机算法数据预测Matlab程序BKA-LightGBM多特征输入多类别输出 含对比 文章目录 一、基本原理BKA（Black Kite Algorithm）的原理LightGBM分类预测模型的原理BKA与LightGBM的模型流程总结 二、实验结果三、核心代码四、…...

编程日记 2024/9/6 8:44:48

利用大模型实时提取和检索多模态数据探索-利用 Indexify 进行文档分析

概览 传统的文本提取方法常常无法理解非结构化内容，因此提取数据的数据往往是错误的。本文将探讨使用 Indexify，一个用于实时多模态数据提取的开源框架，来更好地分析pdf等非结构化文件。我将介绍如何设置 Indexify，包括服务器设置…...

编程日记 2024/9/6 8:43:47

函数式接口实现策略模式

函数式接口实现策略模式 1.案例背景 我们在日常开发中，大多会写if、else if、else 这样的代码，但条件太多时，往往嵌套无数层if else,阅读性很差，比如如下案例，统计学生的数学课程的成绩： 90-100分&#…...

编程日记 2024/9/6 8:40:45

鸿蒙Next-拉起支付宝的三种方式——教程

鸿蒙Next-拉起支付宝的三种方式——教程 鸿蒙Next系统即将上线，应用市场逐渐丰富、很多APP都准备接入支付宝做支付功能，目前来说有三种方式拉起支付宝：通过支付宝SDK拉起、使用OpenLink拉起、传入支付宝包名使用startAbility拉起。以上的三种…...

编程日记 2024/9/6 8:38:44

Vue.js 组件化开发：父子组件通信与组件注册详解

Vue.js 组件化开发：父子组件通信与组件注册详解 简介： 在 Vue.js 的开发中，组件是构建应用的重要基础。掌握组件的创建与使用，尤其是父子组件的通信和组件的注册与命名，是开发中不可或缺的技能。本文将详细探讨这些内容…...

编程日记 2024/9/6 8:36:42

【HTTP、Web常用协议等等】前端八股文面试题

HTTP、Web常用协议等等 更新日志 2024年9月5日 —— 什么情况下会导致浏览器内存泄漏？ 文章目录 HTTP、Web常用协议等等更新日志1. 网络请求的状态码有哪些？1）1xx 信息性状态码2）2xx 成功状态码3）3xx 重定向状态码4&…...

编程日记 2024/9/6 8:34:40

Datawhale x李宏毅苹果书AI夏令营深度学习详解进阶Task03

在深度学习中，批量归一化（Batch Normalization，BN）技术是一种重要的优化方法，它可以有效地改善模型的训练效果。本文将详细讨论批量归一化的原理、实现方式、在神经网络中的应用，以及如何选择合适的损失函数…...

编程日记 2024/9/6 8:32:39

【机器学习】任务三：基于逻辑回归与线性回归的鸢尾花分类与波士顿房价预测分析

目录 1.目的和要求 1.1 掌握回归分析的概念和使用场景 1.2 掌握机器学习回归分析进行数据预测的有效方法 1.3 掌握特征重要性分析、特征选择和模型优化的方法 2.波士顿房价预测与特征分析 2.1第一步：导入所需的模块和包 2.2 第二步：加载波士顿房价…...

编程日记 2024/9/6 8:31:38

【操作系统存储篇】Linux文件基本操作

目录 一、Linux目录 二、Linux文件的常用操作 三、Linux文件类型 一、Linux目录 Linux有很多目录，Linux一切皆是文件，包括进程、设备等。 相对路径：相对于当前的操作目录，文件位于哪个目录。 绝对路径 ：从根目录开…...

编程日记 2024/9/6 8:30:37

C++ | Leetcode C++题解之第387题字符串中的第一个唯一字符

题目&#xff1a; 题解&#xff1a; class Solution { public:int firstUniqChar(string s) {unordered_map<char, int> position;queue<pair<char, int>> q;int n s.size();for (int i 0; i < n; i) {if (!position.count(s[i])) {position[s[i]] i;…...

编程日记 2024/9/6 8:28:35

数学建模--皮尔逊相关系数、斯皮尔曼相关系数

目录 1.总体的皮尔逊相关系数 2.样本的皮尔逊相关系数 3.对于皮尔逊相关系数的认识 4.描述性统计以及corr函数 ​编辑 5.数据导入实际操作 6.引入假设性检验 6.1简单认识 6.2具体步骤 7.p值判断法 8.检验正态分布 8.1jb检验 8.2威尔克检验&#xff1a;针对于p值进行…...

编程日记 2024/9/6 8:25:33

vscode里如何用git

打开vs终端执行如下&#xff1a; 1 初始化 Git 仓库&#xff08;如果尚未初始化&#xff09; git init 2 添加文件到 Git 仓库 git add . 3 使用 git commit 命令来提交你的更改。确保在提交时加上一个有用的消息。 git commit -m "备注信息" 4 …...

编程新知 2025/8/24 20:45:38

DockerHub与私有镜像仓库在容器化中的应用与管理

哈喽&#xff0c;大家好&#xff0c;我是左手python&#xff01; Docker Hub的应用与管理 Docker Hub的基本概念与使用方法 Docker Hub是Docker官方提供的一个公共镜像仓库&#xff0c;用户可以在其中找到各种操作系统、软件和应用的镜像。开发者可以通过Docker Hub轻松获取所…...

编程新知 2025/10/8 10:56:25

postgresql|数据库|只读用户的创建和删除（备忘）

CREATE USER read_only WITH PASSWORD 密码 -- 连接到xxx数据库 \c xxx -- 授予对xxx数据库的只读权限 GRANT CONNECT ON DATABASE xxx TO read_only; GRANT USAGE ON SCHEMA public TO read_only; GRANT SELECT ON ALL TABLES IN SCHEMA public TO read_only; GRANT EXECUTE O…...

编程新知 2025/9/18 19:34:22

高危文件识别的常用算法：原理、应用与企业场景

高危文件识别的常用算法&#xff1a;原理、应用与企业场景 高危文件识别旨在检测可能导致安全威胁的文件&#xff0c;如包含恶意代码、敏感数据或欺诈内容的文档&#xff0c;在企业协同办公环境中&#xff08;如Teams、Google Workspace&#xff09;尤为重要。结合大模型技术&…...

编程新知 2025/12/31 15:54:51

OpenLayers 分屏对比(地图联动)

注&#xff1a;当前使用的是 ol 5.3.0 版本&#xff0c;天地图使用的key请到天地图官网申请&#xff0c;并替换为自己的key 地图分屏对比在WebGIS开发中是很常见的功能&#xff0c;和卷帘图层不一样的是&#xff0c;分屏对比是在各个地图中添加相同或者不同的图层进行对比查看。…...

编程新知 2025/12/25 18:22:43

tree 树组件大数据卡顿问题优化

问题背景 项目中有用到树组件用来做文件目录&#xff0c;但是由于这个树组件的节点越来越多&#xff0c;导致页面在滚动这个树组件的时候浏览器就很容易卡死。这种问题基本上都是因为dom节点太多&#xff0c;导致的浏览器卡顿&#xff0c;这里很明显就需要用到虚拟列表的技术&…...

编程新知 2026/1/1 10:28:21

ThreadLocal 源码

ThreadLocal 源码 此类提供线程局部变量。这些变量不同于它们的普通对应物&#xff0c;因为每个访问一个线程局部变量的线程&#xff08;通过其 get 或 set 方法&#xff09;都有自己独立初始化的变量副本。ThreadLocal 实例通常是类中的私有静态字段&#xff0c;这些类希望将…...

编程新知 2025/11/5 10:19:24

【PX4飞控】mavros gps相关话题分析，经纬度海拔获取方法，卫星数锁定状态获取方法

使用 ROS1-Noetic 和 mavros v1.20.1&#xff0c; 携带经纬度海拔的话题主要有三个&#xff1a; /mavros/global_position/raw/fix/mavros/gpsstatus/gps1/raw/mavros/global_position/global 查看 mavros 源码&#xff0c;来分析他们的发布过程。发现前两个话题都对应了同一…...

编程新知 2025/12/25 3:41:44

python读取SQLite表个并生成pdf文件

代码用于创建含50列的SQLite数据库并插入500行随机浮点数据&#xff0c;随后读取数据&#xff0c;通过ReportLab生成横向PDF表格&#xff0c;包含格式化&#xff08;两位小数&#xff09;及表头、网格线等美观样式。 # 导入所需库 import sqlite3 # 用于操作…...

编程新知 2025/12/15 21:48:04

STL 2迭代器

文章目录 1.迭代器2.输入迭代器3.输出迭代器1.插入迭代器 4.前向迭代器5.双向迭代器6.随机访问迭代器7.不同容器返回的迭代器类型1.输入 / 输出迭代器2.前向迭代器3.双向迭代器4.随机访问迭代器5.特殊迭代器适配器6.为什么 unordered_set 只提供前向迭代器&#xff1f; 1.迭代器…...

编程新知 2025/10/2 23:42:13