当前位置： 首页 > news >正文

项目实战 ---- 商用落地视频搜索系统（8）---优化（2）---查询逻辑层优化

news 2026/4/9 11:27:02

目录

背景

技术衡量与方案

一种可实现方案

可实现方案及设计描述

可能存在的问题

一种创新实现方案

方案的改良设计

策略公式

优化的实现

完整代码

代码解释

异常场景的考量

处理方式

运行注意事项

运行结果

结果优化对比与解释

背景

在项目实战 ---- 商用落地视频搜索系统(3) --- 数据综合查询设计与实现-CSDN博客中，已经设计并实现了基于视频的查询，这种前期较完善的设计机制结合了向量数据库本身的特点与系统的并发性，同时兼顾了并在向量collection设计阶段尽量减少冗余，达到标准的范式设计的目标。但作为一款完整商用落地的视频搜索系统，可能还需要借助语义文本一起辅助完成最终的搜索。在视频内容搜索的基础上加入视频描述的搜索，并实现最终的排序输出才能是一个完美的视频搜索。但作为商用落地系统，有很多情况需要考虑，比如描述标签的缺失，如何综合衡量内容与描述的一致性给出综合判断，如何考虑客户的喜好，从极限的角度蜕变系统为从内容或从语义角度搜索。当内容与语义搜索出现很多不一致性时，该如何校正处理。整个过程的衡量算法该如何建模等等问题。应该说整个搜索的过程及建模看似已经非常清晰，但在实际建模及商用过程中，你会发现很多问题需要处理。我们一步一步完善这一部分，我会讲清楚里面的设计思路，代码构建，及给出源码，

相关文章：

项目实战 ---- 商用落地视频搜索系统（8）---优化（2）---查询逻辑层优化

目录 背景 技术衡量与方案 一种可实现方案 可实现方案及设计描述 可能存在的问题 一种创新实现方案 方案的改良设计 策略公式 优化的实现 完整代码 代码解释 异常场景的考量 处理方式 运行注意事项 运行结果 结果优化对比与解释 背景 在项目实战 ---- 商用落地…...

编程日记 2024/9/6 9:09:09

山东大学机试试题合集

🍰🍰🍰高分篇已经涵盖了绝大多数的机试考点，由于临近预推免，各校的机试蜂拥而至，我们接下来先更一些各高校机试题合集，算是对前边学习成果的深入学习，也是对我们代码能力的锻炼。加油…...

编程日记 2024/9/6 9:04:05

餐厅食品留样管理系统小程序的设计

管理员账户功能包括：系统首页，个人中心，窗口负责人管理，窗口员工管理，冰柜管理，排班信息管理，留样食品管理，教育宣传管理，系统管理 微信端账号功能包括：系统…...

编程日记 2024/9/6 9:03:05

亚马逊运营：如何提高亚马逊销量和运营效率？

不少亚马逊卖家们为了扩大业务规模和提高销量，会创建多个卖家账户来同时运营多个亚马逊店铺。问题是，这种多店铺运营模式并非没有风险——亚马逊运营的一个重要方面就是账户的健康管理。一旦某个账户出现问题，亚马逊的算法就可能会启动关联检…...

编程日记 2024/9/6 8:53:58

设计模式背后的设计原则和思想

设计模式背后的设计原则和思想是一套指导我们如何设计高质量软件系统的准则和方法论。这些原则和思想不仅有助于提升软件的可维护性、可扩展性和可复用性，还能帮助开发团队更好地应对复杂多变的需求。以下是一些核心的设计原则和思想： 1. 设计原则 设计…...

编程日记 2024/9/6 8:52:57

项目总体框架

一.后端（包装servlet） 使用BaseServlet进行请求的初步处理（利用继承进行执行这个） 在BaseServlet中 处理请求的类型找到对象的方法，并使用注解找到参数名，执行参数自动注入。 package com.csdn.controlle…...

编程日记 2024/9/6 8:51:55

k8s Prometheus

一、部署 Prometheus kubectl create ns kube-ops# 创建 prometheus-cm.yaml apiVersion: v1 kind: ConfigMap metadata:name: prometheus-confignamespace: kube-ops data:prometheus.yml: |global:scrape_interval: 15s # 表示 prometheus 抓取指标数据的频率，默…...

编程日记 2024/9/6 8:48:52

glsl着色器学习（九）屏幕像素空间和设置颜色

在上一篇文章中，使用的是裁剪空间进行绘制，这篇文章使用屏幕像素空间的坐标进行绘制。 上一篇的顶点着色器大概是这样子的 回归一下顶点着色的主要任务： 通常情况下，顶点着色器会进行一系列的矩阵变换操作，将输入的顶…...

编程日记 2024/9/6 8:47:51

前端框架有哪些？

前言 用户体验是每个开发网站的企业中的重中之重。无论后台有多方面的操作和功能，用户的视图和体验都必须是无缝的最友好的。这需要使用前端框架来简化交互式、以用户为中心的网站的开发。 前端框架是一种用于简化Web开发的工具，它提供了一套预定义的代…...

编程日记 2024/9/6 8:45:49

分类预测|基于黑翅鸢优化轻量级梯度提升机算法数据预测Matlab程序BKA-LightGBM多特征输入多类别输出 含对比

分类预测|基于黑翅鸢优化轻量级梯度提升机算法数据预测Matlab程序BKA-LightGBM多特征输入多类别输出 含对比 文章目录 一、基本原理BKA（Black Kite Algorithm）的原理LightGBM分类预测模型的原理BKA与LightGBM的模型流程总结 二、实验结果三、核心代码四、…...

编程日记 2024/9/6 8:44:48

利用大模型实时提取和检索多模态数据探索-利用 Indexify 进行文档分析

概览 传统的文本提取方法常常无法理解非结构化内容，因此提取数据的数据往往是错误的。本文将探讨使用 Indexify，一个用于实时多模态数据提取的开源框架，来更好地分析pdf等非结构化文件。我将介绍如何设置 Indexify，包括服务器设置…...

编程日记 2024/9/6 8:43:47

函数式接口实现策略模式

函数式接口实现策略模式 1.案例背景 我们在日常开发中，大多会写if、else if、else 这样的代码，但条件太多时，往往嵌套无数层if else,阅读性很差，比如如下案例，统计学生的数学课程的成绩： 90-100分&#…...

编程日记 2024/9/6 8:40:45

鸿蒙Next-拉起支付宝的三种方式——教程

鸿蒙Next-拉起支付宝的三种方式——教程 鸿蒙Next系统即将上线，应用市场逐渐丰富、很多APP都准备接入支付宝做支付功能，目前来说有三种方式拉起支付宝：通过支付宝SDK拉起、使用OpenLink拉起、传入支付宝包名使用startAbility拉起。以上的三种…...

编程日记 2024/9/6 8:38:44

Vue.js 组件化开发：父子组件通信与组件注册详解

Vue.js 组件化开发：父子组件通信与组件注册详解 简介： 在 Vue.js 的开发中，组件是构建应用的重要基础。掌握组件的创建与使用，尤其是父子组件的通信和组件的注册与命名，是开发中不可或缺的技能。本文将详细探讨这些内容…...

编程日记 2024/9/6 8:36:42

【HTTP、Web常用协议等等】前端八股文面试题

HTTP、Web常用协议等等 更新日志 2024年9月5日 —— 什么情况下会导致浏览器内存泄漏？ 文章目录 HTTP、Web常用协议等等更新日志1. 网络请求的状态码有哪些？1）1xx 信息性状态码2）2xx 成功状态码3）3xx 重定向状态码4&…...

编程日记 2024/9/6 8:34:40

Datawhale x李宏毅苹果书AI夏令营深度学习详解进阶Task03

在深度学习中，批量归一化（Batch Normalization，BN）技术是一种重要的优化方法，它可以有效地改善模型的训练效果。本文将详细讨论批量归一化的原理、实现方式、在神经网络中的应用，以及如何选择合适的损失函数…...

编程日记 2024/9/6 8:32:39

【机器学习】任务三：基于逻辑回归与线性回归的鸢尾花分类与波士顿房价预测分析

目录 1.目的和要求 1.1 掌握回归分析的概念和使用场景 1.2 掌握机器学习回归分析进行数据预测的有效方法 1.3 掌握特征重要性分析、特征选择和模型优化的方法 2.波士顿房价预测与特征分析 2.1第一步：导入所需的模块和包 2.2 第二步：加载波士顿房价…...

编程日记 2024/9/6 8:31:38

【操作系统存储篇】Linux文件基本操作

目录 一、Linux目录 二、Linux文件的常用操作 三、Linux文件类型 一、Linux目录 Linux有很多目录，Linux一切皆是文件，包括进程、设备等。 相对路径：相对于当前的操作目录，文件位于哪个目录。 绝对路径 ：从根目录开…...

编程日记 2024/9/6 8:30:37

C++ | Leetcode C++题解之第387题字符串中的第一个唯一字符

题目&#xff1a; 题解&#xff1a; class Solution { public:int firstUniqChar(string s) {unordered_map<char, int> position;queue<pair<char, int>> q;int n s.size();for (int i 0; i < n; i) {if (!position.count(s[i])) {position[s[i]] i;…...

编程日记 2024/9/6 8:28:35

数学建模--皮尔逊相关系数、斯皮尔曼相关系数

目录 1.总体的皮尔逊相关系数 2.样本的皮尔逊相关系数 3.对于皮尔逊相关系数的认识 4.描述性统计以及corr函数 ​编辑 5.数据导入实际操作 6.引入假设性检验 6.1简单认识 6.2具体步骤 7.p值判断法 8.检验正态分布 8.1jb检验 8.2威尔克检验&#xff1a;针对于p值进行…...

编程日记 2024/9/6 8:25:33

Lite-Avatar与ChatGPT结合的智能对话系统实现

Lite-Avatar与ChatGPT结合的智能对话系统实现 1. 引言 想象一下&#xff0c;你正在和一个数字人进行视频对话&#xff0c;它不仅能够听懂你的问题&#xff0c;还能用生动的表情和自然的语气回答你&#xff0c;就像和一个真人交流一样。这种体验现在已经不再是科幻电影里的场景…...

编程新知 2026/4/9 11:13:09

REFramework：游戏启动崩溃问题的系统化解决方案

REFramework&#xff1a;游戏启动崩溃问题的系统化解决方案 【免费下载链接】REFramework Mod loader, scripting platform, and VR support for all RE Engine games 项目地址: https://gitcode.com/GitHub_Trending/re/REFramework 问题诊断&#xff1a;当游戏启动遇到…...

编程新知 2026/4/9 10:48:31

QUALCOMM高通 AR8031-AL1A-R QFN48 以太网收发器

功能特性 符合IEEE802.3标准的10/100/1000BASE-T支持1000BASE-TPCS和自动协商&#xff0c;支持下一页功能支持RGMII和/或SGMII接口连接MAC设备 当MAC接口在RGMII模式下工作时&#xff0c;支持光纤和铜缆组合模式支持额外的IEEE1000 BASE-X和100 BASE-FX,并集成SerDesRGMII时序模…...

编程新知 2026/4/9 9:59:07

从LaTeX论文中提取关键思想：nlp_structbert辅助学术文献综述

从LaTeX论文中提取关键思想&#xff1a;nlp_structbert辅助学术文献综述 写文献综述&#xff0c;大概是每个研究生和科研人员都绕不开的“必修课”。面对几十甚至上百篇PDF论文&#xff0c;光是下载、整理、阅读摘要&#xff0c;就足以耗掉一周的时间。更头疼的是&#xff0c;…...

编程新知 2026/4/9 9:46:35

RimWorld模组管理终极指南：从混乱到秩序的专业解决方案

RimWorld模组管理终极指南&#xff1a;从混乱到秩序的专业解决方案 【免费下载链接】RimSort RimSort is an open source mod manager for the video game RimWorld. There is support for Linux, Mac, and Windows, built from the ground up to be a reliable, community-man…...

编程新知 2026/4/9 9:11:00

FUTURE POLICE模型推理服务化：使用FastAPI构建高性能API网关

FUTURE POLICE模型推理服务化&#xff1a;使用FastAPI构建高性能API网关 想把训练好的FUTURE POLICE模型变成一个随时可以调用的服务吗&#xff1f;比如&#xff0c;让一个移动应用上传一段音频&#xff0c;就能立刻收到模型的分析结果。自己写个简单的脚本虽然也能跑&#xf…...

编程新知 2026/4/9 9:08:59

PyTorch 2.9实战：用Profiler分析BERT微调，找出LayerNorm性能瓶颈

PyTorch 2.9实战&#xff1a;用Profiler分析BERT微调&#xff0c;找出LayerNorm性能瓶颈 1. 为什么需要分析BERT微调性能 在自然语言处理任务中&#xff0c;BERT模型的微调是常见的实践场景。然而随着模型规模增大&#xff0c;训练过程中的性能问题日益凸显。许多开发者会遇到…...

编程新知 2026/4/9 9:06:57

docker容器最大压缩

压缩前先查找出无用的占用空间内容&#xff1a;find / -type f -size 10M -exec ls -lh {} \;上面大于10M的文件都搜出来了压缩容器为镜像&#xff1a;最大压缩&#xff08;代价时间长&#xff09;&#xff1a;docker export 容器ID | gzip -9 > 名字.tar.gz一般压缩&#x…...

编程新知 2026/4/9 8:32:01

让 AI 代理拥有“专业技能包“：Microsoft Agent Skills厩

一、核心问题及解决方案&#xff08;按踩坑频率排序&#xff09; 问题 1&#xff1a;误删他人持有锁——最基础也最易犯的漏洞 成因&#xff1a;释放锁时未做身份校验&#xff0c;直接执行 DEL 命令删除键。典型场景&#xff1a;服务 A 持有锁后&#xff0c;业务逻辑耗时超过锁…...

编程新知 2026/4/9 8:15:52

ide-eval-resetter：开发者必备的JetBrains IDE试用期管理工具

ide-eval-resetter&#xff1a;开发者必备的JetBrains IDE试用期管理工具 【免费下载链接】ide-eval-resetter 项目地址: https://gitcode.com/gh_mirrors/id/ide-eval-resetter 在软件开发过程中&#xff0c;JetBrains IDE&#xff08;集成开发环境&#xff0c;用于编…...

编程新知 2026/4/9 8:05:46