当前位置： 首页 > news >正文

项目实战 ---- 商用落地视频搜索系统（8）---优化（2）---查询逻辑层优化

news 2025/11/13 0:08:28

目录

背景

技术衡量与方案

一种可实现方案

可实现方案及设计描述

可能存在的问题

一种创新实现方案

方案的改良设计

策略公式

优化的实现

完整代码

代码解释

异常场景的考量

处理方式

运行注意事项

运行结果

结果优化对比与解释

背景

在项目实战 ---- 商用落地视频搜索系统(3) --- 数据综合查询设计与实现-CSDN博客中，已经设计并实现了基于视频的查询，这种前期较完善的设计机制结合了向量数据库本身的特点与系统的并发性，同时兼顾了并在向量collection设计阶段尽量减少冗余，达到标准的范式设计的目标。但作为一款完整商用落地的视频搜索系统，可能还需要借助语义文本一起辅助完成最终的搜索。在视频内容搜索的基础上加入视频描述的搜索，并实现最终的排序输出才能是一个完美的视频搜索。但作为商用落地系统，有很多情况需要考虑，比如描述标签的缺失，如何综合衡量内容与描述的一致性给出综合判断，如何考虑客户的喜好，从极限的角度蜕变系统为从内容或从语义角度搜索。当内容与语义搜索出现很多不一致性时，该如何校正处理。整个过程的衡量算法该如何建模等等问题。应该说整个搜索的过程及建模看似已经非常清晰，但在实际建模及商用过程中，你会发现很多问题需要处理。我们一步一步完善这一部分，我会讲清楚里面的设计思路，代码构建，及给出源码，

相关文章：

项目实战 ---- 商用落地视频搜索系统（8）---优化（2）---查询逻辑层优化

目录 背景 技术衡量与方案 一种可实现方案 可实现方案及设计描述 可能存在的问题 一种创新实现方案 方案的改良设计 策略公式 优化的实现 完整代码 代码解释 异常场景的考量 处理方式 运行注意事项 运行结果 结果优化对比与解释 背景 在项目实战 ---- 商用落地…...

编程日记 2024/9/6 9:09:09

山东大学机试试题合集

🍰🍰🍰高分篇已经涵盖了绝大多数的机试考点，由于临近预推免，各校的机试蜂拥而至，我们接下来先更一些各高校机试题合集，算是对前边学习成果的深入学习，也是对我们代码能力的锻炼。加油…...

编程日记 2024/9/6 9:04:05

餐厅食品留样管理系统小程序的设计

管理员账户功能包括：系统首页，个人中心，窗口负责人管理，窗口员工管理，冰柜管理，排班信息管理，留样食品管理，教育宣传管理，系统管理 微信端账号功能包括：系统…...

编程日记 2024/9/6 9:03:05

亚马逊运营：如何提高亚马逊销量和运营效率？

不少亚马逊卖家们为了扩大业务规模和提高销量，会创建多个卖家账户来同时运营多个亚马逊店铺。问题是，这种多店铺运营模式并非没有风险——亚马逊运营的一个重要方面就是账户的健康管理。一旦某个账户出现问题，亚马逊的算法就可能会启动关联检…...

编程日记 2024/9/6 8:53:58

设计模式背后的设计原则和思想

设计模式背后的设计原则和思想是一套指导我们如何设计高质量软件系统的准则和方法论。这些原则和思想不仅有助于提升软件的可维护性、可扩展性和可复用性，还能帮助开发团队更好地应对复杂多变的需求。以下是一些核心的设计原则和思想： 1. 设计原则 设计…...

编程日记 2024/9/6 8:52:57

项目总体框架

一.后端（包装servlet） 使用BaseServlet进行请求的初步处理（利用继承进行执行这个） 在BaseServlet中 处理请求的类型找到对象的方法，并使用注解找到参数名，执行参数自动注入。 package com.csdn.controlle…...

编程日记 2024/9/6 8:51:55

k8s Prometheus

一、部署 Prometheus kubectl create ns kube-ops# 创建 prometheus-cm.yaml apiVersion: v1 kind: ConfigMap metadata:name: prometheus-confignamespace: kube-ops data:prometheus.yml: |global:scrape_interval: 15s # 表示 prometheus 抓取指标数据的频率，默…...

编程日记 2024/9/6 8:48:52

glsl着色器学习（九）屏幕像素空间和设置颜色

在上一篇文章中，使用的是裁剪空间进行绘制，这篇文章使用屏幕像素空间的坐标进行绘制。 上一篇的顶点着色器大概是这样子的 回归一下顶点着色的主要任务： 通常情况下，顶点着色器会进行一系列的矩阵变换操作，将输入的顶…...

编程日记 2024/9/6 8:47:51

前端框架有哪些？

前言 用户体验是每个开发网站的企业中的重中之重。无论后台有多方面的操作和功能，用户的视图和体验都必须是无缝的最友好的。这需要使用前端框架来简化交互式、以用户为中心的网站的开发。 前端框架是一种用于简化Web开发的工具，它提供了一套预定义的代…...

编程日记 2024/9/6 8:45:49

分类预测|基于黑翅鸢优化轻量级梯度提升机算法数据预测Matlab程序BKA-LightGBM多特征输入多类别输出 含对比

分类预测|基于黑翅鸢优化轻量级梯度提升机算法数据预测Matlab程序BKA-LightGBM多特征输入多类别输出 含对比 文章目录 一、基本原理BKA（Black Kite Algorithm）的原理LightGBM分类预测模型的原理BKA与LightGBM的模型流程总结 二、实验结果三、核心代码四、…...

编程日记 2024/9/6 8:44:48

利用大模型实时提取和检索多模态数据探索-利用 Indexify 进行文档分析

概览 传统的文本提取方法常常无法理解非结构化内容，因此提取数据的数据往往是错误的。本文将探讨使用 Indexify，一个用于实时多模态数据提取的开源框架，来更好地分析pdf等非结构化文件。我将介绍如何设置 Indexify，包括服务器设置…...

编程日记 2024/9/6 8:43:47

函数式接口实现策略模式

函数式接口实现策略模式 1.案例背景 我们在日常开发中，大多会写if、else if、else 这样的代码，但条件太多时，往往嵌套无数层if else,阅读性很差，比如如下案例，统计学生的数学课程的成绩： 90-100分&#…...

编程日记 2024/9/6 8:40:45

鸿蒙Next-拉起支付宝的三种方式——教程

鸿蒙Next-拉起支付宝的三种方式——教程 鸿蒙Next系统即将上线，应用市场逐渐丰富、很多APP都准备接入支付宝做支付功能，目前来说有三种方式拉起支付宝：通过支付宝SDK拉起、使用OpenLink拉起、传入支付宝包名使用startAbility拉起。以上的三种…...

编程日记 2024/9/6 8:38:44

Vue.js 组件化开发：父子组件通信与组件注册详解

Vue.js 组件化开发：父子组件通信与组件注册详解 简介： 在 Vue.js 的开发中，组件是构建应用的重要基础。掌握组件的创建与使用，尤其是父子组件的通信和组件的注册与命名，是开发中不可或缺的技能。本文将详细探讨这些内容…...

编程日记 2024/9/6 8:36:42

【HTTP、Web常用协议等等】前端八股文面试题

HTTP、Web常用协议等等 更新日志 2024年9月5日 —— 什么情况下会导致浏览器内存泄漏？ 文章目录 HTTP、Web常用协议等等更新日志1. 网络请求的状态码有哪些？1）1xx 信息性状态码2）2xx 成功状态码3）3xx 重定向状态码4&…...

编程日记 2024/9/6 8:34:40

Datawhale x李宏毅苹果书AI夏令营深度学习详解进阶Task03

在深度学习中，批量归一化（Batch Normalization，BN）技术是一种重要的优化方法，它可以有效地改善模型的训练效果。本文将详细讨论批量归一化的原理、实现方式、在神经网络中的应用，以及如何选择合适的损失函数…...

编程日记 2024/9/6 8:32:39

【机器学习】任务三：基于逻辑回归与线性回归的鸢尾花分类与波士顿房价预测分析

目录 1.目的和要求 1.1 掌握回归分析的概念和使用场景 1.2 掌握机器学习回归分析进行数据预测的有效方法 1.3 掌握特征重要性分析、特征选择和模型优化的方法 2.波士顿房价预测与特征分析 2.1第一步：导入所需的模块和包 2.2 第二步：加载波士顿房价…...

编程日记 2024/9/6 8:31:38

【操作系统存储篇】Linux文件基本操作

目录 一、Linux目录 二、Linux文件的常用操作 三、Linux文件类型 一、Linux目录 Linux有很多目录，Linux一切皆是文件，包括进程、设备等。 相对路径：相对于当前的操作目录，文件位于哪个目录。 绝对路径 ：从根目录开…...

编程日记 2024/9/6 8:30:37

C++ | Leetcode C++题解之第387题字符串中的第一个唯一字符

题目&#xff1a; 题解&#xff1a; class Solution { public:int firstUniqChar(string s) {unordered_map<char, int> position;queue<pair<char, int>> q;int n s.size();for (int i 0; i < n; i) {if (!position.count(s[i])) {position[s[i]] i;…...

编程日记 2024/9/6 8:28:35

数学建模--皮尔逊相关系数、斯皮尔曼相关系数

目录 1.总体的皮尔逊相关系数 2.样本的皮尔逊相关系数 3.对于皮尔逊相关系数的认识 4.描述性统计以及corr函数 ​编辑 5.数据导入实际操作 6.引入假设性检验 6.1简单认识 6.2具体步骤 7.p值判断法 8.检验正态分布 8.1jb检验 8.2威尔克检验&#xff1a;针对于p值进行…...

编程日记 2024/9/6 8:25:33

[2025CVPR]DeepVideo-R1：基于难度感知回归GRPO的视频强化微调框架详解

突破视频大语言模型推理瓶颈，在多个视频基准上实现SOTA性能 一、核心问题与创新亮点 1.1 GRPO在视频任务中的两大挑战 ​安全措施依赖问题​ GRPO使用min和clip函数限制策略更新幅度，导致： 梯度抑制：当新旧策略差异过大时梯度消失收敛困难：策略无法充分优化# 传统GRPO的梯…...

编程新知 2025/8/19 23:46:57

stm32G473的flash模式是单bank还是双bank？

今天突然有人stm32G473的flash模式是单bank还是双bank&#xff1f;由于时间太久&#xff0c;我真忘记了。搜搜发现&#xff0c;还真有人和我一样。见下面的链接&#xff1a;https://shequ.stmicroelectronics.cn/forum.php?modviewthread&tid644563 根据STM32G4系列参考手…...

编程新知 2025/11/12 8:17:34

CVPR 2025 MIMO: 支持视觉指代和像素grounding 的医学视觉语言模型

CVPR 2025 | MIMO&#xff1a;支持视觉指代和像素对齐的医学视觉语言模型 论文信息 标题&#xff1a;MIMO: A medical vision language model with visual referring multimodal input and pixel grounding multimodal output作者&#xff1a;Yanyuan Chen, Dexuan Xu, Yu Hu…...

编程新知 2025/10/6 14:17:21

centos 7 部署awstats 网站访问检测

一、基础环境准备&#xff08;两种安装方式都要做&#xff09; bash # 安装必要依赖 yum install -y httpd perl mod_perl perl-Time-HiRes perl-DateTime systemctl enable httpd # 设置 Apache 开机自启 systemctl start httpd # 启动 Apache二、安装 AWStats&#xff0…...

编程新知 2025/11/7 1:21:05

【磁盘】每天掌握一个Linux命令 - iostat

目录 【磁盘】每天掌握一个Linux命令 - iostat工具概述安装方式核心功能基础用法进阶操作实战案例面试题场景生产场景 注意事项 【磁盘】每天掌握一个Linux命令 - iostat 工具概述 iostat&#xff08;I/O Statistics&#xff09;是Linux系统下用于监视系统输入输出设备和CPU使…...

编程新知 2025/9/30 16:39:11

生成 Git SSH 证书

&#x1f511; 1. ​​生成 SSH 密钥对​​ 在终端&#xff08;Windows 使用 Git Bash&#xff0c;Mac/Linux 使用 Terminal&#xff09;执行命令&#xff1a; ssh-keygen -t rsa -b 4096 -C "your_emailexample.com" ​​参数说明​​&#xff1a; -t rsa&#x…...

编程新知 2025/9/18 11:31:13

Spring Boot面试题精选汇总

&#x1f91f;致敬读者 &#x1f7e9;感谢阅读&#x1f7e6;笑口常开&#x1f7ea;生日快乐⬛早点睡觉 &#x1f4d8;博主相关 &#x1f7e7;博主信息&#x1f7e8;博客首页&#x1f7eb;专栏推荐&#x1f7e5;活动信息 文章目录 Spring Boot面试题精选汇总⚙️ **一、核心概…...

编程新知 2025/9/24 23:08:17

Robots.txt 文件

什么是robots.txt&#xff1f; robots.txt 是一个位于网站根目录下的文本文件&#xff08;如&#xff1a;https://example.com/robots.txt&#xff09;&#xff0c;它用于指导网络爬虫&#xff08;如搜索引擎的蜘蛛程序&#xff09;如何抓取该网站的内容。这个文件遵循 Robots…...

编程新知 2025/9/9 5:38:23

《C++ 模板》

目录 函数模板 类模板 非类型模板参数 模板特化 函数模板特化 类模板的特化 模板&#xff0c;就像一个模具&#xff0c;里面可以将不同类型的材料做成一个形状&#xff0c;其分为函数模板和类模板。 函数模板 函数模板可以简化函数重载的代码。格式&#xff1a;templa…...

编程新知 2025/6/11 3:20:47

Java + Spring Boot + Mybatis 实现批量插入

在 Java 中使用 Spring Boot 和 MyBatis 实现批量插入可以通过以下步骤完成。这里提供两种常用方法&#xff1a;使用 MyBatis 的 <foreach> 标签和批处理模式&#xff08;ExecutorType.BATCH&#xff09;。 方法一&#xff1a;使用 XML 的 <foreach> 标签&#xff…...

编程新知 2025/6/11 2:44:05