Boost库文档搜索引擎
文章目录
- 综述
- 效果展示
- 去标签化，清理数据
- 构建索引
- 用户查询
综述
该项目使用了BS架构，实现了用户对Boost库进行站内搜索的功能，
用户输入关键字使用http协议通过ajax将数据发送给后端服务器，后端进行分词，
通过倒排索引和正排索引获得若干个文档，
每个文档按照一定权重进行排序，拼接成一个网页反馈给用户，
每个搜索结果包括文档标题，简介，URL，并可以通过点击标题跳转到特定的网址中
效果展示
去标签化，清理数据
将爬虫和下载的boost库的文件，进行提炼，去标签化，保留里面的有效数据
- 提取html文件
- 将提取到的html文件进行提炼有效数据
- 将有效数据的集合写入到一个文件中
构建索引
- 根据将去标签化后构建的内容集合在内存中
构建正排索引，形成对应的文档结构体 - 将形成的文档结构体在内存中
构建倒排索引，根据关键词找到对应的倒排拉链（一系列和该关键字相光的文档集合)- 根据
Jieba分词对title和content进行分词同时划定权重，构建倒排拉链 - 每个倒排索引中都包含权重，之后我们就能够使用权重对文档优先级进行排序
- 根据
用户查询
- 用户输入搜索关键字后，先进行
JieBa分词 - 通过
倒排索引获得对应的倒排拉链 - 在
倒排拉链中通过正排索引获得对应一系列的文档内容 - 根据索引中的权重按高到低进行排序，组合成一个网页反馈给用户
相关文章：
Boost库文档搜索引擎
文章目录综述效果展示去标签化，清理数据构建索引用户查询综述 该项目使用了BS架构，实现了用户对Boost库进行站内搜索的功能， 用户输入关键字使用http协议通过ajax将数据发送给后端服务器，后端进行分词， 通过倒排索引…...
Linux中安装JDK
Linux中安装JDK一 、下载JDK包1、下载网址2、往下翻，找到 java83、继续往下翻找到要下载的版本 64位linux版本二 上传jdk安装包三 开始安装整体过程1、解压文件2、查看解压文件3、进入解压文件夹确认4、配置环境变量5、重新加载环境变量6、确认安装成功一 、下载JDK…...
宝塔面板公网ip非80端口非443端口部署ssl
有不少人使用家用宽带，虽然申请下来了公网ip，但是运营商封了80与443端口，但仍想使用ssl证书 一、仅封80端口 1、先在宝塔面板里创建网站，域名为test.xxx.cn:8085 2、再到域名运营商做A记录解析，此时可以通过http://…...
手撕八大排序（上）
排序的概念及其引用： 排序的概念： 排序：所谓排序，就是使一串记录，按照其中的某个或某些关键字的大小，递增或递减的排列起来的操作。 稳定性：假定在待排序的记录序列中，存在多个具有…...
clickhouse 怎么统计每天0点到10点的某个字段的数据量
比喻：统计最近一周0点到10点期间每天id的数量 日期：2023-03-23 09:02:22 日期全是这种格式 第一步先把日期转小时：先把小于10小时的查出来 toHour(card_time)<10 select toDate(t.dates) as dates,sum(t.count) as count from ( se…...
[qiankun]-图片加载问题
[qiankun]-图片加载问题开发版本图片加载报错现象描述分析解决方案base64的展示格式静态资源的展示方式取消hash的取值方式，并在主应用中添加图片设置图片的绝对路径根据环境动态设置图片的绝对路径nginx转发方式开发版本 "vue": "^3.2.45", &…...
关于upstream的八种回调方法
1 creat_request调用背景：用于创建自己模板与第三方服务器的第一次连接步骤1） 在Nginx主循环（ngx_worker_process_cycle方法） 中，会定期地调用事件模块， 以检查是否有网络事件发生。2） 事件模块…...
0303泰勒公式-微分中值定理与导数的应用
文章目录1 引入2 泰勒中值定理2.1 泰勒多项式3.2 泰勒中值定理13.3 泰勒中值定理22.4 误差估计4 麦克劳林公式5 常见麦克劳林公式6 泰勒公式相关例题6.1 将函数展成指定的泰勒公式6.1.1 公式法6.1.2 间接展法（变量替换）6.2 利用泰勒公式求极限6.3 确定无…...
日常运维基础命令
commandexplainps -f -u user_name显示指定用户的进程ps aux --sort-pcpu,pmem先以cpu使用量进行排序，cpu使 用一样，以内存使用率排序ps -ef --forest显示ACLII进程数ps --ppid 28208显示父进程的子进程ps -p 14447 -L显示进程的线程ps -e -o pid&#x…...
人员行为识别系统 TensorFlow
人员行为识别系统人员行为识别系统通过TensorFlow深度学习技术，人员行为识别算法对画面中区域人员不按要求穿戴、违规抽烟打电话、睡岗离岗以及作业流程不规范实时分析预警，发现违规行为立即抓拍告警。深度学习应用到实际问题中，一个非常棘手…...
ES-倒排索引BKD原理skiplist
1.Elasticsearch数据存储结构FST、skiplist、BKD-tree、LSM-tree Elasticsearch数据结构存储流程_善思的博客-CSDN博客_elasticsearch 数据结构 number?keyword?傻傻分不清楚 - Elastic 中文社区 ElasticSearch实战（六）-Skip List 跳表算法…...
每天一道大厂SQL题【Day12】微众银行真题实战(二)
每天一道大厂SQL题【Day12】微众银行真题实战(二) 大家好，我是Maynor。相信大家和我一样，都有一个大厂梦，作为一名资深大数据选手，深知SQL重要性，接下来我准备用100天时间，基于大数据岗面试中的经典SQL题&…...
带您了解TiDB MySQL数据库中关于日期、时间的坑
带您了解TiDB & MySQL数据库中关于日期、时间的坑时间的基础知识什么是时间计算时间的几种方法世界时（UT）协调世界时（UTC）国际原子时（TAI）时区的概念中国所在的时区操作系统的时区datetimedatectl数据库…...
【华为OD机试模拟题】用 C++ 实现 - 求字符串中所有整数的最小和
最近更新的博客 华为OD机试 - 入栈出栈（C++） | 附带编码思路 【2023】 华为OD机试 - 箱子之形摆放（C++） | 附带编码思路 【2023】 华为OD机试 - 简易内存池 2（C++） | 附带编码思路 【2023】 华为OD机试 - 第 N 个排列（C++） | 附带编码思路 【2023】 华为OD机试 - 考古…...
harbor 仓库迁移升级
harbor 仓库迁移升级 harbor仓库安装数据传输仓库切换版本 v1.8.0 v2.3.5 harbor仓库安装 环境准备：安装docker详见：docker 的介绍和部署，并下载docker-compose详见：docker 三剑客compose。 现有支持的安装harbor仓库的方式有两…...
评论功能设计思路~
文章目录 评论功能设计框架1、定义2、目标3、动机4、评论类别**5、评论互动****6、评论区展示结构****6.1 主题式****6.2 平铺式****6.3 盖楼式****7、评论排序机制****8、评论加载形式****9、其他**结语评论功能设计框架 1、定义 评论是指针对于事物进行主观或客观的自我印象…...
算法训练营 day52 动态规划 买卖股票的最佳时机系列1
算法训练营 day52 动态规划 买卖股票的最佳时机系列1 买卖股票的最佳时机 121. 买卖股票的最佳时机 - 力扣（LeetCode） 给定一个数组 prices ，它的第 i 个元素 prices[i] 表示一支给定股票第 i 天的价格。 你只能选择 某一天 买入这只股票…...
3.基于分割的文本检测算法--DBNet++
文章目录1.概况2.DBNet中的主要方法2.1 网络结构2.2 适应特征图融合模块(Adaptive Scale Fusion Module, ASF)3.ASF模块的源码实现参考资料欢迎访问个人网络日志🌹🌹知行空间🌹🌹 1.概况 2022年02月份论文：Real-Time S…...
IOS打包、SDK接入记录等
IOS打包、SDK接入记录等 Mac上安装HCLR路径 /Applications/Unity/Hub/Editor/2019.4.40f1c1/Unity.app/Contents/il2cpp HCLR 指定4.40是要Unity启动打开的il2cpp，否则HCLR Installer他会报找不到MonoBleedingEdge Mac删除证书 只能点击钥匙串做上角的登录后&…...
【C++】类与对象（引入）
目录 前言 类的引入 类的定义 封装与访问限定符 封装 访问限定符 类的实例化 类的大小 this指针 特性 前言 🎶我们都知道，C语言是面向过程的编程，而C是面向对象的编程，更多体现在编程的关注点上。 🎶就拿洗…...
Adafruit GPS库：轻量级NMEA 0183解析器设计与嵌入式实践
1. Adafruit GPS 库概述Adafruit_GPS 是 Adafruit 公司为嵌入式平台（尤其是基于 Arduino 生态的 MCU）开发的轻量级、高鲁棒性 GPS 数据解析库。其核心目标并非驱动 GPS 模块硬件，而是专注于从串行流中可靠提取、校验并结构化解析 NMEA 0183 协…...
从Demo到生产级：免费开源Agentic RAG实战课程，手把手教你构建智能系统！
Production Agentic RAG Course是一个免费开源课程，旨在帮助开发者从零构建生产级Agentic RAG系统。课程分为5个模块，共17节课，涵盖架构设计、工具集成、性能优化和生产部署等关键内容。Agentic RAG通过引入Agent能力，实现主动规划…...
LeetCode 238. Product of Array Except Self 题解
LeetCode 238. Product of Array Except Self 题解 题目描述 给你一个整数数组 nums，返回 数组 answer ，其中 answer[i] 等于 nums 中除 nums[i] 之外其余各元素的乘积 。 题目数据 保证 数组 nums之中任意元素的全部前缀元素和后缀的乘积都在 32 位 整…...
终极jscpd API编程指南：如何在项目中集成代码重复检测功能
终极jscpd API编程指南：如何在项目中集成代码重复检测功能 【免费下载链接】jscpd Copy/paste detector for programming source code. 项目地址: https://gitcode.com/gh_mirrors/js/jscpd jscpd是一个强大的开源代码重复检测工具，支持150编程语…...
PyCharm实战：从零到一完成YOLOv11自定义数据集训练
1. 环境准备与数据集配置 第一次用PyCharm跑YOLOv11训练时，我对着满屏的代码和配置文件差点放弃。后来发现只要环境装对了，后面都是顺水推舟。这里分享几个新手容易踩的坑：CUDA版本和PyTorch不匹配会导致显卡根本用不上，conda环境…...
小样本学习：OpenClaw+nanobot镜像快速领域适配方案
小样本学习：OpenClawnanobot镜像快速领域适配方案 1. 为什么需要小样本领域适配 作为一名长期关注AI落地的开发者，我经常遇到这样的困境：通用大模型在垂直领域表现不佳，而从头训练专业模型又需要海量标注数据。直到发现OpenClaw…...
2026年3月26隔夜暗盘挂单排行榜
推荐好文:每年节约五六千交易费不香吗如何获取龙虎榜是否有量化参与如何获取股东减持信息大A有5400多只股票, 这里面只有不到10%, 约500只由资金投票, 剩余的都是杂毛, 炒股看龙头找主线. 从隔夜挂单里选择, 再叠加我们之前分享的如何判断是否有大股东减持, 是否有融资融券参与…...
从碎片到全景：基于RDP缓存文件（*.bmc）的自动化取证与图像重构实践
1. 揭开RDP缓存文件的神秘面纱 第一次接触*.bmc文件时，我完全没意识到这些看似普通的缓存文件里藏着这么多秘密。当时正在处理一个内部安全审计项目，需要确认某位离职员工是否通过远程桌面泄露了公司数据。在翻遍常规日志无果后，同事提醒我检…...
告别繁琐的pip安装，用快马平台快速搭建python数据分析原型
最近在做一个数据分析的小项目时，我深刻体会到了Python环境配置的繁琐。每次换电脑或者重装系统，都要重新安装Python、配置pip、解决各种依赖冲突，光是环境准备就能耗掉半天时间。特别是当需要快速验证一个想法时，这种等待简直让人…...
在普通PC上运行macOS的完整教程：OneClick macOS Simple KVM深度解析
在普通PC上运行macOS的完整教程：OneClick macOS Simple KVM深度解析 【免费下载链接】OneClick-macOS-Simple-KVM Tools to set up a easy, quick macOS VM in QEMU, accelerated by KVM. Works on Linux AND Windows. 项目地址: https://gitcode.com/gh_mirrors/…...