当前位置: 首页 > news >正文

Elasticsearch + Search UI 构建一个文件搜索引擎

目录

  • Elasticsearch
    • 使用优势
    • App Search
  • Search UI
    • 配置engine
    • 集中管理配置和提供实用工具函数
    • 配置和初始化一个基于Elasticsearch的搜索界面应用程序
    • Search UI 基础用法
  • 好书推荐

在这里插入图片描述

Elasticsearch

使用优势

使用ElasticSearch的主要好处在于其强大的全文搜索实时分析能力。ElasticSearch基于Apache Lucene构建,提供了高性能、可扩展的搜索解决方案,支持复杂的搜索查询,如模糊搜索、全文搜索、多字段搜索、地理空间搜索等。它能够自动处理文本分析,如分词、索引和查询优化,从而极大地提升了搜索速度和准确性。此外,ElasticSearch支持分布式部署,能够轻松处理PB级数据,保证了系统的高可用性和可扩展性。无论是用于构建搜索引擎、日志分析、实时监控还是其他需要高效搜索和分析的场景,ElasticSearch都能提供强大的技术支持和灵活的配置选项,帮助用户快速响应业务需求。

初步使用Elasticsearch包括下面的步骤

  • 运行 Elasticsearch 和 Kibana(使用 Elastic Cloud 或在本地 Docker 开发环境中),
  • 向 Elasticsearch 添加简单(无时间戳)数据集,
  • 运行基本搜索。

Elasticsearch 入门指南

App Search

App Search 建立在 Elasticsearch 之上,为您的应用程序提供丰富的开箱即用搜索功能。App Search 包括:

  • 一组用于提取内容的 RESTful API
  • 直观的仪表板
  • 实时搜索查询和点击分析
  • 查询相关性调整
  • 支持查询同义词
  • 支持语言优化引擎
  • 支持 API 客户端

Search UI

Search UI 是一个基于React 实现的一套UI框架(可以嵌套在任何JS框架,包括Vue框架)用于使用Elastic快速开发现代、引人入胜的搜索体验。无需重新设计轮子,即可快速启动并运行。
vue版本案例
Search UI入门指南
使用App Search创建Search UI
Search UI API

注意:使用官方vue版本,需要用特定的class 对ES返回的<em>标签进行设置。

配置engine

Elasticsearch查询的JSON配置,如引擎名称、端点基础、搜索密钥、结果字段、排序字段、过滤器、标题字段和URL字段。

{"engineName": "es-plugins-file",//引擎名称"endpointBase": "/elastic_serve",//查询的基础URL部分"searchKey": "",//搜索密钥"resultFields": [//结果字段"actLine","classId","deptId","className","deptName","stuName","fileContent","fileName","filePath","fileType","fileUrl","parentId","stuId","uploadDate","uploadDateStr","uploadTime","uploadTimeStr","id"],"sortFields": [//排序字段"uploadTime"],"facets": [//过滤器"uploadDate","classId","deptId"],"titleField": "fileName",//标题字段"urlField": "fileUrl"//URL字段
}

集中管理配置和提供实用工具函数

import config from "./engine.json";
export function getConfig() {if (process.env.NODE_ENV === "test") {return {};}if (config.engineName) return config;if (typeof window !== "undefined" &&window.appConfig &&window.appConfig.engineName) {return window.appConfig;}return {};
}
//处理字符串
function toLowerCase(string) {if (string) return string.toLowerCase();
}function capitalizeFirstLetter(string) {return string.charAt(0).toUpperCase() + string.slice(1);
}
//获取标题字段
export function getTitleField() {// If no title field configuration has been provided, we attempt// to use a "title" field, if one existsreturn getConfig().titleField || "title";
}
//获取URL字段
export function getUrlField() {return getConfig().urlField;
}
//获取缩略图字段
export function getThumbnailField() {return getConfig().thumbnailField;
}
//获取过滤字段
export function getFacetFields() {return getConfig().facets || [];
}
//获取排序字段
export function getSortFields() {return getConfig().sortFields || [];
}
//获取结果标题
export function getResultTitle(result) {const titleField = getTitleField();return result.getSnippet(titleField);
}//剔除不必要的结果字段。从结果字段中剔除不需要显示的字段,例如已配置为“标题”显示的字段。
export function stripUnnecessaryResultFields(resultFields) {return Object.keys(resultFields).reduce((acc, n) => {if (["_meta","id",toLowerCase(getTitleField()),toLowerCase(getUrlField()),toLowerCase(getThumbnailField()),].includes(toLowerCase(n))) {return acc;}acc[n] = resultFields[n];return acc;}, {});
}
//建搜索选项
export function buildSearchOptionsFromConfig(dateRange = null) {const config = getConfig();console.log('1123123123123123213213', config.searchFields, config.fields)const searchFields = (config.searchFields || config.fields || []).reduce((acc, n) => {acc = acc || {};acc[n] = {};return acc;},undefined);const resultFields = (config.resultFields || config.fields || []).reduce((acc, n) => {acc = acc || {};acc[n] = {raw: {},snippet: {size: 100,fallback: true}};return acc;},undefined);if (config.urlField) {resultFields[config.urlField] = {raw: {},snippet: {size: 100,fallback: true}};}if (config.thumbnailField) {resultFields[config.thumbnailField] = {raw: {},snippet: {size: 100,fallback: true}};}if (config.titleField) {resultFields[config.titleField] = {raw: {},snippet: {size: 100,fallback: true}};}const searchOptions = {};searchOptions.result_fields = resultFields;searchOptions.search_fields = searchFields;return searchOptions;
}//构建过滤配置
export function buildFacetConfigFromConfig() {const config = getConfig();const facets = (config.facets || []).reduce((acc, n) => {acc = acc || {};acc[n] = {type:'value',size:100}return acc;}, undefined);return facets;
}//构建排序选项
export function buildSortOptionsFromConfig() {const config = getConfig();return [{name: "Relevance",value: "",direction: ""},...(config.sortFields || []).reduce((acc, sortField) => {acc.push({name: `${capitalizeFirstLetter(sortField)} ASC`,value: sortField,direction: "asc"});acc.push({name: `${capitalizeFirstLetter(sortField)} DESC`,value: sortField,direction: "desc"});return acc;}, [])];
}
//构建自动完成查询配置
export function buildAutocompleteQueryConfig() {const querySuggestFields = getConfig().querySuggestFields;if (!querySuggestFields ||!Array.isArray(querySuggestFields) ||querySuggestFields.length === 0) {return {};}return {suggestions: {types: {documents: {fields: getConfig().querySuggestFields}}}};
}

配置和初始化一个基于Elasticsearch的搜索界面应用程序

使用了@elastic/search-ui-app-search-connector来连接到Elasticsearch,并通过一系列的配置函数来设置搜索参数、自动完成查询、过滤器(facets)和排序选项。


//导入必要的模块:包括regenerator-runtime/runtime以支持异步操作,AppSearchAPIConnector用于连接到Elasticsearch,以及从./config-helper导入的配置构建函数。
import "regenerator-runtime/runtime";
import AppSearchAPIConnector from "@elastic/search-ui-app-search-connector";import {buildAutocompleteQueryConfig,buildFacetConfigFromConfig,buildSearchOptionsFromConfig,buildSortOptionsFromConfig,getConfig,getFacetFields
} from "./config-helper";//获取配置:通过getConfig函数获取应用程序的配置,包括搜索密钥(searchKey)、引擎名称(engineName)、主机标识符(hostIdentifier)和基础URL(endpointBase)。const { hostIdentifier, searchKey, endpointBase, engineName } = getConfig();
//初始化API连接器:使用AppSearchAPIConnector创建一个新的连接器实例,传入必要的配置参数。
const connector = new AppSearchAPIConnector({searchKey,engineName,hostIdentifier,endpointBase
});//构建配置对象:构建一个配置对象,其中包含搜索查询的配置、自动完成查询的配置、API连接器实例、以及其他相关设置,如是否在初始加载时总是执行搜索、是否跟踪URL状态。
const config = {searchQuery: {facets: buildFacetConfigFromConfig(),...buildSearchOptionsFromConfig()},autocompleteQuery: buildAutocompleteQueryConfig(),apiConnector: connector,alwaysSearchOnInitialLoad: false,//设置为false意味着在组件首次加载时不会自动触发搜索,需要用户手动触发搜索或者在加载完成后根据其他条件动态决定是否搜索的场景。trackUrlState: false,// 禁用 URL 状态跟踪};export default config;

Search UI 基础用法

SearchDriver是一个用于集成Elasticsearch搜索功能到Vue应用程序的工具,用来初始化和管理搜索功能。config是之前定义的配置对象,包含了所有必要的设置以支持搜索操作。

import { SearchDriver } from "@elastic/search-ui";

创建SearchDriver的实例,并将之前构建的配置对象传递给它。这样做的目的是将配置好的搜索功能集成到Vue应用程序中,SearchDriver可能负责处理搜索请求、更新搜索结果、管理状态等任务。

const driver = new SearchDriver(config);
  • subscribeToStateChanges
    订阅搜索状态变化的事
  driver.subscribeToStateChanges(state => {// 搜索状态发生变化时,打印新的状态对象并执行相应的操作。this.searchState = state;});
  • getState
    这个方法通常用于获取当前搜索状态,包括搜索参数、过滤条件、排序选项等信息。
const {searchTerm,//搜索查询的关键词或短语。resultsPerPage,//每页显示的搜索结果数量。filters,//应用的过滤器列表。facets//可用于搜索结果细分的分面(facet)信息。} = driver.getState();
  • reset
    用于重置搜索状态到初始状态,清除所有之前的搜索参数、过滤条件和排序选项。
  driver.reset();
  • clearFilters
    用于清除所有当前应用的过滤条件,但不会重置其他搜索状态,如搜索关键字或排序选项。
driver.clearFilters();
  • getActions().setSearchTerm();
    调用SearchDriver实例的getActions方法来获取一个操作对象,然后通过这个操作对象设置搜索关键字。
  • setCurrent
    跳转到第几页
 driver.setCurrent();
  • getState().facets
    用于读取当前搜索状态中的特定信息

  • removeFilter
    从当前的搜索状态中移除过滤条件

  driver.removeFilter('classId');
  • addFilter
    向当前的搜索状态中添加过滤条件
driver.addFilter('classId',"具体值", "any");

好书推荐

《区块链编程》
区块链技术远超比特币背后的技术范畴,其概念实际上十分广泛。它凭借坚不可摧的安全性、去中心化交易以及可独立验证的供应链,已经彻底改变了货币、数字身份和物流等领域。借助以太坊和超级账本等平台,开发者可以利用熟悉的编程语言轻松上手区块链项目。
《区块链编程》以简明扼要的方式,教会读者如何设计和构建基于区块链的去中心化应用程序。首先,你将全面了解区块链的工作原理。随后,你将使用以太坊和Solidity编写你的首个智能合约。接着,你将逐步添加Web界面、信任验证等功能,直至准备好应用程序的部署。你只需配置好标准硬件和利用开源软件,便可轻松启程,踏上区块链编程的探索之旅。
在这里插入图片描述

相关文章:

Elasticsearch + Search UI 构建一个文件搜索引擎

目录 Elasticsearch使用优势App Search Search UI配置engine集中管理配置和提供实用工具函数配置和初始化一个基于Elasticsearch的搜索界面应用程序Search UI 基础用法 好书推荐 Elasticsearch 使用优势 使用ElasticSearch的主要好处在于其强大的全文搜索和实时分析能力。Elas…...

机械学习—零基础学习日志(如何理解概率论2)

全概率公式与贝叶斯公式 上面所提到的公式&#xff0c;可以使用上一篇文章的基本公式推导。 使用到了概率的基本运算公式。 完整的公式展示&#xff1a; 习题练习&#xff1a; 剩余的练习&#xff1a; 第二题解析&#xff1a; 第三题&#xff1a; 第四题&#xff1a; 注意&…...

鸿蒙关于手机全局本地文件读取,写入

一.背景 需求是需要操作用户手机中的文件&#xff0c;不是应用沙箱 二.解决方案 这里要注意的一点拿到fsOpen.path的路径再去进行open文件&#xff0c;因为这里还不知道本地文件路径在哪里&#xff0c;需要选择一下路径再拿到路径去请求 1.这里就是进行两个fs.open&#xf…...

嵌入式企业面试真题

1.C语言中指针数组和数组指针的区别是什么? 答:指针数组是指数组的元素都是指针类型的数组。数组指针是指一个指向数组的指针。指向的是数组第一个元素的地址,每次偏移一个数组的大小。 2.讲一下什么是结构体字节对齐? 答:结构体字节对齐是指当结构体中元素的物理内存大…...

开源一款H5自适应留言表白墙php源码下载

开源一款H5自适应留言表白墙php源码下载&#xff0c;优点就是安装简单&#xff0c;功能实用[滑稽][滑稽] 缺点就是UI简陋&#xff0c;功能稀少 第一张是首页&#xff0c;第二张是查看留言 第三张是留言列表(10秒自动刷新)&#xff0c;第四张是表白墙界面...

jmeter引入jar包的三种方式

示例 实现对登录密码进行MD5加密 pom文件依赖 <!-- https://mvnrepository.com/artifact/commons-codec/commons-codec --><dependency><groupId>commons-codec</groupId><artifactId>commons-codec</artifactId><version>1.12&l…...

零基础学习Redis(5) -- redis单线程模型介绍

前面我们提到过&#xff0c;redis是单线程的&#xff0c;这期我们详细介绍一下redis的单线程模型 1. redis单线程模型 redis只使用一个线程处理所有的请求&#xff0c;并不是redis服务器进程内部只有一个线程&#xff0c;其实也存在多个线程&#xff0c;只不过多个线程是在处…...

Android Audio

audio概述&#xff1a; Android Audio知识梳理 看完这一篇就够了&#xff01;-CSDN博客 Android audio篇章&#xff08;1&#xff09;------Audio架构_android audio(1)-CSDN博客 android audio google&#xff1a; 音频 | Android Open Source Project (google.cn) 音频…...

远程MySQL数据库:定义、优势及cPanel的数据库工具

在现代网站和应用程序开发中&#xff0c;数据库是必不可少的核心部分。通常情况下&#xff0c;数据库与网站托管在同一台服务器上&#xff0c;但为了提升性能和安全性&#xff0c;越来越多的用户选择使用远程MySQL数据库。那么&#xff0c;什么是远程MySQL数据库呢&#xff1f;…...

【docker】Dockerfile

Dockerfile是用于构建Docker镜像的文本文件&#xff0c;其中包含一组用于定义镜像构建过程的指令。下面是常见的Dockerfile指令及其解释&#xff1a; FROM&#xff1a;指定基础镜像&#xff0c;用于构建新镜像。COPY&#xff1a;将文件或目录从构建上下文复制到镜像中。ADD&am…...

Redis 的 List 结构非常适合用于实现消息队列php

1. Redis List 结构消息队列简介 Redis 的 List 结构非常适合用于实现消息队列。你可以通过 LPUSH 或 RPUSH 命令将消息推入队列&#xff0c;通过 BLPOP 或 BRPOP 命令从队列中弹出消息。BLPOP 和 BRPOP 命令支持阻塞操作&#xff0c;适合在消费者端等待消息的到来。 2. 实现…...

极速闪存启动:SD与SPI模式的智能初始化指南

最近很多客户朋友在询问我们 CS 创世 SD NAND 能不能使用 SPI 接口&#xff0c;两者使用起来有何区别&#xff0c;下面为大家详细解答。 SD MODE: CS 创世 SD NAND 支持 SD 模式和 SPI 模式&#xff0c;SD NAND 默认为 SD 模式&#xff0c;上电后&#xff0c;其初始化过程如下…...

利用多Lora节省大模型部署成本|得物技术

一、背景 近期&#xff0c;我们在大模型集群的部署过程中遇到了一些挑战。公司有多个业务场景&#xff0c;每个场景都基于自身的数据进行微调&#xff0c;训练出相应的大模型并上线。然而&#xff0c;这些场景的调用量并不高&#xff0c;同时大模型的部署成本较为昂贵&#xf…...

使用SSMS连接和查询 SQL Server 实例

简介 SQL Server Management Studio 是用于管理SQL Server基础架构的集成环境。Management Studio提供用于配置、监视和管理SQL Server实例的工具。 此外&#xff0c;它还提供了用于部署、监视和升级数据层组件(如应用程序使用的数据库和数据仓库)的工具以生成查询和脚本。 官方…...

HarmonyOS Next原生应用开发-从TS到ArkTS的适配规则(十五)

一、不支持for … in 规则&#xff1a;arkts-no-for-in 级别&#xff1a;错误 由于在ArkTS中&#xff0c;对象布局在编译时是确定的、并且不能在运行时被改变&#xff0c;所以不支持使用for … in迭代一个对象的属性。对于数组来说&#xff0c;可以使用常规的for循环。TypeScri…...

两个系统之间跳转免密登录

1、 两个系统之间跳转免密登录_从一个系统跳转到另一个系统,不用再重新登录-CSDN博客 2、 页面跳转统一登录实现_前端从一个系统跳转到其他系统-CSDN博客...

SQL基础——MySQL的触发器、存储引擎、事务

简介&#xff1a;个人学习分享&#xff0c;如有错误&#xff0c;欢迎批评指正。 一、MySQL的触发器 1.概述 介绍 触发器&#xff0c;就是一种特殊的存储过程。触发器和存储过程一样是一个能够完成特定功能、存储在数据库服务器上的SQL片段&#xff0c;但是触发器无需调用&…...

目标检测算法:对比YOLOv3、YOLOv5、YOLOv8

目标检测 YOLOv3 数据处理 可输入任意大小的图片&#xff08;特征图大小最好是32倍数&#xff09;Anchor&#xff1a;K-Means聚类IOUNMS 模型结构 Backbone Darknet53 无最大池化&#xff0c;步长2卷积层进行下采样每个Conv后 BN LeakyReLU引入残差结构中间层和某一层上…...

C# 属性(Property)

C# 属性&#xff08;Property&#xff09; C# 中的属性&#xff08;Property&#xff09;是一种用于访问和设置类或结构体成员的值的特殊成员。属性提供了一种封装字段的方式&#xff0c;使得字段的访问更加安全和灵活。本文将详细介绍 C# 属性的概念、用途、语法以及如何使用…...

3. 数据结构——栈的操作实现

1. 顺序栈 主要操作&#xff1a;初始化、栈判空、入栈、出栈、去栈顶元素 1.1 直接数组存储栈 //顺序栈的实现 #include<stdio.h> #define MaxSize 50 typedef int ElemType; typedef struct{ElemType data[MaxSize];int top; //指向栈顶指针&#xff0c;最开始-1 …...

网络编程(Modbus进阶)

思维导图 Modbus RTU&#xff08;先学一点理论&#xff09; 概念 Modbus RTU 是工业自动化领域 最广泛应用的串行通信协议&#xff0c;由 Modicon 公司&#xff08;现施耐德电气&#xff09;于 1979 年推出。它以 高效率、强健性、易实现的特点成为工业控制系统的通信标准。 包…...

多云管理“拦路虎”:深入解析网络互联、身份同步与成本可视化的技术复杂度​

一、引言&#xff1a;多云环境的技术复杂性本质​​ 企业采用多云策略已从技术选型升维至生存刚需。当业务系统分散部署在多个云平台时&#xff0c;​​基础设施的技术债呈现指数级积累​​。网络连接、身份认证、成本管理这三大核心挑战相互嵌套&#xff1a;跨云网络构建数据…...

Docker 运行 Kafka 带 SASL 认证教程

Docker 运行 Kafka 带 SASL 认证教程 Docker 运行 Kafka 带 SASL 认证教程一、说明二、环境准备三、编写 Docker Compose 和 jaas文件docker-compose.yml代码说明&#xff1a;server_jaas.conf 四、启动服务五、验证服务六、连接kafka服务七、总结 Docker 运行 Kafka 带 SASL 认…...

基于uniapp+WebSocket实现聊天对话、消息监听、消息推送、聊天室等功能,多端兼容

基于 ​UniApp + WebSocket​实现多端兼容的实时通讯系统,涵盖WebSocket连接建立、消息收发机制、多端兼容性配置、消息实时监听等功能,适配​微信小程序、H5、Android、iOS等终端 目录 技术选型分析WebSocket协议优势UniApp跨平台特性WebSocket 基础实现连接管理消息收发连接…...

如何在看板中有效管理突发紧急任务

在看板中有效管理突发紧急任务需要&#xff1a;设立专门的紧急任务通道、重新调整任务优先级、保持适度的WIP&#xff08;Work-in-Progress&#xff09;弹性、优化任务处理流程、提高团队应对突发情况的敏捷性。其中&#xff0c;设立专门的紧急任务通道尤为重要&#xff0c;这能…...

python爬虫:Newspaper3k 的详细使用(好用的新闻网站文章抓取和解析的Python库)

更多内容请见: 爬虫和逆向教程-专栏介绍和目录 文章目录 一、Newspaper3k 概述1.1 Newspaper3k 介绍1.2 主要功能1.3 典型应用场景1.4 安装二、基本用法2.2 提取单篇文章的内容2.2 处理多篇文档三、高级选项3.1 自定义配置3.2 分析文章情感四、实战案例4.1 构建新闻摘要聚合器…...

鱼香ros docker配置镜像报错:https://registry-1.docker.io/v2/

使用鱼香ros一件安装docker时的https://registry-1.docker.io/v2/问题 一键安装指令 wget http://fishros.com/install -O fishros && . fishros出现问题&#xff1a;docker pull 失败 网络不同&#xff0c;需要使用镜像源 按照如下步骤操作 sudo vi /etc/docker/dae…...

【开发技术】.Net使用FFmpeg视频特定帧上绘制内容

目录 一、目的 二、解决方案 2.1 什么是FFmpeg 2.2 FFmpeg主要功能 2.3 使用Xabe.FFmpeg调用FFmpeg功能 2.4 使用 FFmpeg 的 drawbox 滤镜来绘制 ROI 三、总结 一、目的 当前市场上有很多目标检测智能识别的相关算法&#xff0c;当前调用一个医疗行业的AI识别算法后返回…...

html css js网页制作成品——HTML+CSS榴莲商城网页设计(4页)附源码

目录 一、&#x1f468;‍&#x1f393;网站题目 二、✍️网站描述 三、&#x1f4da;网站介绍 四、&#x1f310;网站效果 五、&#x1fa93; 代码实现 &#x1f9f1;HTML 六、&#x1f947; 如何让学习不再盲目 七、&#x1f381;更多干货 一、&#x1f468;‍&#x1f…...

算法岗面试经验分享-大模型篇

文章目录 A 基础语言模型A.1 TransformerA.2 Bert B 大语言模型结构B.1 GPTB.2 LLamaB.3 ChatGLMB.4 Qwen C 大语言模型微调C.1 Fine-tuningC.2 Adapter-tuningC.3 Prefix-tuningC.4 P-tuningC.5 LoRA A 基础语言模型 A.1 Transformer &#xff08;1&#xff09;资源 论文&a…...