elasticsearch文档读写原理大致分析一下
文档写简介
- 客户端通过hash选择一个node发送请求，专业术语叫做协调节点
- 协调节点会对document进行路由，将请求转发给对应的primary shard
- primary shard在处理完数据后，会将document 同步到所有replica shard
- 协调节点将处理结果返回给客户端
文档写底层原理
primary shard
- 写入document 到内存buffer中
- 生成一个translog日志文件
内存buffer
- 内存buffer满了 将数据refresh到一个新的segment file文件中
- 定时1秒将数据refresh到一个新的segment file文件中
segment file
- 生成 segment file的时候就会生成到排序索引
- segment file 文件数量到达一定数量时会进行merge行为
translog
translog会持续保留
Elasticsearch 读取过程
- 客户端发送请求到任意一个node节点，接下来改节点会成为协调节点
- 协调节点对document进行路由 将请求节点转发到对应的node上
- 接收请求的node返回document给协调节点
- 协调节点 返回document给客户端
相关文章：
elasticsearch文档读写原理大致分析一下
文档写简介 客户端通过hash选择一个node发送请求，专业术语叫做协调节点 协调节点会对document进行路由，将请求转发给对应的primary shard primary shard在处理完数据后，会将document 同步到所有replica shard 协调节点将处理结果返回给…...
1 开发环境
开发环境（platformio python arduino框架）的搭建可以参考b站upESP32超详细教程-使用VSCode（基于Arduino框架）哔哩哔哩bilibili 这里推荐离线安装esp32库文件，要不然要等很久（b站教程很多） 搭…...
云视频，也称为视频云服务，是一种基于云计算技术理念的视频流媒体服务
云视频，也称为视频云服务，是一种基于云计算技术理念的视频流媒体服务。它基于云计算商业模式，为视频网络平台服务提供强大的支持。在云平台上，所有的视频供应商、代理商、策划服务商、制作商、行业协会、管理机构、行业媒体和法律…...
[Vision Board创客营]--使用openmv识别阿尼亚
文章目录 [Vision Board创客营]使用openmv识别阿尼亚介绍环境搭建训练模型上传图片生成模型 使用结语 [Vision Board创客营]使用openmv识别阿尼亚 🚀🚀五一和女朋友去看了《间谍过家家 代号：白》，入坑二刺螈（QQ头像也换…...
【Linux：lesson1】的基本指令
🎁个人主页：我们的五年 🔍系列专栏：Linux课程学习 🌷追光的人，终会万丈光芒 🎉欢迎大家点赞👍评论📝收藏⭐文章 目录 🚗打开Xshell，登陆root…...
20240511日记
今天工作内容： 1.二期2号机EAP测试 2.二期开门机器暂停（停轴，停流水线电机），关闭门后继续功能测试 3.针点位偏移还需要调整，未进行大批量验证是否偏移（S3模板点位测试，两台机各焊…...
蓝桥杯成绩已出
蓝桥杯的成绩早就已经出来了，虽然没有十分惊艳 ，但是对于最终的结果我是心满意足的，感谢各位的陪伴，关于蓝桥杯的刷题笔记我已经坚持更新了49篇，但是现在即将会告别一段落，人生即将进入下一个规划。我们一起…...
.kat6.l6st6r勒索病毒数据怎么处理|数据解密恢复
导言： 在数字时代的洪流中，网络安全领域的新挑战层出不穷。近期，.kat6.l6st6r勒索病毒的出现再次打破了传统安全防护的界限。这种新型勒索病毒不仅具有高超的加密技术，更以其独特的传播方式和隐蔽性，给全球用户带来了…...
Spring Batch 是什么？主要用于什么场景？
Spring Batch是一个开源的、基于Spring框架的批量处理框架，它提供了一系列用于批量数据处理的工具和API。Spring Batch的主要目标是简化和标准化批量数据的处理过程，使得开发者可以更加专注于业务逻辑的实现，而不是批量处理的复杂性。 Sprin…...
SQL-慢查询的定位及优化
定位慢查询sql 启用慢查询日志： 确保MySQL实例已经启用了慢查询日志功能。可以通过以下命令查看是否启用： SHOW VARIABLES LIKE slow_query_log;如果未启用，可以通过以下命令启用： SET GLOBAL slow_query_log ON;配置慢查询日志&…...
练习题（2024/5/11）
1逆波兰表达式求值 给你一个字符串数组 tokens ，表示一个根据 逆波兰表示法 表示的算术表达式。 请你计算该表达式。返回一个表示表达式值的整数。 注意： 有效的算符为 、-、* 和 / 。每个操作数（运算对象）都可以是一个整数或…...
linux系统服务器中常见故障及排查方法
目录 故障1：系统无响应 故障2：网络连接问题 故障3：文件系统错误 故障4：软件包依赖问题 故障5：用户权限问题 故障6：服务无法正常工作 故障7：磁盘空间不足 故障8：内存不足 故障…...
产品人生（5）：从“敏捷开发”到“四化时间管理法”
人生如产品，产品映人生，借鉴产品思维，快速提升软技能！ 在互联网的敏捷开发实践中，经常会用到“流程化、模板化、清单化、不断优化”的思想来提升开发的效率和产品质量，并确保团队能够快速响应市场变化。大…...
超级好看的html网站维护源码
源码介绍 好看的html网站维护源码，源码由HTMLCSSJS组成，记事本打开源码文件可以进行内容文字之类的修改，双击html文件可以本地运行效果，也可以上传到服务器里面， 源码截图 源码下载 好看的html网站维护源码...
从零开始搭建Springboot项目脚手架2：配置文件、返回值、日志等
1、多个环境与配置文件 2、统一返回值 返回值包括两种场景：正常controller的返回、异常发生之后返回 正常controller的返回：通过在controller的默认返回Response实现 异常发生之后返回：通过全局异常处理统一捕获返回 首先创建类StatusCode…...
Java web第五次作业
1.在idea中配置好数据源 2、视频案例中只给出了查询所有结果的示例，请自己完成添加、删除、修改操作的代码。以下供参 考。 Delete("delete from emp where id#{id}") public void delete(Integer id); 测试代码 Test public void testDelete(){ empMa…...
Unity使用ToggleGroup对多个Toggle进行管理时，初始化默认选项失效的问题
问题描述： 在unity脚本的OnEnable中用代码设置Toggle集合中的其中一个对象的ison时，发现并没有根据设置发生变化。但是该Toggle的OnValueChange却发生过变化。 如果使用协程等待0.01s,那么对应组件的ison的修改才能生效，但是逐帧分析的话会发…...
Retrofit同步请求直接返回目标对象
Rxjava方式： // 创建 Retrofit 实例 Retrofit retrofit new Retrofit.Builder().baseUrl("https://api.example.com/").addConverterFactory(GsonConverterFactory.create()).addCallAdapterFactory(RxJava2CallAdapterFactory.create()).build();// 创…...
Android GPU渲染屏幕绘制显示基础概念（1）
Android GPU渲染屏幕绘制显示基础概念（1） Android中的图像生产者OpenGL，Skia，Vulkan将绘制的数据存放在图像缓冲区中，Android中的图像消费SurfaceFlinger从图像缓冲区将数据取出，进行加工及合成。 Surface…...
Mac电脑设置hosts的方法
hosts文件是什么 hosts文件是一个系统文件，通过绑定域名与ip的关系，当本机访问该域名时 从这个文件中如果找到了对应域名，则转发到对应ip；如果没有找到对应域名，则走默认的DNS公网解析。 好处： 加速访问…...
centos 7 部署awstats 网站访问检测
一、基础环境准备（两种安装方式都要做） bash # 安装必要依赖 yum install -y httpd perl mod_perl perl-Time-HiRes perl-DateTime systemctl enable httpd # 设置 Apache 开机自启 systemctl start httpd # 启动 Apache二、安装 AWStats࿰…...
【RockeMQ】第2节｜RocketMQ快速实战以及核⼼概念详解（二）
升级Dledger高可用集群 一、主从架构的不足与Dledger的定位 主从架构缺陷 数据备份依赖Slave节点，但无自动故障转移能力，Master宕机后需人工切换，期间消息可能无法读取。Slave仅存储数据，无法主动升级为Master响应请求ÿ…...
图表类系列各种样式PPT模版分享
图标图表系列PPT模版，柱状图PPT模版，线状图PPT模版，折线图PPT模版，饼状图PPT模版，雷达图PPT模版，树状图PPT模版 图表类系列各种样式PPT模版分享：图表系列PPT模板https://pan.quark.cn/s/20d40aa…...
《C++ 模板》
目录 函数模板 类模板 非类型模板参数 模板特化 函数模板特化 类模板的特化 模板，就像一个模具，里面可以将不同类型的材料做成一个形状，其分为函数模板和类模板。 函数模板 函数模板可以简化函数重载的代码。格式：templa…...
人工智能（大型语言模型 LLMs）对不同学科的影响以及由此产生的新学习方式
今天是关于AI如何在教学中增强学生的学习体验，我把重要信息标红了。人文学科的价值被低估了 ⬇️ 转型与必要性 人工智能正在深刻地改变教育，这并非炒作，而是已经发生的巨大变革。教育机构和教育者不能忽视它，试图简单地禁止学生使…...
【Linux】自动化构建-Make/Makefile
前言 上文我们讲到了Linux中的编译器gcc/g 【Linux】编译器gcc/g及其库的详细介绍-CSDN博客 本来我们将一个对于编译来说很重要的工具：make/makfile 1.背景 在一个工程中源文件不计其数，其按类型、功能、模块分别放在若干个目录中，mak…...
【安全篇】金刚不坏之身：整合 Spring Security + JWT 实现无状态认证与授权
摘要 本文是《Spring Boot 实战派》系列的第四篇。我们将直面所有 Web 应用都无法回避的核心问题：安全。文章将详细阐述认证（Authentication) 与授权（Authorization的核心概念，对比传统 Session-Cookie 与现代 JWT（JS…...
在 Visual Studio Code 中使用驭码 CodeRider 提升开发效率：以冒泡排序为例
目录 前言1 插件安装与配置1.1 安装驭码 CodeRider1.2 初始配置建议 2 示例代码：冒泡排序3 驭码 CodeRider 功能详解3.1 功能概览3.2 代码解释功能3.3 自动注释生成3.4 逻辑修改功能3.5 单元测试自动生成3.6 代码优化建议 4 驭码的实际应用建议5 常见问题与解决建议…...
大数据治理的常见方式
大数据治理的常见方式 大数据治理是确保数据质量、安全性和可用性的系统性方法，以下是几种常见的治理方式： 1. 数据质量管理 核心方法： 数据校验：建立数据校验规则（格式、范围、一致性等）数据清洗&…...
Python 高级应用10：在python 大型项目中 FastAPI 和 Django 的相互配合
无论是python，或者java 的大型项目中，都会涉及到 自身平台微服务之间的相互调用，以及和第三发平台的 接口对接，那在python 中是怎么实现的呢？ 在 Python Web 开发中，FastAPI 和 Django 是两个重要但定位不…...