elasticsearch索引按日期拆分

1.索引拆分原因

如果单个索引数据量过大会导致搜索变慢，而且不方便清理历史数据。
例如日志数据每天量很大，而且需要定期清理以往日志数据。例如原索引为sc_all_system_log，现按天拆分索引sc_all_system_log20220902，sc_all_system_log20220903，sc_all_system_log20220904，并且定期清理五天前索引。

实现最终效果

2022.09.03日志数据存入sc_all_system_log20220903
2022.09.04日志数据存入sc_all_system_log20220904

数据虽然存入了不同的索引中，但是搜索却指向一个索引搜索

实现方法

一个索引名称搜索出多个索引数据，其实实现原理很简单就是利用索引别名，不同的索引可以指向同一个索引别名，我们搜索时只要搜索索引别名即可。
具体实现方法，按照下面顺序看下去

定时清理策略

利用ES的索引生命周期，清理几天前索引，所以创建时间超过七天之后会自动删除
创建策略，后面会用到。

相关文章：

elasticsearch索引按日期拆分

1.索引拆分原因 如果单个索引数据量过大会导致搜索变慢，而且不方便清理历史数据。 例如日志数据每天量很大，而且需要定期清理以往日志数据。例如原索引为sc_all_system_log，现按天拆分索引sc_all_system_log20220902，sc_all_syste…...

编程日记 2023/11/6 0:54:54

纯python实现大漠图色功能

大漠图色是一种自动化测试工具，可以用于识别屏幕上的图像并执行相应的操作。在Python中，可以使用第三方库pyautogui来实现大漠图色功能。具体步骤如下： 安装pyautogui库：在命令行中输入pip install pyautogui。导入pyautogui库&a…...

编程日记 2023/11/6 0:53:53

debounce and throtlle

debounce // 核心：单位时间内触发>1 则只执行最后一次。//excutioner 可以认为是执行器。执行器存在则清空，再赋值新的执行器。function debounce(fn, delay 500) {let excutioner null;return function () {let context this;let args arguments…...

编程日记 2023/11/6 0:52:52

四、数据库系统

数据库系统（Database System），是由数据库及其管理软件组成的系统。数据库系统是为适应数据处理的需要而发展起来的一种较为理想的数据处理系统，也是一个为实际可运行的存储、维护和应用系统提供数据的软件系统，是存储介…...

编程日记 2023/11/6 0:51:51

Linux中的高级IO

文章目录 1.IO1.1基本介绍1.2基础io的低效性1.3如何提高IO效率1.4五种IO模型1.5非阻塞模式的设置 2.IO多路转接之Select2.1函数的基本了解2.2fd_set理解2.3完整例子代码（会在代码中进行讲解）2.4优缺点 3.多路转接之poll3.1poll函数的介绍3.2poll服务器3.…...

编程日记 2023/11/6 0:50:49

项目管理之如何估算项目工作成本

在项目管理中，如何估算项目工作成本是一个关键问题。为了解决这个问题，我们可以采用自上而下的成本限额估算法和自下而上的成本汇总估算法。这两种方法各有优缺点，但都可以帮助我们准确地估算项目工作成本。 自上而下的成本限额估算法 自上…...

编程日记 2023/11/6 0:48:47

Redis主从复制基础概念

Redis主从复制：提高数据可用性和性能的策略 一、概述 Redis主从复制是一种常用的高可用性策略，通过将数据从一个Redis服务器复制到另一个或多个Redis服务器上，以提高数据的可用性和读取性能。当主服务器出现故障时，可以快速地切…...

编程日记 2023/11/6 0:47:46

图数据库Neo4j概念、应用场景、安装及CQL的使用

一、图数据库概念 引用Seth Godin的说法，企业需要摒弃仅仅收集数据点的做法，开始着手建立数据之间的关联关系。数据点之间的关系甚至比单个点本身更为重要。 传统的**关系数据库管理系统(RDBMS)**并不擅长处理数据之间的关系，那些表状数据模…...

编程日记 2023/11/6 0:46:44

路由器基础（四）： RIP原理与配置

路由信息协议 (Routing Information Protocol,RIP) 是最早使用的距离矢量路由协议。因为路由是以矢量(距离、方向)的方式被通告出去的，这里的距离是根据度量来决定的，所以叫“距离矢量”。 距离矢量路由算法是动态路由算法。它的工作流程是：…...

编程日记 2023/11/6 0:45:42

红外遥控开发RK3568-PWM-IR

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录 前言1.红外遥控的发送接收工作原理2.红外协议3.红外遥控系统框图4.遥控器添加方法4.1 记录键值4.2 添加键值总结前言 提示：这里可以添加本文要记录的大概内容： 1.红外遥控的发送接收工作原理 …...

编程日记 2023/11/6 0:44:41

go-sync-mutex

Sync ​ Go 语言作为一个原生支持用户态进程（Goroutine）的语言，当提到并发编程、多线程编程时，往往都离不开锁这一概念。锁是一种并发编程中的同步原语（Synchronization Primitives），它能保证多…...

编程日记 2023/11/6 0:43:40

高并发系统设计

高并发系统通用设计方法 Scala-out 横向扩展，分散流量，分布式集群部署 缺点：引入复杂度，节点之间状态维护，节点扩展（上下线） Scala-up 提升单机性能，比如增加内存，增…...

编程日记 2023/11/6 0:42:38

Vue3-Pinia快速入门

1.安装pinia npm install pinia -save 2.在main.js中导入并使用pinia // 导入piniaimport { createPinia } from "pinia"; const pinia createPinia();//使用pinia app.use(pinia)app.mount(#app) 3.在src目录下创建包：store，表示仓库 4…...

编程日记 2023/11/6 0:41:37

Python算法——插入排序

插入排序（Insertion Sort）是一种简单但有效的排序算法，它的基本思想是将数组分成已排序和未排序两部分，然后逐一将未排序部分的元素插入到已排序部分的正确位置。插入排序通常比冒泡排序和选择排序更高效，特别适用于对…...

编程日记 2023/11/6 0:40:36

Java21新特性

目录 一、Java21新特性 1、字符串模版 2、scoped values 3、record pattern 4、switch格式匹配 5、可以在switch中使用when 6、Unnamed Classes and Instance Main Methods 7、Structured Concurrency 一、Java21新特性 1、字符串模版 字符串模版可以让开发者更简洁的…...

编程日记 2023/11/6 0:39:35

4 Tensorflow图像识别模型——数据预处理

上一篇：3 tensorflow构建模型详解-CSDN博客 本篇开始介绍识别猫狗图片的模型，内容较多，会分为多个章节介绍。模型构建还是和之前一样的流程： 数据集准备数据预处理创建模型设置损失函数和优化器训练模型 本篇先介绍数据集准备&am…...

编程日记 2023/11/6 0:36:32

SpringBoot整合RabbitMQ学习笔记

SpringBoot整合RabbitMQ学习笔记 以下三种类型的消息，生产者和消费者需各自启动一个服务，模拟生产者服务发送消息，消费者服务监听消息，分布式开发。 一 Fanout类型信息 . RabbitMQ创建交换机和队列 在RabbitMQ控制台，新…...

编程日记 2023/11/6 0:35:31

在校园跑腿系统小程序中，如何设计高效的实时通知与消息推送系统？

1. 选择合适的消息推送服务 在校园跑腿系统小程序中，选择一个适合的消息推送服务。例如，使用WebSocket技术、Firebase Cloud Messaging (FCM)、或第三方推送服务如Pusher或OneSignal等。注册并获取相关的API密钥或访问令牌。 2. 集成服务到小程序后端…...

编程日记 2023/11/6 0:33:29

求极限Lim x-＞0 (x-sinx)*e-²x / (1-x)⅓

题目如下： 解题思路: 这题运用了无穷小替换、洛必达法则、求导法则 具体解题思路如下: 1、首先带入x趋近于0，可以得到（0*1）/0，所以可以把e的-x的平方沈略掉 然后根据无穷小替换，利用t趋近于0时&#xf…...

编程日记 2023/11/6 0:32:29

JavaScript数据类型详细解析与代码实例

JavaScript是一种弱类型动态语言，数据类型分为原始类型和对象类型。 原始类型 原始类型包括：数字、字符串、布尔值和undefined、null。 数字 JavaScript中的数字类型包括整数和浮点数，可以进行基本的数学运算。 var num1 10; // 整数 v…...

编程日记 2023/11/6 0:30:27

【位运算】消失的两个数字（hard）

消失的两个数字（hard） 题⽬描述：解法（位运算）：Java 算法代码：更简便代码 题⽬链接：⾯试题 17.19. 消失的两个数字 题⽬描述： 给定⼀个数组，包含从 1 到 N 所有…...

编程新知 2025/11/15 16:18:24

渗透实战PortSwigger靶场-XSS Lab 14：大多数标签和属性被阻止

<script>标签被拦截 我们需要把全部可用的 tag 和 event 进行暴力破解 XSS cheat sheet&#xff1a; https://portswigger.net/web-security/cross-site-scripting/cheat-sheet 通过爆破发现body可以用 再把全部 events 放进去爆破 这些 event 全部可用 <body onres…...

编程新知 2026/1/24 13:05:24

【Redis技术进阶之路】「原理分析系列开篇」分析客户端和服务端网络诵信交互实现（服务端执行命令请求的过程 - 初始化服务器）

服务端执行命令请求的过程 【专栏简介】【技术大纲】【专栏目标】【目标人群】1. Redis爱好者与社区成员2. 后端开发和系统架构师3. 计算机专业的本科生及研究生 初始化服务器1. 初始化服务器状态结构初始化RedisServer变量 2. 加载相关系统配置和用户配置参数定制化配置参数案…...

编程新知 2026/2/2 0:45:02

转转集团旗下首家二手多品类循环仓店“超级转转”开业

6月9日&#xff0c;国内领先的循环经济企业转转集团旗下首家二手多品类循环仓店“超级转转”正式开业。 转转集团创始人兼CEO黄炜、转转循环时尚发起人朱珠、转转集团COO兼红布林CEO胡伟琨、王府井集团副总裁祝捷等出席了开业剪彩仪式。 据「TMT星球」了解&#xff0c;“超级…...

编程新知 2026/2/8 4:08:40

《C++ 模板》

目录 函数模板 类模板 非类型模板参数 模板特化 函数模板特化 类模板的特化 模板&#xff0c;就像一个模具&#xff0c;里面可以将不同类型的材料做成一个形状&#xff0c;其分为函数模板和类模板。 函数模板 函数模板可以简化函数重载的代码。格式&#xff1a;templa…...

编程新知 2025/6/11 3:20:47

R语言速释制剂QBD解决方案之三

本文是《Quality by Design for ANDAs: An Example for Immediate-Release Dosage Forms》第一个处方的R语言解决方案。 第一个处方研究评估原料药粒径分布、MCC/Lactose比例、崩解剂用量对制剂CQAs的影响。 第二处方研究用于理解颗粒外加硬脂酸镁和滑石粉对片剂质量和可生产…...

编程新知 2026/2/9 2:43:24

LINUX 69 FTP 客服管理系统 man 5 /etc/vsftpd/vsftpd.conf

FTP 客服管理系统 实现kefu123登录&#xff0c;不允许匿名访问&#xff0c;kefu只能访问/data/kefu目录&#xff0c;不能查看其他目录 创建账号密码 useradd kefu echo 123|passwd -stdin kefu [rootcode caozx26420]# echo 123|passwd --stdin kefu 更改用户 kefu 的密码…...

编程新知 2026/2/9 20:16:17

免费PDF转图片工具

免费PDF转图片工具 一款简单易用的PDF转图片工具&#xff0c;可以将PDF文件快速转换为高质量PNG图片。无需安装复杂的软件&#xff0c;也不需要在线上传文件&#xff0c;保护您的隐私。 工具截图 主要特点 &#x1f680; 快速转换&#xff1a;本地转换&#xff0c;无需等待上…...

编程新知 2026/1/26 9:07:56

LCTF液晶可调谐滤波器在多光谱相机捕捉无人机目标检测中的作用

中达瑞和自2005年成立以来&#xff0c;一直在光谱成像领域深度钻研和发展&#xff0c;始终致力于研发高性能、高可靠性的光谱成像相机&#xff0c;为科研院校提供更优的产品和服务。在《低空背景下无人机目标的光谱特征研究及目标检测应用》这篇论文中提到中达瑞和 LCTF 作为多…...

编程新知 2025/12/31 17:08:10

Docker拉取MySQL后数据库连接失败的解决方案

在使用Docker部署MySQL时&#xff0c;拉取并启动容器后&#xff0c;有时可能会遇到数据库连接失败的问题。这种问题可能由多种原因导致&#xff0c;包括配置错误、网络设置问题、权限问题等。本文将分析可能的原因&#xff0c;并提供解决方案。 一、确认MySQL容器的运行状态 …...

编程新知 2026/1/15 21:57:16