当前位置： 首页 > news >正文

小规模自建 Elasticsearch 的部署及优化

news 2026/2/9 1:08:05

本文将详细介绍如何在 CentOS 7 操作系统上部署并优化 Elasticsearch 5.3.0，以承载千万级后端服务的数据采集。要使用Elasticsearch至少需要三台独立的服务器，本文所用服务器配置为4核8G的ECS云服务器，其中一台作为 master + data 节点、一台作为 client + data 节点、最后一台作为 data 节点。

软硬件环境和注意事项

  • 操作系统版本：CentOS 7
  • Elasticsearch 版本：5.3.0
  • 每台服务器配置：4核8G内存
  • 日志输出采用 JSON 格式，每行一条，方便使用 Elasticsearch 的日志采集工具

安装

1. 安装 Java

Elasticsearch 依赖 Java 运行环境，我们需要先安装 OpenJDK 1.8：

yum install -y java-1.8.0-openjdk.x86_64

2. 下载并安装 Elasticsearch

从官方源下载 Elasticsearch 5.3.0 RPM 包并安装：

wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-5.3.0.rpm
rpm -ivh elasticsearch-5.3.0.rpm

相关文章：

小规模自建 Elasticsearch 的部署及优化

本文将详细介绍如何在 CentOS 7 操作系统上部署并优化 Elasticsearch 5.3.0，以承载千万级后端服务的数据采集。要使用Elasticsearch至少需要三台独立的服务器，本文所用服务器配置为4核8G的ECS云服务器，其中一台作为 master + data 节点、一台作为 client + data 节点、最后一…...

编程日记 2024/6/18 16:25:01

MySQL 示例数据库大全

前言： 我们练习 SQL 时，总会自己创造一些测试数据或者网上找些案例来学习，其实 MySQL 官方提供了好几个示例数据库，在 MySQL 的学习、开发和实践中具有非常重要的作用，能够帮助初学者更好地理解和应用 MySQL 的各种功…...

编程日记 2024/6/18 16:23:57

VirtualBox、Centos7下安装docker后pull镜像问题、ftp上传文件问题

Docker安装篇(CentOS7安装)_docker 安装 centos7-CSDN博客 首先，安装docker可以根据这篇文章进行安装，安装完之后，我们就需要去通过docker拉取相关的服务镜像，然后安装相应的服务容器，比如我们通过docker来安装mysql,…...

编程日记 2024/6/18 16:22:55

链表 题目汇总

237. 删除链表中的节点...

编程日记 2024/6/18 16:21:52

grafana连接influxdb2.x做数据大盘

连接influxdb 展示数据 新建仪表盘 选择存储库 设置展示...

编程日记 2024/6/18 16:20:51

Java证件识别中的身份证识别接口

现如今，越来越多的互联网应用需要对身份证进行实名认证，但不知道大家有没有发现，从最初的手动录入身份证信息转变到了现在的图片上传自动识别呢？其实，这都是因为集成了身份证识别接口功能，今天，…...

编程日记 2024/6/18 16:19:50

迷你小风扇哪个品牌好？迷你小风扇前十名公开揭晓！

随着夏日的炎热袭来，迷你小风扇成为了许多人随身携带的清凉利器。无论是在办公室、户外活动，还是在旅行途中，迷你小风扇都以其小巧便携、强劲风力和持久续航的优势，迅速俘获了大批用户的喜爱。然而，市面上迷你小风扇品…...

编程日记 2024/6/18 16:14:43

MikroTik RouterOS 授权签名验证分析

MikroTik 软路由 百科https://baike.baidu.com/item/mikrotik/9776775官网https://mikrotik.com/ 授权文件分析 -----BEGIN MIKROTIK SOFTWARE KEY------------ mr3jH5qhn9irtF53ZICFTN7Tk7wIx7ZkxdAxJ19ydASY ShhFteHMntBTyaS8wuNdIJJPidJxbuNPLTvCsv7zLA …...

编程日记 2024/6/18 16:13:42

C#开发-集合使用和技巧（六）特殊转换方法SelectMany的介绍和用法

介绍 SelectMany 方法在C#中用于将集合中的元素转换为其他类型的集合&#xff0c;并将这些集合扁平化为一个单一的序列。它是LINQ的一部分&#xff0c;允许你在一个序列上进行投影和过滤操作&#xff0c;然后将结果合并成一个序列。 方法定义 public static IEnumerable<…...

编程日记 2024/6/18 16:12:40

高考后的抉择：如何在心仪专业与知名学校之间做出选择？

目录 前言1. 专业选择的深度探讨1.1 专业的优势与挑战1.1.1 课程学习1.1.2 就业前景 1.2 专业选择的个人经验与思考 2. 名校对个人发展的长短期影响2.1 名校声誉的品牌效应2.1.1 职业发展2.1.2 社会认可度 2.2 教育资源与学术氛围2.2.1 教育资源2.2.2 学术氛围 2.3 就业优势 3.…...

编程日记 2024/6/18 16:10:34

黄仁勋提到的机器人世界，还需要AI数据来“调教” | CVPR 2024

本周&#xff0c;CVPR 2024正在美国西雅图拉开序幕。今年CVPR论文投稿数再次创下新纪录&#xff0c;可想而知本届会议的火热。 从研究主题来看&#xff0c;具身智能这一大热点值得关注。 黄仁勋在COMPUTEX大会开幕前夕的演讲中预言&#xff1a;AI的下一个浪潮将是物理AI。 即…...

编程日记 2024/6/18 16:07:20

语言中 函数用地址传参的好处

在C语言中&#xff0c;使用地址传参&#xff08;传递指针&#xff09;有以下几个好处&#xff1a; 1. **减少内存开销**&#xff1a; - 传递一个指针&#xff08;通常是一个地址&#xff09;比传递一个大的结构体或数组要高效得多&#xff0c;因为指针通常是一个固定大小&a…...

编程日记 2024/6/18 16:06:19

Python进阶二: NumPy基础：数组和矢量计算

二、NumPy基础&#xff1a;数组和矢量计算 本文源自微博客(www.microblog.store),且以获得授权 NumPy&#xff08;Numerical Python的简称&#xff09;是Python数值计算最重要的基础包。大多数提供科学计算的包都是用NumPy的数组作为构建基础。 NumPy的部分功能如下&#xf…...

编程日记 2024/6/18 16:02:09

2024北京智源大会开幕，智源推出大模型全家桶及全栈开源技术基座新版图，大模型先锋集结共探AGI之路

2024年6月14日&#xff0c;第六届“北京智源大会”在中关村展示中心开幕。 北京智源大会是智源研究院主办的“AI内行顶级盛会”&#xff0c;以“全球视野、思想碰撞、前沿引领”为特色&#xff0c;汇聚海内外研究者分享研究成果、探寻前沿知识、交流实践经验。2024北京智源大会…...

编程日记 2024/6/18 16:01:08

李光明从程序员到架构师的逆袭之路（三）

我&#xff0c;李光明&#xff0c;正在参加一个重要的技术会议。会场上&#xff0c;我们团队正在讨论着接口设计以及接口设计模式。我深知&#xff0c;一个好的接口设计应当遵循简洁、清晰、可扩展的原则。比如&#xff0c;在设计一个用户信息查询接口时&#xff0c;我们会定义…...

编程日记 2024/6/18 16:00:07

基于Spring Boot+VUE毕业生信息招聘平台

系统详细设计 1管理员功能模块 管理员登录&#xff0c;管理员通过输入用户名、密码、角色等信息进行系统登录&#xff0c;如图1所示。 图1管理员登录界面图 管理员登录进入毕业生信息招聘平台可以查看首页、个人中心、企业管理、空中宣讲会管理、招聘岗位管理、毕业生管理、个…...

编程日记 2024/6/18 15:59:04

设计模式-创建型-04-建造者模式

1、盖房项目需求 1&#xff09;需要建房子&#xff1a;这一过程为打桩、砌墙、封顶2&#xff09;房子有各种各样的&#xff0c;比如普通房&#xff0c;高楼&#xff0c;别墅&#xff0c;各种房子的过程虽然一样&#xff0c;但是要求不要相同的3&#xff09;请编写程序&#xf…...

编程日记 2024/6/18 15:58:03

jenkins中配置参数化，并在python脚本接收参数实现参数化执行

在公司内进行Monkey测试脚本集成jenkins时&#xff0c;因为需要指定公司内不同的app进行测试。那么可以有两种方法解决该问题&#xff0c;要么创建多个脚本文件&#xff0c;多个jenkins jobs&#xff0c;进行构建。要么可以在配置job时通过传参数的方式&#xff0c;在python脚本…...

编程日记 2024/6/18 15:57:02

【SCAU数据挖掘】数据挖掘期末总复习题库应用题及解析

1. 给定圆的半径为e &#xff0c;令 MinPts3&#xff0c;考虑下面两幅图。 &#xff08;1&#xff09;哪些对象是核心对象? m,p,o,r(因为这些核心对象在半径e的范围内都至少包含MinPts3个对象) &#xff08;2&#xff09;哪些对象是直接密度可达的? 对象q是…...

编程日记 2024/6/18 15:56:00

ADB-＞获取当前正在显示的Fragment和Activity的ADB命令

获取当前显示的Activity adb shell "dumpsys window | grep mCurrentFocus"指令拆解adb shell&#xff1a;启动一个远程shell来运行设备上的命令dumpsys window&#xff1a;获取当前窗口管理器的信息|&#xff1a;将前一个命令的输出作为后一个命令的输入grep mCurr…...

编程日记 2024/6/18 15:54:53

工程地质软件市场：发展现状、趋势与策略建议

一、引言 在工程建设领域&#xff0c;准确把握地质条件是确保项目顺利推进和安全运营的关键。工程地质软件作为处理、分析、模拟和展示工程地质数据的重要工具&#xff0c;正发挥着日益重要的作用。它凭借强大的数据处理能力、三维建模功能、空间分析工具和可视化展示手段&…...

编程新知 2025/10/6 6:10:29

MySQL用户和授权

开放MySQL白名单 可以通过iptables-save命令确认对应客户端ip是否可以访问MySQL服务&#xff1a; test: # iptables-save | grep 3306 -A mp_srv_whitelist -s 172.16.14.102/32 -p tcp -m tcp --dport 3306 -j ACCEPT -A mp_srv_whitelist -s 172.16.4.16/32 -p tcp -m tcp -…...

编程新知 2025/8/25 19:12:45

蓝桥杯3498 01串的熵

问题描述 对于一个长度为 23333333的 01 串, 如果其信息熵为 11625907.5798&#xff0c; 且 0 出现次数比 1 少, 那么这个 01 串中 0 出现了多少次? #include<iostream> #include<cmath> using namespace std;int n 23333333;int main() {//枚举 0 出现的次数//因…...

编程新知 2026/2/6 2:05:50

分布式增量爬虫实现方案

之前我们在讨论的是分布式爬虫如何实现增量爬取。增量爬虫的目标是只爬取新产生或发生变化的页面&#xff0c;避免重复抓取&#xff0c;以节省资源和时间。 在分布式环境下&#xff0c;增量爬虫的实现需要考虑多个爬虫节点之间的协调和去重。 另一种思路&#xff1a;将增量判…...

编程新知 2026/2/6 1:18:56

Unity | AmplifyShaderEditor插件基础（第七集：平面波动shader）

目录 一、&#x1f44b;&#x1f3fb;前言 二、&#x1f608;sinx波动的基本原理 三、&#x1f608;波动起来 1.sinx节点介绍 2.vertexPosition 3.集成Vector3 a.节点Append b.连起来 4.波动起来 a.波动的原理 b.时间节点 c.sinx的处理 四、&#x1f30a;波动优化…...

编程新知 2026/2/6 22:55:12

rnn判断string中第一次出现a的下标

# coding:utf8 import torch import torch.nn as nn import numpy as np import random import json""" 基于pytorch的网络编写 实现一个RNN网络完成多分类任务 判断字符 a 第一次出现在字符串中的位置 """class TorchModel(nn.Module):def __in…...

编程新知 2025/9/24 16:25:00

AI+无人机如何守护濒危物种？YOLOv8实现95%精准识别

【导读】 野生动物监测在理解和保护生态系统中发挥着至关重要的作用。然而&#xff0c;传统的野生动物观察方法往往耗时耗力、成本高昂且范围有限。无人机的出现为野生动物监测提供了有前景的替代方案&#xff0c;能够实现大范围覆盖并远程采集数据。尽管具备这些优势&#xf…...

编程新知 2026/1/26 12:50:00

【 java 虚拟机知识 第一篇 】

目录 1.内存模型 1.1.JVM内存模型的介绍 1.2.堆和栈的区别 1.3.栈的存储细节 1.4.堆的部分 1.5.程序计数器的作用 1.6.方法区的内容 1.7.字符串池 1.8.引用类型 1.9.内存泄漏与内存溢出 1.10.会出现内存溢出的结构 1.内存模型 1.1.JVM内存模型的介绍 内存模型主要分…...

编程新知 2026/1/31 8:12:12

Vite中定义@软链接

在webpack中可以直接通过符号表示src路径&#xff0c;但是vite中默认不可以。 如何实现&#xff1a; vite中提供了resolve.alias&#xff1a;通过别名在指向一个具体的路径 在vite.config.js中 import { join } from pathexport default defineConfig({plugins: [vue()],//…...

编程新知 2026/1/24 13:26:57

探索Selenium：自动化测试的神奇钥匙

目录 一、Selenium 是什么1.1 定义与概念1.2 发展历程1.3 功能概述 二、Selenium 工作原理剖析2.1 架构组成2.2 工作流程2.3 通信机制 三、Selenium 的优势3.1 跨浏览器与平台支持3.2 丰富的语言支持3.3 强大的社区支持 四、Selenium 的应用场景4.1 Web 应用自动化测试4.2 数据…...

编程新知 2025/11/19 18:06:51