当前位置：首页 > news >正文

【大数据技术】搭建完全分布式高可用大数据集群（ZooKeeper）

news 2026/5/17 5:02:45

搭建完全分布式高可用大数据集群（ZooKeeper）

apache-zookeeper-3.8.4-bin.tar.gz

注：请在阅读本篇文章前，将以上资源下载下来。

写在前面

本文主要介绍搭建完全分布式高可用集群 ZooKeeper 的详细步骤。

注意： 统一约定将软件安装包存放于虚拟机的/software目录下，软件安装至/opt目录下。

ZooKeeper

ZooKeeper 的部署方式分为：

独立模式（单机模式）
集群模式
伪分布式模式
完全分布模式

本文介绍实际应用场景中的使用的完全分布模式的部署，生产环境一般采用奇数台（大于1）机器组成集群。

ZooKeeper 节点为什么设置为奇数？

zookeeper有这样一个特性

【大数据技术】搭建完全分布式高可用大数据集群（ZooKeeper）

搭建完全分布式高可用大数据集群（ZooKeeper） apache-zookeeper-3.8.4-bin.tar.gz注：请在阅读本篇文章前，将以上资源下载下来。写在前面本文主要介绍搭建完全分布式高可用集群 ZooKeeper 的详细步骤。注意：统一约定将软件安装包存放于虚拟机的/software目录下，软件…...

编程日记 2025/2/7 16:49:21

前端学习-tab栏切换改造项目（三十一）

目录前言监听代码思路代码事件委托代码思路代码总结前言星垂平野阔，月涌大江流监听代码思路等待DOM加载完成获取所有标签为每个标签添加鼠标悬停事件监听器定义showTab函数： 接收一个索引参数index，用于标识当前悬停…...

编程日记 2025/2/7 16:47:18

高性能 AI 处理器亲和性调度算法实现

目录题目描述解题思路分析C 语言实现生成组合的函数主程序实现C 语言代码使用示例Python 实现生成组合的函数主程序实现Python 代码使用示例总结与展望题目描述某公司研发的高性能 AI 处理器，每台物理设备 a 包含 8 颗 AI 处理器，编号为 0 - 7。其中，编号 0 - 3 的处理…...

编程日记 2025/2/7 16:36:57

mq消息丢了，有哪些现象？有什么补救措施

异步发送：生产者发送消息，然后等消费者处理完成后，会有一个回调结果 mq消息丢了常见情况： 1.生产者消息丢失可能由于网络问题，错误的主题、消息过大等原因导致消息发送失败 2.消费者消息丢失怎么保证不丢失呢&…...

编程日记 2025/2/7 16:35:45

Java面试场景题分享

假设你在做电商秒杀活动，秒杀开始时，成千上万的用户同时请求抢购商品。你会如何设计系统来处理这些请求，确保库存不超卖你如何保证库存的准确性？ 这个问题引导你思考如何在高并发下确保库存更新的原子性，最直接的方式…...

编程日记 2025/2/7 16:34:41

《ISO/SAE 21434-2021 道路汽车--网络安全工程》标准解读

1 范围略 2 归一化引用略 3 术语定义相关项： 实施车辆级功能的组件或组件集; 例如安全气囊打开系统组件： 逻辑上和技术上可分离的部分；例如微控制器资产： 具有价值或对价值有贡献的对象；例如密钥网络安全…...

编程日记 2025/2/7 16:33:38

【BUUCTF逆向题】[MRCTF2020]Transform

一.[MRCTF2020]Transform 64位无壳，IDA打开发现main函数进入反编译阅读程序先输入33位code再加密处理然后验证是否相等的题型逆向看，验证数组byte_40F0E0已知再往上看加密处理方式就是将Str（我们输入的flag）的每一个索引处…...

编程日记 2025/2/7 16:32:37

漏洞挖掘 | 基于mssql数据库的sql注入

视频教程在我主页简介或专栏里目录： 前记 0x1 判断网站数据库类型 0x2 了解mssql数据库的主要三大系统表 0x3 了解mssql的主要函数 0x4 判断注入点及其注入类型 0x5 联合查询之判断列数 0x6 联合查询之获取数据库相关信息 0x7 mssql之时间盲注 0x8 mssql之报错注…...

编程日记 2025/2/7 16:30:31

Java 中 LinkedList 的底层源码

在 Java 的集合框架中，LinkedList是一个独特且常用的成员。它基于双向链表实现，与数组结构的集合类如ArrayList有着显著差异。深入探究LinkedList的底层源码，有助于我们更好地理解其工作原理和性能特点，以便在实际开发中做出更合适…...

编程日记 2025/2/7 16:29:30

使用服务器部署DeepSeek-R1模型【详细版】

文章目录引言deepseek-r1IDE或者终端工具算力平台体验deepseek-r1模型总结引言在现代的机器学习和深度学习应用中，模型部署和服务化是每个开发者面临的重要任务。无论是用于智能推荐、自然语言处理还是图像识别，如何高效、稳定地将深度学习模型部署到…...

编程日记 2025/2/7 16:27:27

k8s,1.修改容器内主机名和/etc/hosts 文件，2.root特权容器，3.pod安全策略(基于名称空间

1.修改容器内主机名和/etc/hosts 文件,让持久生效,通过修改资源清单方式---kind: PodapiVersion: v1metadata:name: rootspec:hostname: myhost # 修改主机名hostAliases: # 修改 /etc/hosts- ip: 192.168.88.240 # IP 地址hostnames: # 名…...

编程日记 2025/2/7 16:26:23

1、环境配置 conda create -n MSPFN python3.9 conda activate MSPFN pip install opencv-python pip install tensorflow pip install tqdm pip install matplotlib2、train 2.1 创建数据集 2.1.1 数据集格式 |--rainysamples |--file1： |--file2:|--fi…...

编程日记 2025/2/7 16:23:18

除了console.error，还有什么更好的错误处理方式？

除了 console.error，在 Vue 应用中进行更好的错误处理可以采用以下几种方式：一、使用全局错误处理 Vue 的错误捕获在 Vue 2 中，可以使用 errorHandler 来捕获全局的错误： Vue.config.errorHandler = (err, vm, info) => {// 处理错误，例如记录日志logError(err, info…...

编程日记 2025/2/7 16:22:14

力扣.270. 最接近的二叉搜索树值(中序遍历思想)

文章目录题目描述思路复杂度Code 题目描述思路遍历思想(利用二叉树的中序遍历) 本题的难点在于可能存在多个答案，并且要返回最小的那一个，为了解决这个问题，我门则要利用上二叉搜索树中序遍历为有序序列的特性，具体到代码中&a…...

编程日记 2025/2/7 16:21:08

Yageo国巨的RC系列0402封装1%电阻库来了

工作使用Cadence多年，很多时候麻烦的就是整理BOM，因为设计原理图的时候图省事，可能只修改value值和封装。但是厂家，规格型号，物料描述等属性需要在最后的时候一行一行的修改，繁琐又容易出错，过…...

编程日记 2025/2/7 16:19:02

wait/notify/join/设计模式

JUC wait obj.wait() 让进入 object 监视器的线程到 waitSet 等待wait（）方法会释放对象的锁，进入 WaitSet 等待区，从而让其他线程就机会获取对象的锁。无限制等待，直到 notify 为止wait(long n）有时限的等…...

编程日记 2025/2/7 16:13:53

Windows Docker笔记-Docker拉取镜像

通过在前面的章节《安装docker》中，了解并安装成功了Docker，本章讲述如何使用Docker拉取镜像。使用Docker，主要是想要创建并运行Docker容器，而容器又要根据Docker镜像来创建，那么首当其冲，必须要先有一个…...

编程日记 2025/2/7 16:08:41

七大排序思想

目录七大排序的时间复杂度和稳定性排序插入排序简单插入排序希尔排序选择排序简单选择排序堆排序交换排序冒泡排序快速排序快排的递归实现 hoare版本的快排挖坑法的快排双指针法的快排快排的非递归归并排序归并的递归实现归并的非递归实现…...

编程日记 2025/2/7 16:02:34

intra-mart实现简易登录页面笔记

一、前言最近在学习intra-mart框架，在此总结下笔记。 intra-mart是一个前后端不分离的框架，开发时主要用的就是xml、html、js这几个文件； xml文件当做配置文件，html当做前端页面文件，js当做后端文件（js里…...

编程日记 2025/2/7 16:01:31

SpringBoot整合RocketMQ

前言在当今快速发展的软件开发领域，构建高效、稳定的应用系统是每个开发者的追求。Spring Boot 作为一款极具影响力的开发框架，凭借其强大的自动化配置和便捷的开发特性，极大地简化了项目搭建过程。使用 Spring Boot，我们无需再…...

编程日记 2025/2/7 15:56:20

【2026年阿里巴巴集团暑期实习- 5月16日-算法岗-第一题- 分组计数】（题目+思路+JavaC++Python解析+在线测试)

题目内容给定 nnn 个人的权值序列 a1,a2,…,ana_1,a_2,\dots,a_na...

编程新知 2026/5/17 5:02:17

嵌入式动画优化：DMA驱动位图渲染在SAMD21上的实现

1. 项目概述与核心思路如果你玩过嵌入式开发，尤其是想在小小的微控制器屏幕上搞点流畅的动画，大概率会被“卡顿”和“闪屏”折磨过。传统的逐像素绘制，在需要全屏更新时，CPU时间几乎全耗在了等待屏幕刷新上，用户体验大…...

编程新知 2026/5/17 4:40:31

基于HalloWing的交互式徽章：传感器融合与事件驱动编程实践

1. 项目概述：当硬件开发遇上节日创意如果你和我一样，是个喜欢在万圣节搞点“技术流”小把戏的硬件爱好者，那么手头有一块Adafruit的HalloWing开发板，绝对能让你的节日装备脱颖而出。这不仅仅是一个简单的微控制器项目，…...

编程新知 2026/5/17 4:25:01

【仿真学习框架】MultiModalWBC 完全指南：从入门到精通的多模态全身控制框架

版本: v1.0 | 日期: 2026-05-15 目标读者: 具身智能研究者、机器人学习工程师、人形机器人开发者前置知识: 基础强化学习（PPO）、PyTorch、刚体动力学概念 📑 目录 1. 初见 MultiModalWBC：我们到底在解决什么问题？ 1.1 人形机器人控制的"碎片化"困境 1.2 多模态…...

编程新知 2026/5/17 3:24:38