当前位置: 首页 > news >正文

Apache Hadoop生态部署-zookeeper分布式安装

目录

查看服务架构图-服务分布、版本信息

 一:安装前准备

1:zookeeper安装包选择--官网下载

 2:zookeeper3.5.7安装包--百度网盘

二:安装与常用配置

2.1:下载解压zk安装包

2.2:配置环境变量

2.3:配置修改

2.4:分发zookeeper到node02, node03节点

2.5:修改node02, node03节点的myid

三:Zookeeper基础操作

3.1:服务管理


查看服务架构图-服务分布、版本信息

系统环境:centos7

Java环境:Java8

免密与基础配置参考:Apache Hadoop生态部署-3台设置的免密登录,xsync分发脚本,jpsall脚本

单机安装参考上篇:Apache Hadoop生态部署-zookeeper单机安装

 一:安装前准备

1:zookeeper安装包选择--官网下载

Index of /dist/zookeeper

 

 2:zookeeper3.5.7安装包--百度网盘

链接:https://pan.baidu.com/s/1aodm4GON2fMfwMutZUy3mA?pwd=yyds
提取码:yyds

二:安装与常用配置

2.1:下载解压zk安装包

[root@node01 ~]# cd /tmp
[root@node01 tmp]# wget https://archive.apache.org/dist/zookeeper/zookeeper-3.5.7/apache-zookeeper-3.5.7-bin.tar.gz
或者从百度网盘下载,上传到/tmp下解压到/usr/local/
[root@node01 tmp]# sudo tar -zxvf apache-zookeeper-3.5.7-bin.tar.gz -C /usr/local/
[root@node01 tmp]# sudo mv /usr/local/apache-zookeeper-3.5.7-bin /usr/local/zookeeper-3.5.7

2.2:配置环境变量

sudo vim /etc/profile.d/zookeeper.sh
插入内容
export ZOOKEEPER_HOME=/usr/local/zookeeper-3.5.7
export PATH=$PATH:$ZOOKEEPER_HOME/bin

执行source /etc/profile使环境变量生效

2.3:配置修改

(1)备份配置文件zoo_sample.cfg
[root@node01 tmp]# cd /usr/local/zookeeper-3.5.7/conf
[root@node01 conf]# sudo cp zoo_sample.cfg zoo.cfg(2)修改zoo.cfg配置
创建数据存放目录
[root@node01 conf]# mkdir -p /usr/local/zookeeper-3.5.7/data[root@node01 conf]# sudo vim /usr/local/zookeeper-3.5.7/conf/zoo.cfg
# 修改 dataDir 路径
dataDir=/usr/local/zookeeper-3.5.7/data
# 在最后添加上以下内容,其中2888是通讯端口,3888是选举端口
server.1=node01:2888:3888
server.2=node02:2888:3888
server.3=node03:2888:3888(3)配置myid
[root@node01 conf]# vim $ZOOKEEPER_HOME/data/myid
1

# 注意LISTEN  2181端口,2888端口,3888端口,8080端口(注意冲突)

2.4:分发zookeeper到node02, node03节点

scp -r /usr/local/zookeeper-3.5.7 root@node02:/usr/local/
scp -r /usr/local/zookeeper-3.5.7 root@node03:/usr/local/或者使用自编写的同步脚本
~/xsync /usr/local/zookeeper-3.5.7

2.5:修改node02, node03节点的myid

[root@node02 conf]# vim $ZOOKEEPER_HOME/data/myid
2[root@node03 conf]# vim $ZOOKEEPER_HOME/data/myid
3#写上配置文件服务器对应server的值,必须与配置文件编号一致
node01中myid填1
node02中myid填2
node03中myid填3

三:Zookeeper基础操作

3.1:服务管理

编写脚本操作Zookeeper
vim $ZOOKEEPER_HOME/bin/myzookeeper.sh#!/bin/bash
if [ $# -lt 1 ]
thenecho "No Args Input..."exit ;
ficase $1 in
"start")for i in node01 node02 node03doecho ---------- zookeeper $i 启动 ------------ssh $i "/usr/local/zookeeper-3.5.7/bin/zkServer.sh start"done
;;
"stop")for i in node01 node02 node03doecho ---------- zookeeper $i 关闭 ------------ssh $i "/usr/local/zookeeper-3.5.7/bin/zkServer.sh stop"done
;;
"status")for i in node01 node02 node03doecho ---------- zookeeper $i 状态 ------------ssh $i "/usr/local/zookeeper-3.5.7/bin/zkServer.sh status"done
;;
*)echo "Input Args Error..."
;;
esac添加可执行权限
chmod +x $ZOOKEEPER_HOME/bin/myzookeeper.sh
# 启动 Zookeeper
$ myzookeeper.sh start# 查看状态
$ myzookeeper.sh status# 停止 Zookeeper
$ myzookeeper.sh stop

相关文章:

Apache Hadoop生态部署-zookeeper分布式安装

目录 查看服务架构图-服务分布、版本信息 一:安装前准备 1:zookeeper安装包选择--官网下载 2:zookeeper3.5.7安装包--百度网盘 二:安装与常用配置 2.1:下载解压zk安装包 2.2:配置环境变量 2.3&#x…...

MySQL(九)

mysql的锁机制 1、MySQL锁的基本介绍 ​ **锁是计算机协调多个进程或线程并发访问某一资源的机制。**在数据库中,除传统的 计算资源(如CPU、RAM、I/O等)的争用以外,数据也是一种供许多用户共享的资源。如何保证数据并发访问的一…...

Matlab 计算一条直线与一条线段的交点

文章目录 一、简介二、实现代码三、实现效果参考资料一、简介 这里假设一条直线的方向为 ( a , b , c ) (a,b,c) (a,b,...

Read book Netty in action(Chapter VI)--ByteBuf

序言 之前学习了传输,通过前面的学习我们都知道,网络数据的基本单位是字节。JDK中提供了ByteBuffer作为字节的容器,但是过于繁琐复杂,Netty中提供了ByteBuf作为替代品。学习一下。 API Netty的数据处理API通过两个组件暴露 ---…...

VsCode开发工具的入门及基本使用

VsCode开发工具的入门及基本使用一、VsCode介绍1.VsCode简介2.VsCode特点二、安装VsCode1.下载VsCode2.安装VsCode3.打开VsCode三、设置VsCode中文1.搜索中文语言插件2.安装中文语言插件四、初识VsCode1.VsCode左侧栏模块2.系统设置功能五、VsCode初始配置1.禁用自动更新2.开启…...

python标准库——OS模块接口详解

OS系统操作模块 os模块提供各种Python 程序与操作系统进行交互的接口 os模块是整理文件和目录最常用的模块 函数作用补充os.sep()取代操作系统特定的路径分隔符os.name()指示你正在使用的工作平台。比如对于Windows,它是nt,而对于Linux/Unix用户&…...

LeetCode 622.设计循环队列

设计你的循环队列实现。 循环队列是一种线性数据结构,其操作表现基于 FIFO(先进先出)原则并且队尾被连接在队首之后以形成一个循环。它也被称为“环形缓冲器”。循环队列的一个好处是我们可以利用这个队列之前用过的空间。在一个普通队列里&a…...

OraDump导出套件

OraDump导出套件 只需单击几下即可将数据从Oracle转储文件导出到流行的数据库和格式。 OraDump Export Kit是一个将数据从Oracle转储文件导出到流行数据库和格式的软件包。该产品具有高性能,因为它直接读取转储文件。命令行支持允许编写脚本、自动化和安排转换过程。…...

CVE-2022-22947 SpringCloud GateWay SPEL RCE 漏洞分析

漏洞概要 Spring Cloud Gateway 是Spring Cloud 生态中的API网关,包含限流、过滤等API治理功能。 Spring官方在2022年3月1日发布新版本修复了Spring Cloud Gateway中的一处代码注入漏洞。当actuator端点开启或暴露时,可以通过http请求修改路由&#xff…...

Firebase常用功能和官方Demo简介

一、Firebase简介Firebase刚开始是一家实时后端数据库创业公司,它能帮助开发者很快的写出Web端和移动端的应用。自2014年10月Google收购Firebase以来,用户可以在更方便地使用Firebase的同时,结合Google的云服务。现在的Firebase算是谷歌旗下的…...

MATLAB R2020a 与PreScan8.5.0 详细安装教程(图文版)

目录MATLAB安装PreScan安装每文一语MATLAB安装 MATLAB是一款数学软件,用于科学计算、数据分析和可视化等任务。以下是MATLAB的几个优势: 丰富的工具箱:MATLAB拥有多种工具箱,包括信号处理、图像处理、优化、控制系统等&#xff0…...

CNI 网络流量 4.3 Calico felix

文章目录felix 太重要了,单独一文搞懂它Felix是一个守护程序,在每个 endpoints 的节点上运行。Felix 负责编制路由和 ACL 规则等,以便为该主机上的 endpoints 资源正常运行提供所需的网络连接 主要实现一下工作 管理网络接口,Feli…...

超声波风速风向传感器的通讯协议

接线定义 1 电源正 棕色线 4 风向信号 2 电源负 黑色线 5 485A 蓝色线 3 风速信号 6 485B 灰色线 ⊙寄存器参数表 地址 访问权限 参数名称 数据解析方法 0x0000 R 风速 瞬时 *100 上报 0x0001 R 风向 原数上报 0x0002 R 最大风速 *100 上报 0x0003 R 平均风速 *100 上报 0x000…...

JVM笔记(8)—— 直接内存

一、什么是直接内存 直接内存不是虚拟机运行时数据区的一部分,是在运行时数据区外、直接向系统申请的内存空间。 通常,访问直接内存的速度会优于堆,读写性能更好。因此,出于性能考虑,读写频繁的场合可能会考虑使用直…...

Unity性能优化:如何优化Drawcall

前言 降低游戏的Drawcall,是渲染优化很重要的手段,接下来从以下4个方面来分析如何降低DrawCall: 对惹,这里有一个游戏开发交流小组,希望大家可以点击进来一起交流一下开发经验呀 降低Drawcall的意义是什么?如何查看游戏的Drawca…...

类与对象(this 关键字、构造器)

目录一、面向对象二、类与对象三、对象内存图四、成员变量和局部变量区别五、this关键字六、构造器/构造方法一、面向对象 一种编程思想:也就是说我们要以何种思路,解决问题,以何种形式组织代码 当解决一个问题的时候,面向对象会把事物抽象成…...

[NOIP2002 普及组] 过河卒

题目描述: 棋盘上 A 点有一个过河卒,需要走到目标 B 点。卒行走的规则:可以向下、或者向右。同时在棋盘上 C 点有一个对方的马,该马所在的点和所有跳跃一步可达的点称为对方马的控制点。因此称之为“马拦过河卒”。 棋盘用坐标表…...

redis事务和锁机制

目录 事务定义 事务操作命令 redis事务的错误处理 redis事务冲突问题 redis解决事务冲突的方法 Redis事务的三个特性 事务定义 redis事务是一个单独的隔离操作:事务中的所有命令都会序列化,按顺序的执行。事务中在执行过程中,不会被其他客户…...

Java实例——线程

1、查看线程存活状态 Thread.isAlive() Thread.getName() public class MyThread extends Thread{Overridepublic void run() {for (int i 0; i < 10; i) {printMsg();}}public static void printMsg(){Thread thread Thread.currentThread();//Thread.getName() 获取线程…...

云计算学习课程——越来越重要的云安全

2023&#xff0c;越来越多的企业和组织正在或即将把核心系统和数据迁移上云端&#xff0c;其中以公有云和服务居多&#xff0c;那么就意味着在数据迁移的过程中会出现安全问题的几率更大。企业也越来越注重云安全体系&#xff0c;对我们云计算运维工程师来说&#xff0c;也是一…...

obsidian claudian 插件配置使用minimax模型

首先&#xff0c;打开.claude/settings.json文件 sudo gedit .claude/settings.json参考官网配置 “ANTHROPIC_BASE_URL”: “https://api.minimaxi.com/anthropic”, “ANTHROPIC_AUTH_TOKEN”: “MINIMAX_API_KEY”, 等参数然后在claudian插件中在配置一遍&#xff0c;即可正…...

模拟函数memmove

#include <stdio.h>//怎么实现是从前往后拷贝&#xff0c;还是从后往前拷贝 #include <assert.h>//拷贝函数&#xff0c;核心是可以处理内存重叠的情况 //定义 void *my_memmove(void *dest,const void *source,size_t n) {//准备工作 // assert(dest ! NULL); // …...

避坑指南:在Ubuntu 22.04上为Autoware配置Docker与NVIDIA GPU支持(含代理与镜像源配置)

深度避坑&#xff1a;Ubuntu 22.04下Autoware与Docker的GPU实战配置全解 当你在深夜的终端前反复输入docker run --gpus all却只收获冰冷的错误提示时&#xff0c;这种挫败感我深有体会。本文不是又一份标准安装教程&#xff0c;而是从17次失败尝试中提炼出的生存手册&#xff…...

孤能子视角:“人“的关系线束

(EIS下的"人"不同于实体的"人"。但这里不做比对。姑且当科幻小说看) 我的问题: 1."人"这条线&#xff0c;你能串联起多少知识&#xff1f; 2.Kimi分析。 3.信兄对Kimi分析的反馈。 (注:DeepSeek居然对Kimi的意见既有坚持又有吸收。另外&…...

云原生环境中的配置中心实践

云原生环境中的配置中心实践 &#x1f525; 硬核开场 各位技术老铁&#xff0c;今天咱们聊聊云原生环境中的配置中心实践。别跟我扯那些理论&#xff0c;直接上干货&#xff01;在云原生时代&#xff0c;配置管理是系统可靠性和可维护性的关键。不搞配置中心&#xff1f;那你…...

基于MATLAB+CPLEX gurobi平台的电力系统机组组合研究:考虑安全约束与直流潮流优...

MATLAB代码&#xff1a;考虑安全约束及热备用的电力系统机组组合研究 关键词&#xff1a;机组组合 直流潮流 优化调度 参考文档&#xff1a;自编文档&#xff0c;模型数据清晰明了 仿真平台&#xff1a;MATLABCPLEX/gurobi平台 优势&#xff1a;代码具有一定的深度和创新性&a…...

SAR信号处理中的汉宁窗优化——旁瓣抑制与分辨率平衡的艺术

1. 汉宁窗在SAR信号处理中的核心作用 我第一次接触汉宁窗是在处理火星探测器雷达数据时遇到的棘手问题。当时团队获取的火星次表层雷达图像出现了严重的旁瓣干扰&#xff0c;就像在干净的画布上泼洒了墨水点。导师随手调出汉宁窗函数说&#xff1a;"试试这个魔法棒"—…...

从零搭建一个智能客服问答引擎:基于T5模型与PyTorch的完整项目实战

从零搭建智能客服问答引擎&#xff1a;基于T5模型与PyTorch的工业级实践 当企业客服系统每天需要处理数千条重复性问题时&#xff0c;人工坐席的效率瓶颈就会凸显。去年为某电商平台部署智能客服系统的经历让我深刻体会到&#xff1a;一个能理解"我的快递为什么三天没更新…...

从论文到落地:剖析因果U-Net+波束形成在语音增强中的工程化细节与调优心得

因果U-Net与波束形成的工程实践&#xff1a;语音增强从实验室到产品的关键路径 在视频会议成为工作常态的今天&#xff0c;远场语音拾取质量直接决定了沟通效率。传统单通道降噪算法在小型会议室表现尚可&#xff0c;但当麦克风与声源距离超过3米&#xff0c;混响与噪声问题就会…...

新手福音:在快马平台跟随交互式教程轻松搞定openclaw安装

最近在学习openclaw这个工具时&#xff0c;发现很多教程要么太简略&#xff0c;要么步骤不完整&#xff0c;对新手特别不友好。后来在InsCode(快马)平台上发现可以创建交互式教程项目&#xff0c;就尝试做了一个完整的openclaw安装指南。整个过程比我预想的顺利很多&#xff0c…...