Hadoop-HA集群部署
集群的服务器规划：
配置免密登陆：（这里示范的是第一台服务器，其余的操作一样），免密登陆是为了执行脚本统一操作，启动，如（hdfs集群：1上启动2.5.6.7）（yarn，3上启动4567）
免密登陆测试：从01服务器登陆05服务器：
ZOOKEEPER的配置自己去看前面的文章，装到（5.6.7）三台服务器上去
在6.7两台服务器上修改myid为2和3.这样你的 3台zk就都配置好了
启动zk，并且查看状态是否正常：
安装配置hadoop集群
1.如上图：两台hdfs的nameservice我将他们和在一起命名——ns1
2.指定hadoop的目录
3.指定zookeeper的集群地址
以上就已经将namenode的配置配好了
以下是日志的配置JournalNode，和zkfc的自动切换
配置mapreduce的框架为yarn
配置yarn的高可用
将1上的hadoop包拷贝到2.3.4.5.6.7
启动
测试yarn地址是 
相关文章：
Hadoop-HA集群部署
集群的服务器规划： 配置免密登陆：（这里示范的是第一台服务器，其余的操作一样），免密登陆是为了执行脚本统一操作，启动，如（hdfs集群：1上启动2.5.6.7）…...
三、linux字符驱动详解
在上一节完成NFS开发环境的搭建后，本节将探讨Linux字符设备驱动的开发。字符设备驱动作为Linux内核的重要组成部分，主要负责管理与字符设备（如串口、键盘等）的交互，并为用户空间程序提供统一的读写操作接口。 驱动代码…...
【Research Proposal】基于提示词方法的智能体工具调用研究——研究问题
博客主页： [小ᶻ☡꙳ᵃⁱᵍᶜ꙳] 本文专栏: AIGC | ChatGPT 文章目录 💯前言💯研究问题1. 如何优化提示词方法以提高智能体的工具调用能力？2. 如何解决提示词方法在多模态任务中的挑战？3. 如何通过提示词优化智能体…...
【从0做项目】Java文档搜索引擎（9）烧脑终章!
阿华代码，不是逆风，就是我疯 你们的点赞收藏是我前进最大的动力！！ 希望本文内容能够帮助到你！！ 目录 文章导读 零：项目结果展示 一：导入 二：问题引入 1：情…...
python: SQLAlchemy (ORM) Simple example using mysql in Ubuntu 24.04
mysql sql script: create table School 表 (SchoolId char(5) NOT NULL comment主鍵primary key，學校編號,SchoolName nvarchar(500) NOT NULL DEFAULT comment 學校名稱,SchoolTelNo varchar(8) NULL DEFAULT comment電話號碼,PRIMARY KEY (SchoolId) #主…...
如何为自己的 PDF 文件添加密码？在线加密 PDF 文件其实更简单
随着信息泄露和数据安全问题的日益突出，保护敏感信息变得尤为重要。加密 PDF 文件是一种有效的手段，可以确保只有授权用户才能访问或修改文档内容。本文将详细介绍如何使用 CleverPDF 在线工具为你的 PDF 文件添加密码保护，确保其安全性。 为…...
echarts 折线图动态基准线设置超出基准线标红
基准线属性：markLine 线条标红关键属性：visualMap 小于： lt (less than) 大于：gt (greater than) 小于等于：lte (Less than or equal to) 大于等于：gte (Greater than or equal to) 1、基础应用——2条基准…...
Part 3 第十二章 单元测试 Unit Testing
概述 第十二章围绕单元测试展开，阐述了单元测试的实践与重要性，通过对比其他测试类型，突出其特点，还介绍了单元测试的最佳实践、避免的反模式以及与测试替身相关的内容，为编写高质量单元测试提供指导。 章节概要 1…...
C++与Python：两种编程语言的区别
C和Python都是当今编程领域广泛使用的语言，它们各有特色，适用于不同的开发场景。本文将从语言特性、性能、学习难度、应用领域等多个方面探讨C与Python之间的区别。 一、语言特性 类型系统： C：是一种静态类型语言…...
Springboot 高频面试题
以下是Spring Boot的高频面试题及答案和底层原理解释： 基础概念 什么是Spring Boot，其主要特点是什么？ 答案： Spring Boot本质上是一个建立在Spring框架之上的快速应用开发框架。其主要特点包括： 启动器：一…...
常用电脑，护眼软件推荐 f.lux 3400K | 撰写论文 paper
常用电脑？平均每天用 5 个小时？你就要考虑用一个护眼软件了，对皮肤也好。因为电脑屏幕有辐射，比如蓝光。 f.lux 作为一款专业护眼软件，值得使用。之前用了三年的 Iris Pro，现在 f.lux 做的更好了。 使用…...
MacOS下使用Ollama本地构建DeepSeek并使用本地Dify构建AI应用
目录 1 大白话说一下文章内容2 作者的电脑配置3 DeepSeek的本地部署3.1 Ollamal的下载和安装3.2 选择合适的deepseek模型3.3 安转deepseek 4 DifyDeepSeek构建Al应用4.1 Dify的安装4.1.1 前置条件4.1.2 拉取代码4.1.3 启动Dify 4.2 Dify控制页面4.3 使用Dify实现个“文章标题生…...
如何有效利用MYSQL的连接数
连接数配置2500~3000 依然发现连接不够用？ -- 查看当前最大连接数 SHOW VARIABLES LIKE MAX_CONNECTIONS; -- 查看当前总链接数 SHOW STATUS LIKE Threads_connected; -- 查看当前进程明细 SHOW PROCESSLIST; 合理设置以下参数： 1. MySQL 的参数设置 …...
调用click.getchar()时Windows PyCharm无法模拟键盘输入
文章目录 问题描述解决方案参考文献 问题描述 调用 click.getchar() 时，Windows PyCharm 无法模拟键盘输入 解决方案 Run → Edit Configurations… → Modify options → Emulate terminal in output console 参考文献 Terminal emulator | PyCharm Documentati…...
使用Hardhat实现ERC20 代币合约详解
ERC20 代币合约详解 💰 1. 合约概览 // SPDX-License-Identifier: MIT pragma solidity ^0.8.20;import "openzeppelin/contracts/token/ERC20/ERC20.sol";contract MyToken is ERC20 {constructor() ERC20("MyToken", "MTK") {_min…...
清华大学《DeepSeek与AI幻觉》（无套路免费分享）
随着人工智能技术的飞速发展，以DeepSeek为代表的国产大模型正逐渐成为各行各业的重要工具。然而，AI在生成内容时常常会出现“幻觉”——即生成与事实不符、逻辑断裂或脱离上下文的内容。 清华大学新闻与传播学院与人工智能学院联合推出的这篇教程《Deep…...
代码随想录算法【Day52】
Day51 101. 孤岛的总面积 思路 从周边找到陆地然后 通过 dfs或者bfs 将周边靠陆地且相邻的陆地都变成海洋，然后再去重新遍历地图 统计此时还剩下的陆地 代码 #include <iostream> #include <vector> using namespace std; int dir[4][2] {-1, 0, …...
Spark 和 Flink
Spark 和 Flink 都是目前流行的大数据处理引擎，但它们在架构设计、应用场景、性能和生态方面有较大区别。以下是详细对比： 1. 架构与核心概念 方面Apache SparkApache Flink计算模型微批（Micro-Batch）为主，但支持结构…...
Unity结合Vuforia虚拟按键实现AR机械仿真动画效果
零、最终效果 待上传 一、资源准备 1、Vuforia Vuforia版本不能高于10.17.4（往上的版本虚拟按键功能被删除） 2、Unity Unity版本必须要高于2022.3.x，不然使用Vuforia插件时会出现bug 二、主要内容 1、添加虚拟按钮 2、为虚拟按钮设置…...
PL/SQL 异常处理
目录 一、命名的系统异常 1.常见命名的系统异常 2.预定义的系统异常数量以及描述 3.处理命名的系统异常的一般步骤 二、程序员定义的异常 1.概念 2.自定义异常的定义与抛出 3.自定义异常的处理 三、未命名的系统异常 1.概述 2.处理未命名的系统异常的方法 3.使用场景 …...
rmlint重复目录合并功能详解：智能整理文件系统结构
rmlint重复目录合并功能详解：智能整理文件系统结构 【免费下载链接】rmlint Extremely fast tool to remove duplicates and other lint from your filesystem 项目地址: https://gitcode.com/gh_mirrors/rm/rmlint rmlint是一款极速的文件系统清理工具&…...
别再傻傻定义结构体了！用Qt的QPair轻松搞定函数多返回值（附排序与容器实战）
告别冗余代码：Qt开发者必备的QPair高效使用指南 在Qt开发中，我们经常遇到需要从函数返回多个值的场景。传统做法是定义一个临时结构体，但这往往导致代码臃肿、项目文件堆积。实际上，Qt提供了一个轻量级解决方案——QPairÿ…...
【PySide6】构建实时视频监控界面：从摄像头捕获到QLabel动态显示
1. 环境准备与基础概念 在开始构建实时视频监控界面之前，我们需要先准备好开发环境。PySide6是Qt框架的Python绑定库，它提供了丰富的GUI组件和工具，非常适合用来开发桌面应用程序。OpenCV则是一个强大的计算机视觉库，能够轻松处理…...
)
2026年04月23日最热门的开源项目(Github)
根据本期榜单的分析，我们可以得出以下几点结论： 1. 项目类型和语言分布 项目类型：列表中的项目主要集中在人工智能、代码生成和优化、数据处理等领域。其中，以支持Claude Code的项目（如andrej-karpathy-skills和supe…...
Mem Reduct：深入解析Windows系统内存优化工具的核心原理与实践指南
Mem Reduct：深入解析Windows系统内存优化工具的核心原理与实践指南 【免费下载链接】memreduct Lightweight real-time memory management application to monitor and clean system memory on your computer. 项目地址: https://gitcode.com/gh_mirrors/me/memre…...
音乐自由之路：3分钟搞定加密音频格式转换
音乐自由之路：3分钟搞定加密音频格式转换 【免费下载链接】unlock-music 在浏览器中解锁加密的音乐文件。原仓库： 1. https://github.com/unlock-music/unlock-music ；2. https://git.unlock-music.dev/um/web 项目地址: https://gitcode.c…...
暗黑破坏神2存档编辑器终极指南：5分钟快速掌握游戏修改技巧
暗黑破坏神2存档编辑器终极指南：5分钟快速掌握游戏修改技巧 【免费下载链接】d2s-editor 项目地址: https://gitcode.com/gh_mirrors/d2/d2s-editor 还在为暗黑破坏神2中反复刷装备而烦恼吗？想快速体验不同职业的build却不想从头练级？…...
RAGAs与G-Eval构建智能体评估体系实战
1. 从零构建基于RAGAs与G-Eval的智能体评估体系在构建大语言模型应用时，开发者常陷入"黑箱困境"——我们能看到输入和输出，却难以量化系统内部的真实表现。传统的人工评估不仅成本高昂，更存在主观性强、标准不统一的问题。本文将分…...
10层管式土壤墒情监测仪
分层监测灵活，定制化适配：单个土壤管式传感器可同时测量多个深度的土壤参数，默认支持10层测量，监测层数、监测深度均可定制（监测深度≤1M），完美匹配农田灌溉3层、水利监测5层、科研探索7层的选型…...
别再手动清理AL11了！用ABAP函数EPS2_GET_DIRECTORY_LISTING自动管理SAP服务器文件
告别手动清理：用ABAP自动化管理SAP服务器文件的终极方案 每次打开AL11看到堆积如山的日志文件和临时数据时，你是否感到一阵无力？那些需要定期清理的接口文件、归档数据，是否总在消耗你宝贵的时间？作为SAP系统管理员或A…...