当前位置：首页 > news >正文

纯手动搭建大数据集群架构_记录019_集群机器硬盘爆满了_从搭建虚拟机开始_做个200G的虚拟机---大数据之Hadoop3.x工作笔记0179

news 2026/2/10 8:55:00

今天突然就发现,使用nifi的时候集群满了...气死了..

而在vmware中给centos去扩容,给根目录扩容,做的时候,弄了一天...最后还是报错,

算了从头搭建一个200G的,希望这次够用吧.后面再研究一下扩容的问题.

2023-05-12 11:06:48 原来的集群的机器,硬盘太小了,扩容不知道怎么回事,怎么都不能扩容,

报错,所以这里从新安装了一个虚拟机用,这次设置硬盘200G.

去下载的这个版本的centos:

https://mirrors.aliyun.com/centos/7.9.2009/isos/x86_64/?spm=a2c6h.25603864.0.0.6ed3f5adav5frZ

首先去下载镜像:

选择的那个973MB的安装的,这里下载这个镜像,下载以后然后,去配置虚拟机

然后创建虚拟机,然后选择稍后安装操作系统

按照上面选择

纯手动搭建大数据集群架构_记录019_集群机器硬盘爆满了_从搭建虚拟机开始_做个200G的虚拟机---大数据之Hadoop3.x工作笔记0179

今天突然就发现,使用nifi的时候集群满了...气死了.. 而在vmware中给centos去扩容,给根目录扩容,做的时候,弄了一天...最后还是报错, 算了从头搭建一个200G的,希望这次够用吧.后面再研究一下扩容的问题. 2023-05-12 11:06:48 原来的集群的机器,硬盘太小了,扩容不知道怎么回事…...

编程日记 2023/5/12 20:33:12

变量大小:—揭开不同类型的字节数

变量大小：一一揭开不同类型的字节数在编程中，我们会使用各种类型的变量来存储数据，但是你是否知道这些变量在内存中所占用的字节数是多少呢？随着不同编程语言和不同的操作系统，这些变量的字节数可能会有所不同。在本…...

编程日记 2023/5/12 20:28:11

23.自定义指令

像是 v-if,v-for,v-model 这些是官方指令，vue允许开发者自定义指令目录 1 mounted 1.1 基本使用 1.2 第一个形参 1.3 第二个形参 2 updated 3 函数简写 4 全局自定义指令 1 mounted 当指令绑定到元素身上的时候，就会自动触发mounted()…...

编程日记 2023/5/12 20:23:10

OPNET Modeler 例程——停等协议的建模和仿真

文章目录一、概述二、链路模型和包格式创建三、进程模型1.src 进程模型2.sink 进程模型四、节点模型五、网络模型六、仿真结果一、概述本例程是在 OPNET Modeler 中对停等协议的建模和仿真，其中停等协议的操作过程如下： （1）发…...

编程日记 2023/5/12 20:18:09

JavaScript - 基础+WebAPI（笔记）

前言： 求关注😭 本篇文章主要记录以下几部分： 基础： 输入输出语法；数据类型；运算符；流程控制 - 分支语句；流程控制 - 循环语句；数组 - 基础；函数 - 基础&…...

编程日记 2023/5/12 20:13:08

API调用的注意事项及好处！

API调用是指一个软件系统通过预定格式、协议和框架，向另一个软件系统发送请求并获得响应的过程。在进行API调用时需要注意以下事项： 1. 认真阅读API文档：在调用API前，一定要认真仔细地阅读相关的API文档，了解API接口…...

编程日记 2023/5/12 20:08:07

文章目录 1. ros1 中的rosrun tf tf_echo 在ros2中使用办法2. rqt 中 tf 树的查看3. roscd 在ros2中使用办法4. ros2获取时间的方法： 1. ros1 中的rosrun tf tf_echo 在ros2中使用办法 # ros2 run tf2_ros tf2_echo [reference_frame] [target_frame] ros2 run tf2…...

编程日记 2023/5/12 20:03:06

利用MySQL语句批量替换指定wordpress文章中的图片路径

很多时间我们将服务器中的图片下载到本地，然后删掉，但是有一个问题就是，所有文章中的图片路径还是以前的，没有根据域名来。导致下午某些时间段图片都是无法显示的，后来想到用MySQL直接批量替换，执行才不到1…...

编程日记 2023/5/12 19:58:05

Linux必会100个命令（六十）curl

在Linux中curl是一个利用URL规则在命令行下工作的文件传输工具，可以说是一款很强大的http命令行工具。它支持文件的上传和下载，是综合传输工具。 curl选项比较多，使用man curl或者curl -h获取帮助信息。 -a/--append …...

编程日记 2023/5/12 19:53:04

物联网硬件安全与整改梳理(1)

物联网安全工作梳理(0)_luozhonghua2000的博客-CSDN博客上篇讲了物联网总体安全知识框架和工作梳理，这篇单独讲下硬件安全方面的问题和整改知识技能点。硬件安全主要分5个方面来讲：硬件安全现状，硬件安全技术分析，典型案例，安全架构整改，安全整改措施。智能硬件安全总…...

编程日记 2023/5/12 19:48:03

【大数据学习篇3】HDFS命令操作与MR单词统计

1. HDFS命令使用 [rootmaster bin]# su hd[hdmaster bin]$ #查看/目录[hdmaster bin]$ hdfs dfs -ls / 5 #在/目录创建一个为test名字的文件夹[hdmaster bin]$ hdfs dfs -mkdir /test#查看/目录[hdmaster bin]$ hdfs dfs -ls Found 1 itemsdrwxr-xr-x - hd supergroup …...

编程日记 2023/5/12 19:43:02

java中设计模式总结

设计模式是实际工作中写的各种代码进行高层次抽象的总结，其中最出名的当属 Gang of Four (GoF) 的分类了，他们将设计模式分类为 23 种经典的模式，根据用途又可以分为三大类，分别为创建型模式、结构型模式和行为型模式。有一些重…...

编程日记 2023/5/30 5:33:37

ChatGPT不到1分钟生成全部代码，你就说慌不慌吧？

生成过程视频： 如何使用ChatGPT快速生成代码 (qq.com) 如何使用ChatGPT快速生成SpringBoot集成Dubbo的完整案例 1、Dubbo最新版本有哪些新特性 Dubbo最新版本是2.7.9，于2021年6月发布。以下是该版本的一些新特性： 1）增加Dubbo-go…...

编程日记 2023/6/1 1:20:30

Python进阶知识（1）—— 什么是爬虫？爬文档，爬图片，万物皆可爬，文末附模板

文章目录 01 | 🍒 什么是 P y t h o n 爬虫？ \color{red}{什么是Python爬虫？} 什么是Python爬虫？🍒02 | 🍊 怎么发起网络请求？ \color{orange}{怎么发起网络请求？} 怎么发起网络请求…...

编程日记 2023/5/30 0:43:41

如何在andorid native layer中加log function.【转】

在开发Android一些应用或是链接库, 在程序代码中埋一些log是一定有需要的, 因为谁也无法保证自己所写出来的程序一定没有问题, 而log机制正是用来追踪bug途径的一种常用的方法. 在andorid中提供了logcat的机制来作log的目的, 在javalayer有logcat class可以用,哪在nativelayer呢…...

编程日记 2023/5/12 19:22:58

FreeRTOS 空闲任务

文章目录一、空闲任务详解1. 空闲任务简介2. 空闲任务的创建3. 空闲任务函数二、空闲任务钩子函数详解1. 钩子函数2. 空闲任务钩子函数三、空闲任务钩子函数实验一、空闲任务详解 1. 空闲任务简介当 FreeRTOS 的调度器启动以后就会自动的创建一个空闲任务，这…...

编程日记 2023/5/12 19:17:56

快速生成HTML结构语法、快速生成CSS样式语法以及emmet

快速生成HTML结构语法 1、生成标签直接输入标签名按Tab键即可比如 div 然后tab键 2、如果要生成多个相同标签，加上就可以了，比如 div3就可以快捷生成三个div 3、如果有父子级关系的标签，可以用 > 比如 ul>li 就可以了 4、如果有兄弟关…...

编程日记 2023/5/12 19:12:55

企业直播该如何做？硬件设备、网络环境、设备连接和观看权限等整个直播流程教程

这是一份面向直播新手的企业直播说明教程，字数较多，完整看完，可能会需要求10分钟，建议您可以【收藏】，如果本文章对您有帮助，就帮助【点个赞】吧~~~ 阿酷TONY / 2023-5-12 / 原创文章 / 长沙 / 文章…...

编程日记 2023/5/12 19:07:54

第4章静态网站部署

第4章静态网站部署 Nginx是一个HTTP的web服务器，可以将服务器上的静态文件（如HTML、图片等）通过HTTP协议返回给浏览器客户端 4.1 案例：将ace-master这个静态网站部署到Nginx服务器上 4.1.1 通过Xftp将ace-master到linux服务器…...

编程日记 2023/5/12 19:02:53

免费版的mp3格式转换器有哪些？这三款软件帮你实现！

在娱乐文化越来越丰富的今天，人们越来越追求音乐、视频等娱乐方式，其中音乐作为一种能够治愈心灵的艺术形式备受欢迎。但要欣赏一首美妙的音乐，就需要我们自己去制作、编辑并转换其格式，以适应各种软件如MP3、MP4等格式。方法一…...

编程日记 2023/5/12 18:57:52

Qt Widget类解析与代码注释

#include "widget.h" #include "ui_widget.h"Widget::Widget(QWidget *parent): QWidget(parent), ui(new Ui::Widget) {ui->setupUi(this); }Widget::~Widget() {delete ui; }//解释这串代码，写上注释当然可以！这段代码是 Qt …...

编程新知 2025/11/29 21:00:30

Python爬虫实战：研究feedparser库相关技术

1. 引言 1.1 研究背景与意义在当今信息爆炸的时代，互联网上存在着海量的信息资源。RSS（Really Simple Syndication）作为一种标准化的信息聚合技术，被广泛用于网站内容的发布和订阅。通过 RSS，用户可以方便地获取网站更新的内容，而无需频繁访问各个网站。然而，互联网…...

编程新知 2025/8/18 9:54:31

IoT/HCIP实验-3/LiteOS操作系统内核实验(任务、内存、信号量、CMSIS..)

文章目录概述HelloWorld 工程C/C配置编译器主配置Makefile脚本烧录器主配置运行结果程序调用栈任务管理实验实验结果osal 系统适配层osal_task_create 其他实验实验源码内存管理实验互斥锁实验信号量实验 CMISIS接口实验还是得JlINKCMSIS 简介LiteOS->CMSIS任务间消息交互…...

编程新知 2026/1/31 23:44:39

深入解析C++中的extern关键字：跨文件共享变量与函数的终极指南

🚀 C extern 关键字深度解析：跨文件编程的终极指南 📅 更新时间：2025年6月5日 🏷️ 标签：C | extern关键字 | 多文件编程 | 链接与声明 | 现代C 文章目录前言🔥一、extern 是什么？&…...

编程新知 2026/2/1 6:50:07

C++ Visual Studio 2017厂商给的源码没有.sln文件易兆微芯片下载工具加开机动画下载。

1.先用Visual Studio 2017打开Yichip YC31xx loader.vcxproj，再用Visual Studio 2022打开。再保侟就有.sln文件了。易兆微芯片下载工具加开机动画下载 ExtraDownloadFile1Info.\logo.bin|0|0|10D2000|0 MFC应用兼容CMD 在BOOL CYichipYC31xxloaderDlg::OnIni…...

编程新知 2026/2/5 4:21:48