【HDFS】Decommision（退役） EC数据节点剩最后几个块卡住的问题
一、背景
近期操作退役EC集群的节点。在退役的过程中，遇到了一些问题。特此总结一下。
本文描述的问题现象是：
每一批次退役10个节点，完全退役成功后开始操作下一批。
但是，中间有一批次有2台节点的Under Replicated Blocks一直是1，不往下降。
处于Decommissioning状态卡住了很久。如果不人为干预的话，会一直卡住，无法退役成功。
二、问题排查、源码分析
1、首先确定卡在了哪个块的复制上。
将 org.apache.hadoop.hdfs.server.blockmanagement.DatanodeAdminManager这个LOG的级别修改为TRACE级别。
这样在DatanodeAdminManager#isSufficient方法里就会有TRACE日志打印出来，告诉我们哪个块有问题。
如下图所示，我们知道卡在了blk_-9223372034543410656_197486297这个块上。
2、 使用fsck -blockId 看看这个块属于哪个文件？
如下图所示。另外我们注意到，此块有一个internal block已经是DECOMMISSIONED状态了（0390节点上那个，这个细节很重要。）
相关文章：
【HDFS】Decommision（退役） EC数据节点剩最后几个块卡住的问题
一、背景 近期操作退役EC集群的节点。在退役的过程中，遇到了一些问题。特此总结一下。 本文描述的问题现象是： 每一批次退役10个节点，完全退役成功后开始操作下一批。 但是，中间有一批次有2台节点的Under Replicated Blocks一直是1，不往下降。 处于Decommissioning状态卡…...
MySQL知识点归纳总结（一）
1、事务的四大特性？ 事务特性ACID：原子性（Atomicity）、一致性（Consistency）、隔离性（Isolation）、持久性 （Durability）。 原子性是指事务包含的所有操作要么…...
SocketWeb实现小小聊天室
SocketWeb实现小小聊天室 消息推送的常见方式轮询长轮询SSE（server-sent event）：服务器发送事件WebSocketWebSocket简介WebSocket API 实现小小聊天室实现流程消息格式客户端-->服务端服务端-->客户端 消息推送的常见方式 轮询 浏览器…...
如何在启用Secure Boot的Ubuntu 22.04电脑中安装使用VirtualBox 6.1
我使用的是华为Matebook X Pro笔记本电脑，默认开启了UEFI安全引导（UEFI Secure Boot），安装了Windows和Ubuntu双操作系统，平时基本上都是使用Ubuntu 22.04（Linux Mint 21.3），使用上也…...
基于B/S+MySQL+Tomcat开发的旅游信息管理系统
基于B/SMySQLTomcat开发的旅游信息管理系统 项目介绍💁🏻 塞北村镇旅游网站设计主要用于实现旅游景点信息管理，基本功能包括：主界面模块设计，用户注册模块，旅游景点模块，酒店预订模块࿰…...
mac m3安装nvm安装说明；mac安装xbrew
安装说明说明： 1.安装brew /bin/zsh -c "$(curl -fsSL https://gitee.com/cunkai/HomebrewCN/raw/master/Homebrew.sh)"2.安装nvm brew install nvm3.创建.nvm目录 mkdir ~/.nvm4.编辑 ~/.zshrc 配置文件 vi ~/.zshrc5.在 ~/.zshrc 配置文件内添加内…...
【小沐学QT】QT学习之Web控件的使用
文章目录 1、简介1.1 Qt简介1.2 Qt下载和安装1.3 Qt快捷键1.4 Qt帮助 2、QtWeb控件2.1 测试代码1（QApplication）2.2 测试代码2（QApplicationQWidget）2.3 测试代码3（QApplicationQMainWindow）2.4 测试代码4&…...
word embedding
介绍： ASCII可以编码为计算机可以识别的数据，为什么还需要embedding? 计算机只是对“字母”进行ASCII编码，并没有对词汇的“Word”编码。词汇应该是咱们处理自然语言的最基本的元素，而不是字母。那么世界上有千千万万的Word&am…...
原码，反码，补码
原码 什么是原码 原码：十进制数据的二进制表现形式，最左边是符号位，0为正，1为负 最大值 0 1 1 1 1 1 1 1 > 127 最小值 1 1 1 1 1 1 1 1 > -127 原码的弊端 利用原码对正数进行计算是不会有问题的 但是如果是负数计算…...
科技赋能，MTW400A为农村饮水安全打通“最后一公里”
日前，山东省政府纵深推进国家省级水网先导区建设，持续深化“水网”行动，着力构筑水安全保障网、水民生服务网、水生态保护网，建设水美乡村示范带、内河航运示范带、文旅融合示范带、绿色发展示范带，推动形成“三网四带…...
测试计划、测试方案、测试策略、测试用例的区别
一 测试计划 测试计划是指描述了要进行的测试活动的范围、方法、资源和进度的文档。它主要包括测试项、被测特性、各阶段的测试任务、时间进度安排，谁执行任务和风险控制等，可以包括测试策略。 二 测试方案 测试方案是指描述需要测试的特性、测试的方…...
c# 异常处理
异常类 .NET Framework 类库中的所有异常都派生于 Exception 类，异常包括系统异常和应用异常。 默认所有系统异常派生于 System.SystemException，所有的应用程序异常派生于 System.ApplicationException。 系统异常一般不可预测，比如内存堆…...
 Object Pascal 学习笔记---第6章第3节（传递字符串作为参数）)
(delphi11最新学习资料) Object Pascal 学习笔记---第6章第3节（传递字符串作为参数）
6.3 字符串数据类型 Object Pascal 中的字符串数据类型比简单的字符数组复杂得多，其功能远远超出了大多数编程语言为类似数据类型提供的功能。在本节中，我将介绍这种数据类型背后的关键概念；在接下来的章节中，我们将更详细地探…...
k8s节点负载使用情况分析命令kubectl describe node [node-name]
1.到任意安装了kubectl节点命令的节点上执行kubectl describe node [node-name] 上面的Requests最小分配 Limits最大分配是所有pod之和，最小分配之和不能超过服务器实际参数，否则新的pod会因为资源不够起不来，最大分配是预设之和࿰…...
自动驾驶加速落地，激光雷达放量可期（上）
1 激光雷达应用广泛，汽车有望成最大催化 激光雷达（LiDAR）是一种主动遥感技术，通过测定传感器发出的激光在传感器与目标物体之间的传播距离，来分析目标地物表面的反射能量大小、反射波谱的幅度、频率和相位等信息&#…...
变量的间接引用
场景： 如果第一个变量的值是第二个变量的名字，我们能够从第一个变量中取得第二个变量的值吗？例如，如果aztj且ztjz，那么我们能够通过引用变量a来获得值z吗？答案是可以，它被称为间接引用…...
学习JAVA的第六天（基础）
目录 集合 集合和数组的对比 ArrayList成员方法 ArrayList成员方法代码展示 练习 集合的遍历01之字符串 集合的遍历02之数字 集合的遍历03之学生对象 集合 集合和数组的对比 从长度维度来看 数组长度固定 集合长度可变从存储类型维度来看 数组可以存放基本数据类型和…...
LeetCode 2673.使二叉树所有路径值相等的最小代价：自顶向下的DFS 或 自底向上的递推
【LetMeFly】2673.使二叉树所有路径值相等的最小代价：自顶向下的DFS 或 自底向上的递推 力扣题目链接：https://leetcode.cn/problems/make-costs-of-paths-equal-in-a-binary-tree/ 给你一个整数 n 表示一棵 满二叉树 里面节点的数目，节点编…...
9、电源管理入门之CPU Idle
目录 1. CPU Idle有什么用？ 2. CPU Idle整体框架 3. Idle状态判断 3. cpuidle core 4. 注册初始化 4.1 cpuidle governor注册 4.2 cpuidle driver注册 4.3 cpuidle device注册 5. cpuidle触发流程 关于Linux的很多知识其实网上的资料非常的多，但是也有些问题： 有时…...
uniapp的扩展组件uni-popup 弹出层自动打开
我的需求是在页面加载完之后自动打开弹窗，自动打开只能写在onReady 或 mounted 生命周期内，这是这个组件的规定： 如果想在页面渲染完毕后就打开 uni-popup ，请在 onReady 或 mounted 生命周期内调用，确保组件渲染完毕…...
联想拯救者BIOS隐藏功能一键解锁：释放硬件潜能的终极指南
联想拯救者BIOS隐藏功能一键解锁：释放硬件潜能的终极指南 【免费下载链接】LEGION_Y7000Series_Insyde_Advanced_Settings_Tools 支持一键修改 Insyde BIOS 隐藏选项的小工具，例如关闭CFG LOCK、修改DVMT等等 项目地址: https://gitcode.com/gh_mirror…...
别再只用小波降噪了！试试这个ICEEMDAN+皮尔逊的“前处理”组合拳
突破传统降噪瓶颈：ICEEMDAN与皮尔逊协同的信号预处理革命 在信号处理领域，工程师们常常面临一个尴尬的现实：教科书上的完美算法在实际复杂信号面前频频失效。我曾参与过一个工业振动监测项目，传统小波降噪处理后的信号就像被过度美…...
终极Unity开源游戏项目指南：10个最佳学习资源助你快速上手游戏开发 [特殊字符]
终极Unity开源游戏项目指南：10个最佳学习资源助你快速上手游戏开发 🎮 【免费下载链接】awesome-unity A curated list of awesome Unity games! 🎮 项目地址: https://gitcode.com/gh_mirrors/awe/awesome-unity 想要学习Unity游戏开…...
掌控系统散热：FanControl智能风扇控制完全指南
掌控系统散热：FanControl智能风扇控制完全指南 【免费下载链接】FanControl.Releases This is the release repository for Fan Control, a highly customizable fan controlling software for Windows. 项目地址: https://gitcode.com/GitHub_Trending/fa/FanCon…...
激活函数选型指南：从ReLU到RReLU，如何根据你的数据集大小和任务特性做选择？
激活函数实战选型手册：从ReLU到RReLU的深度决策框架 在深度学习模型构建过程中，激活函数的选择往往被当作一个默认参数处理——大多数人会不假思索地选择ReLU。但当我们面对特定任务时，这种"一刀切"的做法可能让模型性能大打折扣。…...
别再死记硬背了！用‘借书还书’的例子，5分钟搞懂数据库1NF到BCNF
图书馆借阅系统里的数据库范式：从1NF到BCNF的实战推演 想象你走进一家老式图书馆，木质书架散发着油墨香气，管理员正用纸质登记簿记录借阅信息。某天，馆长决定数字化管理，请你设计数据库。当你翻开《数据库系统概论》&a…...
Z-Image-Turbo-rinaiqiao-huiyewunv部署教程：模型路径校验+transformer模块异常捕获机制
Z-Image-Turbo-rinaiqiao-huiyewunv部署教程：模型路径校验transformer模块异常捕获机制 1. 项目概述 Z-Image-Turbo-rinaiqiao-huiyewunv是基于Tongyi-MAI Z-Image底座模型开发的专属二次元人物绘图工具。该工具通过注入辉夜大小姐（日奈娇）…...
深度解密：SketchUp STL插件3个核心技巧解决3D打印导出难题
深度解密：SketchUp STL插件3个核心技巧解决3D打印导出难题 【免费下载链接】sketchup-stl A SketchUp Ruby Extension that adds STL (STereoLithography) file format import and export. 项目地址: https://gitcode.com/gh_mirrors/sk/sketchup-stl Sketch…...
Z-Image-Turbo_Sugar脸部Lora与Dify工作流引擎集成：打造无代码AI人脸风格化应用
Z-Image-Turbo_Sugar脸部Lora与Dify工作流引擎集成：打造无代码AI人脸风格化应用 想象一下，运营团队想为即将到来的春节活动，快速上线一个“生成你的专属国风头像”的小程序。按照传统流程，你需要召集前后端开发、算法工程师&…...
云原生×AI代码生成的“最后一公里”危机：SITS2026暴露的4类不可观测性盲区，运维团队已连夜升级eBPF探针
第一章：SITS2026案例：AI云原生代码生成 2026奇点智能技术大会(https://ml-summit.org) SITS2026（Smart Intelligent Transformation Summit）是面向企业级AI工程落地的年度技术实践峰会，其核心演示项目“CloudNativeG…...