当前位置： 首页 > news >正文

Hadoop3：Yarn常用Shell命令

news 2026/3/31 13:32:56

一、查看任务

1、查看所有任务

yarn application -list

在这里插入图片描述

2、根据状态查看任务

语法

yarn application -list -appStates （所有状态：ALL、NEW、NEW_SAVING、SUBMITTED、ACCEPTED、RUNNING、FINISHED、FAILED、KILLED）

例如

yarn application -list -appStates FINISHED

在这里插入图片描述

3、Kill掉Application

根据appid kill任务

yarn application -kill application_1719625561008_0003

在这里插入图片描述

二、查看日志

1、查询Application日志

语法

yarn logs -applicationId <ApplicationId>

案例

yarn logs -applicationId application_1719625561008_0003

2、查询Container日志

语法

yarn logs -applicationId <ApplicationId> -containerId <ContainerId>

案例

yarn logs -applicationId application_1719625561008_0003 -containerId container_1719625561008_0003_01_000001

在这里插入图片描述

三、查看尝试运行的任务

1、列出所有Application尝试的列表

语法

yarn applicationattempt -list <ApplicationId>

案例

yarn applicationattempt -list application_1719625561008_0003

这里我们可以查看到ContainerId和ApplicationAttemptId
在这里插入图片描述

2、打印ApplicationAttemp状态

语法

yarn applicationattempt -status <ApplicationAttemptId>

案例

yarn applicationattempt -status appattempt_1719625561008_0003_000001

在这里插入图片描述

四、查看容器

1、列出所有Container

语法

yarn container -list <ApplicationAttemptId>

案例1（运行完的任务）
容器只有在任务运行的时候，才能查看到
运行结束的任务，是查看不到对应的容器的

yarn container -list appattempt_1719625561008_0003_000001

在这里插入图片描述
案例2（运行中的任务）

yarn container -list appattempt_1719625561008_0004_000001

在这里插入图片描述

2、查看Container状态

语法

yarn container -status <ContainerId>

案例

yarn container -status container_1719625561008_0003_01_000001

在这里插入图片描述

五、查看节点状态

1、列出所有节点

案例

yarn node -list -all

在这里插入图片描述

六、重新加载Yarn配置

1、更新Yarn队列相关配置

修改配置后，直接执行该命令，就可以加载最新配置，无需重启Yarn服务

yarn rmadmin -refreshQueues

在这里插入图片描述

七、查看队列

1、查看队列状态

语法

yarn queue -status <QueueName>

案例

yarn queue -status default

在这里插入图片描述
页面端查看
在这里插入图片描述

相关文章：

Hadoop3：Yarn常用Shell命令

一、查看任务 1、查看所有任务 yarn application -list2、根据状态查看任务 语法 yarn application -list -appStates &#xff08;所有状态&#xff1a;ALL、NEW、NEW_SAVING、SUBMITTED、ACCEPTED、RUNNING、FINISHED、FAILED、KILLED&#xff09;例如 yarn application…...

编程日记 2024/6/30 7:32:40

15.数据库简介+MySQl使用+SQL语句

文章目录 数据库简述一.数据库简介DB1.定义:2.DBMS数据库管理系统3.数据库分类 二.MySQL的安装1.安装步骤2.MySQL数据库图形管理工具3.mysql程序常用命令4.MySQL字符集及字符序5.Navicat快捷键操作 三.MySQL数据库基本操作 .........................................表管理一.…...

编程日记 2024/6/30 7:30:37

AI入门系列：工具篇之ChatGPT的优秀的国内替代品

文章目录 一&#xff0c;智谱清言(ChatGLM)1&#xff0c;智谱清言简介2&#xff0c;[智谱清言地址&#xff0c;点我开始用吧](https://chatglm.cn/) 二&#xff0c;Kimi智能助手1&#xff0c;Kimi简介2&#xff0c;[Kimi地址&#xff0c;点我开始用吧](https://kimi.moonshot.c…...

编程日记 2024/6/30 7:26:34

改机软件有哪些？实现一键新机、改串号、改IMEI和手机参数的需求 硬改手机软件，新机环境模拟 设备伪装，一键改机，一键复原

这次针对可以直接开端口修改参数的机型做一些工具解析 前面接触合作过很多工作室。其中很多工作室对于各自软件的跳验证有各自的需求。 一个机型各项参数一般有IMEI WiFi 蓝牙 sn psb ESN等等。 针对这些参数的修改首先要明白各自软件检测的具体是哪些参数来验证。 对于常用…...

编程日记 2024/6/30 7:25:32

如何快速使用JNI

文章目录 1_JNI是什么&#xff1f;2_使用3_扩展 1_JNI是什么&#xff1f; JNI 是Java Native Interface的缩写&#xff0c;通过JNI&#xff0c;允许Java代码与其他语言&#xff08;通常是C或C&#xff09;编写的本地应用程序或库进行交互。简而言之就是&#xff0c;Java可以通…...

编程日记 2024/6/30 7:24:31

simulink开发stm32，使用中断模块，无法产生中断，其中包括使用timer模块，以及ADC都无法产生中断，需要注意的地方

1&#xff0c;其中包括使用timer模块&#xff0c;以及ADC都无法产生中断&#xff0c;需要注意的地方 原来是需要在配置文件里开启一下timer的中断&#xff0c;其他模块自动加载ioc就可以了&#xff0c;这个timer需要注意力&#xff0c;需要自己勾选一下 如下图&#xff1a; 看…...

编程日记 2024/6/30 7:23:30

C# 如何单纯的优化循环

Parallel.For(0, 10000, i >{// 并行执行的代码块// 例如: Console.WriteLine(i);}); 这种循环比 单纯常用的for 和 foreach 要稍微快一点 但是呢如果循环里面写的是非常简单的业务逻辑 的话 for和foreach 要更胜一筹一点 Parallel 原理就好像我一个人忙不过来可以多找几个…...

编程日记 2024/6/30 7:22:29

【鸿蒙学习笔记】@Extend装饰器：定义扩展组件样式

官方文档&#xff1a;Extend装饰器&#xff1a;定义扩展组件样式 [Q&A] Extend装饰器 作用 Extend用于扩展原生组件样式。 [Q&A] Extend装饰器 特点 &#xff11;・Extend仅支持在全局定义&#xff0c;不支持在组件内部定义。 &#xff12;・Extend支持封装指定组件的…...

编程日记 2024/6/30 7:21:28

【Docker项目实战篇】Docker部署PDF多功能工具Stirling-PDF

【Docker项目实战篇】Docker部署PDF多功能工具Stirling-PDF 前言一、Stirling-PDF介绍1.1 Stirling-PDF简介1.2 Stirling-PDF功能 二、本次实践规划2.1 本地环境规划2.2 本次实践介绍 三、本地环境检查3.1 检查Docker服务状态3.2 检查Docker版本3.3 检查docker compose 版本 四…...

编程日记 2024/6/30 7:20:27

【算法训练记录——Day37】

Day37——贪心Ⅴ 1.leetcode_56合并区间 1.leetcode_56合并区间 思路&#xff1a;排序&#xff0c;如果重叠&#xff0c;更新right 为max(right, curVal), 不重叠就加入res,需要单独考虑最后一次&#xff0c;因为每次都是在下一次遍历开始时判断是否加入res&#xff0c;因此 当…...

编程日记 2024/6/30 7:19:26

OpenCV 张正友标定法（二）

文章目录 一、简介二、实现代码三、实现效果参考资料一、简介 在之前的博客OpenCV 张氏标定法中，我们没有考虑镜头畸变等因素，因此计算出的内参与外参均是理想情况下的数值，而如果我们考虑到镜头的畸变： 我们就需要考虑使用最小二乘法最小化像素坐标的重投影误差（上述所求…...

编程日记 2024/6/30 7:17:24

LeetCode题练习与总结：环形链表Ⅱ--142

一、题目描述 给定一个链表的头节点 head &#xff0c;返回链表开始入环的第一个节点。 如果链表无环&#xff0c;则返回 null。 如果链表中有某个节点&#xff0c;可以通过连续跟踪 next 指针再次到达&#xff0c;则链表中存在环。 为了表示给定链表中的环&#xff0c;评测…...

编程日记 2024/6/30 7:16:22

【kaptcha】kaptcha验证码的使用-SpringBoot集成

Kaptcha验证码的依赖 <dependency><groupId>com.github.penggle</groupId><artifactId>kaptcha</artifactId><version>2.3.2</version> </dependency> Kaptcha验证码的配置类&#xff0c;对验证码的一些属性进行配置&#x…...

编程日记 2024/6/30 7:14:19

golang template模板嵌套语法 为何不能使用变量 底层源码解析

我们都知道在golang的模板语法中&#xff0c;我们可以使用template关键字嵌套其他模块&#xff0c; 如&#xff1a; {{template "模板文件名" .}} 然而&#xff0c;这里的 “模板文件名” 是不能使用变量的&#xff01; 注意这里最后的的 . 这个实际上是templa…...

编程日记 2024/6/30 7:13:18

【Linux】线程Thread

&#x1f525;博客主页&#xff1a; 我要成为C领域大神&#x1f3a5;系列专栏&#xff1a;【C核心编程】 【计算机网络】 【Linux编程】 【操作系统】 ❤️感谢大家点赞&#x1f44d;收藏⭐评论✍️ 本博客致力于知识分享&#xff0c;与更多的人进行学习交流 ​ ​ 线程概述 …...

编程日记 2024/6/30 7:12:17

RAG技术：在自然语言处理中的深度融合与创新

在自然语言处理&#xff08;NLP&#xff09;领域&#xff0c;随着技术的不断进步&#xff0c;我们见证了各种创新方法的涌现。其中&#xff0c;检索增强生成&#xff08;Retrieval-Augmented Generation&#xff0c;简称RAG&#xff09;技术以其独特的优势&#xff0c;逐渐成为…...

编程日记 2024/6/30 7:11:15

什么是std::bind

2024年6月29日&#xff0c;周日下午 std::bind 是一个C11标准库中的函数&#xff0c;它用于将一个函数或函数对象与特定的参数绑定在一起&#xff0c;生成一个新的函数对象。 std::bind通常和std::function一起使用&#xff0c;因为std::function可以作为一个函数容器来接收st…...

编程日记 2024/6/30 7:09:12

C语言的数据结构：树与二叉树（哈夫曼树篇）

前言 上篇讲完了二叉树&#xff0c;二叉树的查找性能要比树好很多&#xff0c;如平衡二叉树保证左右两边节点层级相差不会大于1&#xff0c;其查找的时间复杂度仅为 l o g 2 n log_2n log2​n&#xff0c;在两边层级相同时&#xff0c;其查找速度接近于二分查找。1w条数据&am…...

编程日记 2024/6/30 7:07:11

docker 安装syslog

Syslog-ng是一个可靠、多功能的日志管理系统&#xff0c;用于收集日志并将其转发到指定的日志分析工具。 使用Docker CLI方式搭建 步骤 1: 拉取Syslog-ng镜像 首先&#xff0c;需要从Docker Hub拉取Syslog-ng的官方镜像。 docker pull balabit/syslog-ng:latest 步骤 2: 启动…...

编程日记 2024/6/30 7:06:09

什么是无头浏览器？

简而言之&#xff0c;无头浏览器是没有图形用户界面 &#xff08;GUI&#xff09; 的 Web 浏览器。GUI 包括用户与之交互的数字元素&#xff0c;例如按钮、图标和窗口。但是&#xff0c;关于无头浏览器&#xff0c;您需要了解的还有很多。 在本文中&#xff0c;您将了解什么是…...

编程日记 2024/6/30 7:05:08

Matlab/Simulink仿真BLDC电机：避开转速闭环控制的5个常见坑

BLDC电机转速闭环仿真避坑指南&#xff1a;从参数配置到结果验证的完整解决方案 在电机控制领域&#xff0c;BLDC&#xff08;无刷直流电机&#xff09;因其高效率、长寿命和低维护成本等优势&#xff0c;已成为工业自动化、电动汽车和消费电子等领域的主流选择。Matlab/Simul…...

编程新知 2026/3/31 13:04:38

mkcert 命令文档 - 本地 HTTPS 开发证书生成工具详解

1. 命令简介mkcert 是一个用 Go 语言编写的、零配置的本地开发用自签名证书生成工具。它能够自动创建并安装本地证书颁发机构&#xff08;CA&#xff09;到系统的信任存储中&#xff0c;并生成受本地信任的开发证书&#xff0c;大幅简化 HTTPS 本地开发环境的搭建过程&#xff…...

编程新知 2026/3/31 10:44:57

Scarab：重构空洞骑士模组管理体验的技术实践

Scarab&#xff1a;重构空洞骑士模组管理体验的技术实践 【免费下载链接】Scarab An installer for Hollow Knight mods written in Avalonia. 项目地址: https://gitcode.com/gh_mirrors/sc/Scarab 问题溯源&#xff1a;模组管理的隐性成本与技术瓶颈 量化手动管理的效…...

编程新知 2026/3/31 9:18:01

3个突破性技术，让抖音无水印视频下载效率提升200%

3个突破性技术&#xff0c;让抖音无水印视频下载效率提升200% 【免费下载链接】douyin-downloader A practical Douyin downloader for both single-item and profile batch downloads, with progress display, retries, SQLite deduplication, and browser fallback support. …...

编程新知 2026/3/31 9:05:53

Qwen3.5-9B惊艳案例：128K上下文下跨页PDF内容精准摘要

Qwen3.5-9B惊艳案例&#xff1a;128K上下文下跨页PDF内容精准摘要 1. 模型核心能力展示 Qwen3.5-9B作为一款90亿参数的开源大语言模型&#xff0c;在多个领域展现出令人印象深刻的能力。我们特别测试了其在处理长文档时的表现&#xff0c;结果令人惊喜。 1.1 长上下文处理能…...

编程新知 2026/3/31 8:43:47

HUNYUAN-MT 7B翻译终端Python爬虫数据清洗实战：多语言文本归一化处理

HUNYUAN-MT 7B翻译终端Python爬虫数据清洗实战&#xff1a;多语言文本归一化处理 1. 引言 你有没有遇到过这种情况&#xff1f;辛辛苦苦用Python爬虫从全球各地的网站、论坛、社交媒体上抓取了一大堆数据&#xff0c;准备做分析或者训练模型&#xff0c;结果打开一看&#xf…...

编程新知 2026/3/31 8:29:40

小白也能玩转GLM-4V-9B：免费开源多模态模型部署全流程

小白也能玩转GLM-4V-9B&#xff1a;免费开源多模态模型部署全流程 1. 环境准备与快速部署 1.1 硬件要求与系统配置 GLM-4V-9B作为90亿参数的多模态模型&#xff0c;对硬件有一定要求&#xff1a; GPU推荐&#xff1a;至少24GB显存的显卡&#xff08;如RTX 4090&#xff09;…...

编程新知 2026/3/31 8:09:30

Phi-4-mini-reasoning vLLM高级特性：LoRA适配器热插拔与多任务推理切换

Phi-4-mini-reasoning vLLM高级特性&#xff1a;LoRA适配器热插拔与多任务推理切换 1. 模型概述 Phi-4-mini-reasoning 是一个基于合成数据构建的轻量级开源模型&#xff0c;专注于高质量、密集推理的数据处理。作为Phi-4模型家族的一员&#xff0c;它特别强化了数学推理能力…...

编程新知 2026/3/31 6:14:34

Qwen3.5-2B部署教程：Conda+Supervisor环境一键拉起，告别手动配置

Qwen3.5-2B部署教程&#xff1a;CondaSupervisor环境一键拉起&#xff0c;告别手动配置 1. 前言&#xff1a;认识Qwen3.5-2B轻量化模型 Qwen3.5-2B是Qwen3.5系列中的轻量化多模态基础模型&#xff0c;仅有20亿参数规模&#xff0c;专为低功耗、低门槛部署场景设计。这个模型特…...

编程新知 2026/3/31 4:25:13

开源吐槽大会：从抱怨到贡献的进化之路

开源项目吐槽大会&#xff1a;技术文章大纲技术背景与吐槽文化开源社区的协作模式与挑战 吐槽文化的价值&#xff1a;促进改进与社区互动 典型案例&#xff1a;知名项目的争议与改进常见吐槽点分析代码质量与可维护性问题 文档缺失或过时 社区响应速度与维护者态度 版本迭代与兼…...

编程新知 2026/3/31 1:21:07