当前位置: 首页 > news >正文

Ambari 中移除/重装 yarn 集群中的 NodeManager 节点

文章目录

  • 背景
  • 分析
  • 解决
    • 分析:现有 NodeManager 情况
    • 移除:240 服务器上的 NodeManager
    • 重新安装:240 服务器上的安装 NodeManager
  • 疑问
    • 为什么直接添加就可以运行?
  • 参考

背景

项目中有Spark应用,主要在 yarn 集群中部署。

现在发现 yarn 集群中的节点资源过剩,需要将部分节点移除,以释放出服务器资源

分析

🚀 项目是使用 Ambari 来搭建的 yarn 集群,所以也可以通过 Ambari 页面来操作。

😁 主要思路:

1、停掉 yarn 集群中提交的 spark 应用

2、操作 Ambari 停止要释放的服务器节点上的 NodeManager,并删除 NodeManager

3、启动 spark 应用,验证集群是否正常可用

解决

分析:现有 NodeManager 情况

从 Ambari 中可以看到,当前的 NodeManager 节点共有7个:

单击“NodeManagers”,可以看到在如下7台服务上:

相关文章:

  • YOLOv11检测模型数据集介绍、模型训练及测试
  • LeeCode912. 排序数组
  • AUTOSAR图解==>AUTOSAR_SWS_CryptoInterface
  • 神经接口安全攻防:从技术漏洞到伦理挑战
  • 不一样的flag 1(迷宫题)
  • 【专题刷题】双指针(四):最接近的三数之和,接雨水
  • 关于防火墙
  • Python读取Excel表格数据并写成JSON格式文件(精简版)
  • Zookeeper 概述
  • 【SAP ME 42】SAP ME 性能改进
  • LIMS引领综合质检中心数字化变革,赋能质量强国战略
  • 单线服务器有什么优点
  • Vue3 实战:打造多功能旅游攻略选项卡页面
  • 大模型转换为 GGUF 以及使 用 ollama 运行
  • Maven 简介(图文)
  • 幽灵依赖与常见依赖管理
  • ObjectOutputStream 深度解析
  • 2025年03月中国电子学会青少年软件编程(Python)等级考试试卷(三级)答案 + 解析
  • AI测试用例生成平台
  • uni.createInnerAudioContext踩坑duration在真机环境一直为0
  • 韩国一战机飞行训练中掉落机炮吊舱和空油箱
  • 福特预期6月美国市场涨价,机构称加税让每辆汽车成本至少增加数千美元
  • 美肯塔基州长警告:关税或致美家庭年增数千美元支出
  • 正义网评“一男两女举办婚礼”:“一夫多妻”流量闹剧该歇了
  • 黄仁勋今年二度到访:中国是英伟达非常重要的市场,希望继续与中国合作
  • 经济日报经世言:不断开创中马关系发展新局面