黑名单退役-案例| 学习笔记

开发者学堂课程【Hadoop 分布式文件系统 HDFS黑名单退役-案例】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址https://developer.aliyun.com/learning/course/93/detail/1469


黑名单退役-案例


内容简介

一、黑名单的设置过程和举例


一、黑名单的设置过程和举例。

在黑名单上的主机都会被强制退出

1、Name Node 的/opt/module/hadoop-2.7.2/etc/hadoop 目录下创建 disHoslsexclude 文件

黑名单退役-案例| 学习笔记

添加如下主机名要退役的节点

黑名单退役-案例| 学习笔记

2、Name Node 的 hdfs-sixt.xml 配置文件中增加 disHoslsexclude 属性

黑名单退役-案例| 学习笔记

配置之后系统就知道要在这独取一个文件在这个名单上的主机都要退出运行


3、刷新 Name Node 刷新 ResourceManger

黑名单退役-案例| 学习笔记

示例

黑名单退役-案例| 学习笔记

之后在退出

黑名单退役-案例| 学习笔记

分发成功之后在去执行

黑名单退役-案例| 学习笔记

此时显示的是正在退役正在死亡),此时是正在将自己节点上的数据进行拷贝拷贝到其他节点上该节点上的数据越多死亡的过程越长


4、检查WEB浏览器退役节点的状态为 decommission in progerss(退役中),说明数据正在复制到其他节点

等待退役节点状态为 decommissioned(所有块已经复制完成),停止该节点以及节点资源管理注意如果副本数是3,服役节点小于3,是不能退役成功的需要修改副本数后才能退役

黑名单退役-案例| 学习笔记

5、如果数据不均衡可以用命令来实现集群的再平衡

黑名单退役-案例| 学习笔记

上一篇:回收站案例| 学习笔记


下一篇:NN 和2NN 工作机制 |学习笔记