热门IT资讯网

hadoop-数据节点的服役和退役

发表于:2024-11-25 作者:热门IT资讯网编辑
编辑最后更新 2024年11月25日,节点的退役和服役1、配置新节点的core-site.xml和yarn-site.xml,指向名称节点core-site.xmlfs.defaultFShdfs://s201/yarn-site.xml

节点的退役和服役


1、配置新节点的core-site.xml和yarn-site.xml,指向名称节点

core-site.xml

fs.defaultFS

hdfs://s201/

yarn-site.xml

yarn.resourcemanager.hostname

s201

2、配置hdfs-site.xml和yarn-site.xml指定服役/退役文件,一般指向同一个文件

hdfs-site.xml

dfs.hosts

/soft/hadoop/etc/hadoop/include

dfs.hosts.exclude

/soft/hadoop/etc/hadoop/exclude

yarn-site.xml

yarn.resourcemanager.nodes.include-path

/soft/hadoop/etc/hadoop/include

yarn.resourcemanager.nodes.exclude-path

/soft/hadoop/etc/hadoop/exclude

3、创建include/exclude文件,并编辑服役/退役主机列表

4、刷新节点信息

hdfs dfsadmin -refreshNodes

yarn rmadmin -refreshNodes

5、启动新节点/关闭旧节点

6、可以手动更新slaves文件。


0