HDSF集群扩容

2021-04-15 15:06:42 浏览数 (1)

A: 准备一个全新的节点(新节点准备)

1、关闭防火墙 2、关闭selinux 3、修改主机名 4、主机名与IP的对应关系 5、SSH免密码登录 6、安装JDK

B: 添加到集群

1、创建HDFS的Datanode的白名单 touch dfs.hosts 2 、修改hdfs-site.xml,将白名单添加到配置文件中 dfs.hosts /export/servers/hadoop-2.6.0-cdh5.14.0/etc/hadoop/dfs.hosts 3、刷新节点 HDFS 刷新 hdfs dfsadmin -refreshNodes YARN 刷新 yarn rmadmin -refreshNodes 4、将新节点的主机名添加到slaves文件中 5、启动新结点上的DataNode NodeManager sbin/hadoop-daemon.sh start datanode sbin/yarn-daemon.sh start nodemanager 6、web 查看 7、数据负载均衡 ./start-balancer.sh

0 人点赞