在之前，我们启动Hadoop集群的时候，首先是启动namenode，然后启动datanode. 注意：我们之前的做法是手动的将启动datanode的命令发送给所有的datanode，显然如果在集群很庞大的时候，这种做法是不合适的.我们希望通过start-dfs.s...

1. 首先在npdev1机器上面运行hadoop-daemon.sh start namenode，启动namenode.

zookeeper是一个自动管理分布式集群的一个工具，以实现集群的高可用。比如集群中的一个机器挂掉了，没有zookeeper的话就得考虑挂一个机器对剩下集群工作的影响，而有了zookeeper，它就能自动帮你协调这些事儿。...

1、在docker中安装CentOS镜像，并启动centos容器，安装ssh。--详见"docker上安装centos镜像"一文。

操作系统：CentOS Linux release 7.4.1708 (Core)  64位使用软件如下：jdk1.8.0_112.tar.gzHadoop-2.7.6-src.tar.gzapache-ant-1.9.11-bin.tar.gzapache-maven-3.5.3-bin.tar.gzfi...

这里搭建的是3个节点的完全分布式，即1个nameNode，2个dataNode，分别如下：

[root@mini01 ~]# cat /etc/hosts 127.0.0.1  localhost localhost.localdomain localhost4 localhost4.localdomain4::1        localhost localhost.localdomain localh...

hadoop-ha严格来说应该分成各个组件的HA机制——HDFS的HA、YARN的HA

最近要搭建一个Hadoop做实验，因为版本的问题遇到不少的坑，本文记录VMware上搭建的CentOS7.0+Hadoop3.1伪分布式的整个过程。

前期准备工作： 找到 JDK 和 配置TXT文件 并拷贝到桌面下 不是目录 而是文件拷贝到桌面下 以下的命令部分就直接复制粘贴就能够了 1.配置root用户 使用快捷键 Ctrl + Alt + T 打开终端 输入命令：sudo passwd root 在...