hadoop (三)分布式环境搭建
环境准备
我的环境:
三个虚拟机:
node3(192.168.56.104) 为主节点
node1(192.168.56.102) node2(192.168.56.103) 为子节点
配置hadoop
在第一章配置基础上,我们需要增加两项配置:

配置主节点

配置子节点

修改hadoop核心配置文件:


至此,hadoop分布式的主节点配置就ok了。
将主节点的hadoop部署目录分别拷贝到子节点node1和node2中。
scp -r hadoop-0.20.2/ node1:~/home/liuzd/
scp -r hadoop-0.20.2/ node2:~/home/liuzd/
分别在主节点和子节点启动:进入hadoop-0.20.2目录,运行bin/start-all.sh
主节点Hadoop进程:

子节点hadoop进程:

此时访问http://192.168.56.104:50070

此时可以看到2个livenode节点,点进去查看。

如上述不平衡可执行下述命令,重新分配。
$bin/hadoop balancer -threshold 1
网友评论