美文网首页
hadoop (三)分布式环境搭建

hadoop (三)分布式环境搭建

作者: cnliu | 来源:发表于2018-07-31 23:24 被阅读0次

hadoop (三)分布式环境搭建

环境准备

我的环境:

三个虚拟机:
node3(192.168.56.104) 为主节点 
node1(192.168.56.102) node2(192.168.56.103) 为子节点

配置hadoop

在第一章配置基础上,我们需要增加两项配置:


image

配置主节点

image

配置子节点

image

修改hadoop核心配置文件:

image image

至此,hadoop分布式的主节点配置就ok了。

将主节点的hadoop部署目录分别拷贝到子节点node1和node2中。

scp -r hadoop-0.20.2/ node1:~/home/liuzd/
scp -r hadoop-0.20.2/ node2:~/home/liuzd/

分别在主节点和子节点启动:进入hadoop-0.20.2目录,运行bin/start-all.sh

主节点Hadoop进程:

image

子节点hadoop进程:

image

此时访问http://192.168.56.104:50070

image

此时可以看到2个livenode节点,点进去查看。

image

如上述不平衡可执行下述命令,重新分配。

$bin/hadoop balancer -threshold 1

相关文章

网友评论

      本文标题:hadoop (三)分布式环境搭建

      本文链接:https://www.haomeiwen.com/subject/xrbkvftx.html