美文网首页
Cloudera Hadoop(cdh5.1.0)平台搭建1

Cloudera Hadoop(cdh5.1.0)平台搭建1

作者: 鹰击长空123 | 来源:发表于2017-03-01 10:10 被阅读0次

    1.系统及版本选择

    Centos6.5 64位

    cm5.1.0  cdh5.1.0

    Cloudera版本进行hadoop平台搭建维护,安装简单,系统稳定,维护简单

    Apache版本的系统不稳定,安装繁琐费时

    2.系统安装(http://www.jianshu.com/p/4e6fb2bdfa51)

    3.安装CM

    (1)下载所需文件

    1. 下载rpm包:

    http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/5.1.0/RPMS/x86_64/

    2.下载bin文件:http://archive.cloudera.com/cm5/installer/5.1.0/

    下载好的文件放入创建的/opt/soft/cm文件夹下

    通过命令:mkdir -p /opt/soft/cm (图中为相对路径) 创建文件夹

    通过 rz命令 上传本地文件到linux

    上传后的结果

    3.下载repo源文件:cloudera-manager.repo

     通过命令:wget +地址 的方式下载

    wget http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/cloudera-manager.repo

    修改repo文件中的CM版本为我们需要的,这边为5.1.0

    通过命令:vi cloudera-manager.repo 进行修改

    未改动前 改动后

    拷贝repo文件到所有节点的/etc/yum.repos.d目录下

    通过命令: mv ./cloudera-manager.repo /etc/yum.repos.d

    验证下载源中的文件是否匹配

    通过命令:

    yum clean all   (图片中没有先清空yum缓存,会造成验证失败)

    yum list >aa.txt   (解决yum list|grep cloudera慢,先将list内容写入aa.txt中)

    cat aa.txt|grep cloudera (cat aa.txt过滤出cloudera的内容)

    如果不匹配,可以先清空yum缓存 通过命令 yum clean all(可以解决大部分不匹配问题)

    (2)安装rpm包

    通过命令:sudo yum install -y ./*rpm (命令中为当前路径下)

    提示安装rpm包以及相关的依赖包

    当出现complete!说明安装完成,安装过程一般不会报错,需要联网安装依赖包

    运行bin文件 安装server

    一直下一步

    然后几分钟后安装成功的CM界面应该是下图所示

    到这里CM的安装过程就结束蓝,接下来要安装cdh5了

    Cloudera Hadoop(cdh5.1.0)准备工作:http://www.jianshu.com/p/0a323137fe4f

    相关文章

      网友评论

          本文标题:Cloudera Hadoop(cdh5.1.0)平台搭建1

          本文链接:https://www.haomeiwen.com/subject/wztqgttx.html