美文网首页
1.9CDH搭建Hadoop集群(二)

1.9CDH搭建Hadoop集群(二)

作者: 寒暄_HX | 来源:发表于2020-04-14 14:55 被阅读0次

    总目录:https://www.jianshu.com/p/e406a9bc93a9

    Hadoop - 子目录:https://www.jianshu.com/p/9428e443b7fd

    解压cloudera-manager

    mkdir -p /usr/hdk/module/cloudera-manager
    tar -zxvf cloudera-manager-centos7-cm5.12.1_x86_64.tar.gz -C /usr/hdk/module/cloudera-manager
    

    创建CM用户

    useradd --system --home=/usr/hdk/module/cloudera-manager/cm-5.12.1/run/cloudera-scm-server --no-create-home --shell=/bin/false --comment "Cloudera SCM User" cloudera-scm
    

    注:Cloudera Manager默认用户为cloudera-scm,创建具有此名称的用户是最简单的方法。 安装完成后,将自动使用此用户。

    配置agent

    vi /usr/hdk/module/cloudera-manager/cm-5.12.1/etc/cloudera-scm-agent/config.ini
    

    server_host的值修改成master主机名

    配置数据库插件

    mkdir /usr/share/java/
    
    mv mysql-connector-java-5.1.27-bin.jar /usr/share/java/mysql-connector-java.jar
    

    和ambari差不多。

    创建Parcel-repo目录

    mkdir -p /usr/hdk/cloudera/parcel-repo
    
    mv /usr/hdk/CDH-5.12.1-1.cdh5.12.1.p0.3-el6.parcel.sha1 /usr/hdk/cloudera/parcel-repo/CDH-5.12.1-1.cdh5.12.1.p0.3-el6.parcel.sha
    
    mv /usr/hdk/CDH-5.12.1-1.cdh5.12.1.p0.3-el6.parcel /usr/hdk/cloudera/parcel-repo/CDH-5.12.1-1.cdh5.12.1.p0.3-el6.parcel
    
    mv /usr/hdk/manifest.json /usr/hdk/cloudera/parcel-repo/manifest.json
    

    也可以直接把他们上传上来,sha1要重命名成sha。

    创建Parcels目录

    mkdir -p /usr/hdk/cloudera/parcels
    

    这个目录是放咱们通过CDH安装的组件的。

    然后把这个目录传输出去。

    scp -r /usr/hdk root@hadoop02:/usr/hdk
    scp -r /usr/hdk root@hadoop03:/usr/hdk
    

    启动服务

    hadoop01:
    cd /opt/module/cloudera-manager/cm-5.12.1/etc/init.d
    ./cloudera-scm-server start
    ./cloudera-scm-agent start
    
    hadoop02:
    cd /opt/module/cloudera-manager/cm-5.12.1/etc/init.d
    ./cloudera-scm-agent start
    
    hadoop03:
    cd /opt/module/cloudera-manager/cm-5.12.1/etc/init.d
    ./cloudera-scm-agent start
    

    然后访问页面:http://192.168.10.201:7180

    进去就一直下一步,最后在这里等着就可以。


    相关文章

      网友评论

          本文标题:1.9CDH搭建Hadoop集群(二)

          本文链接:https://www.haomeiwen.com/subject/iixtvhtx.html