美文网首页
centos7.3-cdh5.14安装(二)

centos7.3-cdh5.14安装(二)

作者: cyclone_29 | 来源:发表于2018-12-07 17:51 被阅读0次

    这篇安装教程不使用cloudera-manager-installer.bin方式进行安装,环境准备可以参考https://www.jianshu.com/p/80a8527c90e8,这些步骤都是一样的,主要的区别在于软件的安装过程
    二.软件准备:
    cloudera-manager.repo
    下载地址:http://archive.cloudera.com/cm5/redhat/7/x86_64/cm/

     [cloudera-manager]
     # Packages for Cloudera Manager, Version 5, on RedHat or CentOS 7 x86_64                 
     name=Cloudera Manager
     baseurl=http://############/cm5/redhat/7/x86_64/cm/5/
     gpgkey =http:/############/cm5/redhat/7/x86_64/cm/RPM-GPG-KEY-cloudera    
     gpgcheck = 1
    

    这里的#######替换为本地局域网主机的IP,比如192.168.200.10,角色一般为cm server,在该主机上安装httpd服务,并设置为自启动,将下载的文件放到/var/www/html文件夹下,因为在局域网内,又可以被其他的主机访问到,其他主机下载相关的软件就会从192.168.200.10下载,以实现离线安装的目的。注意一定要改https为http

    yum install -y httpd.service
    yum enable httpd.service
    

    CDH-5.14.2-1.cdh5.14.2.p0.3-el7.parcel
    CDH-5.14.2-1.cdh5.14.2.p0.3-el7.parcel.sha
    mainfest.json
    下载地址:http://archive.cloudera.com/cdh5/parcels/5.14.2/
    CDH-5.14.2-1.cdh5.14.2.p0.3-el7.parcel.sha由下载的CDH-5.14.2-1.cdh5.14.2.p0.3-el7.parcel.sha1重命名得到,查看文件的具体内容可以看到 8d7a3d19e0f9c3c457f008653603fad4552c06af,验证下载得到的CDH-5.14.2-1.cdh5.14.2.p0.3-el7.parcel的完整性

    /usr/bin/sha1sum CDH-5.14.2-1.cdh5.14.2.p0.3-el7.parcel
    

    如果得出的结果和文件的内容一致,证明文件没有损坏。下载完成之后放到192.168.200.10上

    cd /var/www/html
    mkdir parcels
    

    将下载的parcels文件移动到这个文件夹下

    cm5.14.2-centos7.tar.gz->下载地址:http://archive.cloudera.com/cm5/repo-as-tarball/5.14.2/

    tar zxvf cm5.14.2-centos7.tar.gz -C /var/www/html
    cd /var/www/html
    mkdir -p cm5/redhat/7/x86_64
    mv cm cm5/redhat/7/x86_64
    

    下面进入主题:
    以下步骤要在所有节点上执行:
    1.将修改好的cloudera-manager.repo文件拷贝到所有节点的/etc/yum.repos.d/文件夹下,验证文件是否有效

        yum list|grep cloudera
    

    如果出现了cloudera的7个rpm包,说明正常,如果没有,好好检查一下刚才的配置
    jdk的安装:
    可以从官网下载Oracle jdk安装,cm5.14.2-centos7.tar.gz解压后也有JDK的RPM包,选择安装1.7版本的也可以
    在cm server节点按照顺序安装cloudera-manager-daemons-5.14.2-1.cm5142.p0.8.el7.x86_64.rpm,
    cloudera-manager-server-5.14.2-1.cm5142.p0.8.el7.x86_64.rpm,安装完成之后修改/etc/cloudera-scm-server/db.properties文件指定使用MySQL来存储元数据,之后启动cm-server

    systemctl start cloudera-scm-server.service
    

    cm server启动完成之后,打开浏览器,网址为cm-server:7180,进行parcels源和cm源的设置,设置为提供httpd服务的主机的本地源,设置完成之后就搜索主机了。由于这篇文章和我的上一篇差距不是很大,所以有些东西就说的不是很细节,更进一步的msyql的HA,故障邮件通知以及Kerberos的主从的安装可以参考我的其他文章。

    相关文章

      网友评论

          本文标题:centos7.3-cdh5.14安装(二)

          本文链接:https://www.haomeiwen.com/subject/asaocqtx.html