美文网首页
hbase环境搭建

hbase环境搭建

作者: 普度众生的面瘫青年 | 来源:发表于2019-10-24 19:14 被阅读0次
    • 可在apache官网下载hbase安装包
    • 本文档hbase版本为2.1.7,可与2.8.5版本hadoop适配,请提前安装兼容版本hadoop
      hadoop环境搭建
    • 本文档hbase版本为2.1.7,可与3.4.14版本zookeeper适配,请提前安装兼容版本zookeeper
      Zookeeper集群及伪集群模式搭建
    • 请提前安装java环境,建议jdk1.8版本
    • 本环境主机名为test01,配置在/etc/hostname中,以下内容中出现的test01,可替换为实际的hostname

    安装至/usr/local/hbase

    • 解压下载的压缩包至/usr/local/hbase
    tar -xzvf hbase-2.1.7-bin.tar.gz
    mv hbase-2.1.7 /usr/local/hbase
    
    • 在/etc/profile配置环境变量并source使之生效
    export HBASE_HOME=/usr/local/hbase
    export PATH=$PATH:$HBASE_HOME/bin
    
    • 验证是否安装成功,由于兼容问题,2.8.5版本hadoop缺少getJavaProperty相关类,故无法输出完整结果
    hbase version
    

    修改配置文件

    • 在/usr/local/hbase/下新建目录
    mkdir data logs
    
    • 在/usr/local/hbase/conf/hbase-env.sh内追加以下命令,如已配置环境变量可不再指定
    export JAVA_HOME=/usr/local/java(值根据实际情况)
    export HBASE_CLASSPATH=/usr/local/hbase/lib
    export HBASE_PID_DIR=/usr/local/hbase/data
    export HBASE_LOG_DIR=/usr/local/hbase/logs
    export HBASE_MANAGES_ZK=false
    
    • /usr/local/hbase/conf/hbase-site.xml 在configuration节点内增加内容
    <configuration>
    <property>
          <name>hbase.tmp.dir</name>
          <value>/usr/local/hbase/data</value>
        </property>
        <property>
          <name>hbase.rootdir</name>
          <value>hdfs://test01:9000/hbase</value>
        </property>
        <property>
          <name>hbase.cluster.distributed</name>
          <value>true</value>
        </property>
        <property>
          <name>hbase.zookeeper.quorum</name>
          <value>test01</value>
        </property>
        <property>
          <name>hbase.zookeeper.property.clientPort</name>
          <value>2181</value>
        </property>
        <property>
          <name>hbase.zookeeper.property.dataDir</name>
          <value>/usr/local/zookeeper/data</value>
          <description>property from zoo.cfg,the directory where the snapshot is stored</description>
        </property>
        <property> <!-- 该部分在版本完全兼容的情况下无需添加 -->
          <name>hbase.wal.provider</name> 
          <value>filesystem</value> 
        </property>
    </configuration>
    
    • /usr/local/hbase/conf/regionservers
    localhost  # 单实例
    # =============多实例============
    # test02
    # test03
    

    启动验证

    • 启动hbase
    /usr/local/hbase/bin/start-hbase.sh
    
    • 用jps查看本机java进程

    在test01可以看到HMaster和HRegionServer
    在从节点可以看到HRegionServer
    单实例则两者都存在

    • 查看控制台,其他机器可将test01替换为ip,可看到Master test01的信息

    http://test01:16010/master-status

    可能出现的问题

    兼容问题
    • 疑似兼容问题导致,经百度得到以下解决方案,执行后再次启动hbase即可。
    cp /usr/local/hbase/lib/client-facing-thirdparty/htrace-core-3.1.0-incubating.jar /usr/local/hbase/lib/
    

    相关文章

      网友评论

          本文标题:hbase环境搭建

          本文链接:https://www.haomeiwen.com/subject/ufidvctx.html