美文网首页我爱编程
[一起学Hive]之四-Hive的安装配置

[一起学Hive]之四-Hive的安装配置

作者: antyzhu | 来源:发表于2018-05-23 20:04 被阅读0次

    其实Hive的安装配置应该放在第二章来介绍,晚了些,希望对Hive初学者有用。

    三、Hive的安装配置

    3.1 环境需求

    • Hadoop Client
    • Mysql

    3.2 下载并解压Hive0.13.1安装包

    下载地址:http://archive.apache.org/dist/hive/hive-0.13.1/apache-hive-0.13.1-bin.tar.gz

    cp apache-hive-0.13.1-bin.tar.gz /usr/local

    cd /usr/local

    tar –xzvf apache-hive-0.13.1-bin.tar.gz

    配置环境变量(如果不是root用户,配置自己的~/.bash_profile即可):

    vi /etc/profile

    export HIVE_HOME=/usr/local/apache-hive-0.13.1-bin

    export PATH=$HIVE_HOME/bin: $PATH

    source /etc/profile

    3.3 在Mysql中建立Hive元数据库和表

    root进入Mysql;

    CREATE DATABASE hive;

    //下面给所有的ip都赋了访问权限,安全起见,

    //一般这里只需要对安装Hive Client端的机器IP赋权即可

    GRANT ALL ON hive. TO hive@’%’ IDENTIFIED BY ‘hive1234′;*

    flush privileges;

    3.4 配置hive-site.xml

    cd $HIVE_HOME/conf/

    新建hive-site.xml, 里面是以下内容:

    <?xml version=”1.0″?>
    <?xml-stylesheet type=”text/xsl” href=”configuration.xsl”?>
    <configuration>
    <property>
    <name>hive.metastore.warehouse.dir</name>
    <value>/hivedata/warehouse/</value>
    <description>Hive在HDFS上的根目录</description>
    </property>
    <property>
    <name>javax.jdo.option.ConnectionURL</name>
    <value>jdbc:mysql://127.1.1.102:3306/hive?createDatabaseIfNotExist=true</value>
    <description>Hive元数据库的连接串,红色为数据库名</description>
    </property>
    <property>
    <name>javax.jdo.option.ConnectionDriverName</name>
    <value>com.mysql.jdbc.Driver</value>
    <description>Hive元数据库JDBC驱动</description>
    </property>
    <property>
    <name>javax.jdo.option.ConnectionUserName</name>
    <value>hive</value>
    <description>Hive元数据库用户名</description>
    </property>
    <property>
    <name>javax.jdo.option.ConnectionPassword</name>
    <value>hive1234</value>
    <description>Hive元数据库密码</description>
    </property>
    <property>
    <name>datanucleus.autoCreateTables</name>
    <value>true</value>
    <description>不存在时,自动创建Hive元数据表</description>
    </property>
    <property>
    <name>datanucleus.autoCreateColumns</name>
    <value>true</value>
    <description>不存在时,自动创建Hive元数据列</description>
    </property>
    <property>
    <name>datanucleus.fixedDatastore</name>
    <value>false</value>
    </property>
    <property>
    <name>datanucleus.autoStartMechanism</name>
    <value>SchemaTable</value>
    </property>
    </configuration>

      这些是必须的参数,配好就行了,特别注意红色的几个参数,其他可根据实际需求来配置。
    

    3.5 进入Hive-Cli

    由于3.3中已经配置了环境变量,因此直接执行hive命令,即可进入Hive-Cli.

    如:

    [lxw1234@dev ~]$ hive

    Logging initialized using configuration in file:/usr/local/apache-hive-0.13.1-bin/conf/hive-log4j.properties

    hive>show databases;

    OK

    default

    Time taken: 0.42 seconds, Fetched: 1 row(s)

    hive>

    第一次执行,Hive需要在元数据库中建立相关的表,因此会稍微感觉慢一些。

    3.6 Hive的日志

    Hive的日志一般存放在操作系统本地的/tmp/${user.name}/hive.log中,该文件路径由

    $HIVE_HOME/conf/hive-log4j.properties中指定,可自己修改该路径。

    相关文章

      网友评论

        本文标题:[一起学Hive]之四-Hive的安装配置

        本文链接:https://www.haomeiwen.com/subject/iqjdjftx.html