Hive安装使用

作者: 明明德撩码 | 来源:发表于2018-02-28 17:49 被阅读12次

文档及下周网址

必要条件Requirements

  • Java 1.7
    Note: Hive versions 1.2 onward require Java 1.7 or newer. Hive versions 0.14 to 1.1 work with Java 1.6 as well. Users are strongly advised to start moving to Java 1.8 (see HIVE-8607).
  • Hadoop 2.x (preferred推荐), 1.x (not supported by Hive 2.0.0 onward).
    Hive versions up to 0.13 also supported Hadoop 0.20.x, 0.23.x.
  • Hive is commonly used in production(生产环境) Linux and Windows environment. Mac is a commonly used development environment. The instructions in this document are applicable to Linux and Mac. Using it on Windows would require slightly different steps.

上传hive包和myql包到linux系统

启动hdfs和yarn服务及MapReduce历史

  • sbin/start-dfs.sh
  • sbin/start-yarn.sh
  • sbin/mr-jobhistory-damon.sh start historyserver


解压及修改配置文件

hive依赖于hadoop

  • tar -zxf apache-hive-0.13.1-bin.tar.gz -C /opt/modules/
    -C 表示change的意思

  • 把apache-hive-0.13.1-bin 重新命名为hive-0.13.1
    mv apache-hive-0.13.1-bin hive-0.13.1

  • 把hive-env.sh.template重新命令为hive-env.sh


  • 修改hadoop目录
    修改hive-en.sh 中的 HADOOP_HOME=/opt/modules/hadoop-2.5.0

  • 修改hive配置文件目录
    opt/modules/hive-0.13.1/conf

运行hive

  • 在hdfs系统中添加目录
    命令:bin/hdfs dfs -mkdir -p /user/hive/warehouse 和/tmp

  • 把这两个目录放到一个组权限
    set them chmod g+w before you can create a table in Hive
    命令:bin/hdfs dfs -chmod 777 /tmp
    bin/hdfs dfs -chmod g+w /user/hive/warehouse
    bin/hdfs dfs -chmod777 /user/hive/warehouse

  • 运行 bin/hive
    第一次运行比较慢,在创建元数据,默认会创建一个default库。库为空库,没有任何表。


  • 创建表并执行count查询
    在这个过程中会执行MapReduce


网页访问地址


相关文章

  • Hive安装Version2.1.0

    Hive安装,基于版本2.1.0,使用apache-hive-2.1.0-bin.tar.gz安装包。 1.安装规...

  • Hive安装使用

    文档及下周网址 官网http://hive.apache.org 文档https://cwiki.apache.o...

  • 玩转大数据计算之Hive

    Hive版本:我们使用2.1.1的版本安装 Hive介绍:能够让你使用SQL语言查询分布式文件如HDFS。 Hiv...

  • 004.课程环境搭建:Hive 0.13.0安装

    安装Hive包 1、将课程提供的hive-0.13.1-cdh5.3.6.tar.gz使用WinSCP上传到spa...

  • Hive安装与配置

    Hive安装与配置 Hive安装配置 Hive官网:http://hive.apache.org[http://h...

  • Hive安装教程

    先安装好hadoop,再安装Hive 下载地址Index of /dist/hive/hive-3.1.2 (ap...

  • Hive + Sqoop + MySQL + Spark

    安装 Hive +Sqoop+MySQL+Spark先将 system_logs.sql 导入 MySQL,使用 ...

  • Hadoop 组件之Hive

    弄这个hive 就有点小曲折了 ,安装hive还算是顺顺利利,关键是hive 使用默认的Derby数据库,一次只...

  • Hive SQL练习之影评案例

    一、思维导图 二、准备工作 2.1使用工具 由于hive安装复杂,本项目使用金融数据分析案例第四篇《Hive初步学...

  • Hive安装与使用

    简介 hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查...

网友评论

    本文标题:Hive安装使用

    本文链接:https://www.haomeiwen.com/subject/aktixftx.html