美文网首页
安装Hadoop 和 Hive

安装Hadoop 和 Hive

作者: 无敌的肉包 | 来源:发表于2018-07-29 22:56 被阅读0次

Hadoop是依赖于Java,所以安装Hadoop之前,我们需要先安装Java。
可以通过这个命令查看Java的版本:

~$ java -version

Command 'java' not found, but can be installed with:

sudo apt install default-jre            
sudo apt install openjdk-11-jre-headless
sudo apt install openjdk-8-jre-headless 
sudo apt install openjdk-9-jre-headless 

在发现未安装Java之后,我们可以通过如下代码安装Java:

~$ sudo apt-get install default-jre
~$ sudo apt-get install default-jdk
~$ sudo add-apt-repository ppa:webupd8team/java
~$ sudo apt-get update
#Java8
~$ sudo apt-get install oracle-java8-installer
~$ sudo apt-get install oracle-java8-set-default
#设置环境变量
~$ export JAVA_HOME=/usr/lib/jvm/java-8-oracle
~$ source ~/.bashrc
~$ java -version

java version "1.8.0_181"
Java(TM) SE Runtime Environment (build 1.8.0_181-b13)
Java HotSpot(TM) 64-Bit Server VM (build 25.181-b13, mixed mode)

下面是下载安装Hadoop,选择的是2.9.1版本:

~$ wget http://www.us.apache.org/dist/hadoop/common/hadoop-2.9.1/hadoop-2.9.1.tar.gz
~$ tar -xzf hadoop-2.9.1.tar.gz
~$ sudo echo "export HADOOP_HOME=$PWD/hadoop-2.9.1"
~$ sudo echo "export HADOOP_HOME=$PWD/hadoop-2.9.1" > /etc/profile.d/hadoop.sh
~$ sudo echo "PATH=$PATH:$HADOOP_HOME/bin" > /etc/profile.d/hadoop.sh
~$ . /etc/profile

#test
~$ hadoop dfs -ls /
DEPRECATED: Use of this script to execute hdfs command is deprecated.
Instead use the hdfs command for it.

Found 26 items
drwxr-xr-x   - root root       4096 2018-07-29 18:13 /bin
drwxr-xr-x   - root root       4096 2018-07-29 18:14 /boot
drwxrwxr-x   - root root       4096 2018-07-29 17:49 /cdrom
drwxr-xr-x   - root root       3860 2018-07-29 18:26 /dev
drwxr-xr-x   - root root      12288 2018-07-29 19:11 /etc
drwxr-xr-x   - root root       4096 2018-07-29 17:53 /home
...

最后就是安装Hive了:

~$ wget http://archive.apache.org/dist/hive/hive-2.3.3/apache-hive-2.3.3-bin.tar.gz
~$ tar -xzf apache-hive-2.3.3-bin.tar.gz
~$ sudo mkdir -p /user/hive/warehouse
~$ sudo chmod a+rwx /user/hive/warehouse
#设置环境变量

相关文章

  • Hive环境搭建

    Hive的安装需要提前安装Hadoop和MySQL,Hadoop的安装请参考Hadoop环境搭建,下面是MySQL...

  • Centos7上安装Hive-1.2.2

    安装Hive时默认已经安装好MySQL和Hadoop集群。 下载hive-1.2.2安装包: 国内镜像:https...

  • HIVE安装指南

    for my honey! 1、前言 安装hive前提是要先安装hadoop集群,并且hive只需要再hadoop...

  • Hive安装教程

    先安装好hadoop,再安装Hive 下载地址Index of /dist/hive/hive-3.1.2 (ap...

  • Hive的安装与配置

    一、安装与配置hive 安装hive之前需要到官网查询hive与Hadoop版本的兼容性。这里我所选的hive和H...

  • Hive3整合Hadoop3的安装配置

    前言 安装hive之前必须先安装hadoop并启动hdfs和yarn,我这边hadoop安装版本是3.2.2, 安...

  • Hive 安装

    前提已安装mysql和hadoop 一、下载、解压hive apache-hive-2.3.3-bin.tar.g...

  • Hive2.3.4安装[hadoop完全分布式中]

    一、安装Hadoop Hive运行在Hadoop环境之上,因此需要hadoop环境,本次在安装在hadoop完全分...

  • Hive 安装

    安装 Hadoop 集群 参考 Docker Hadoop 集群搭建 下载 Hive Hive下载地址本实例下载版...

  • CentOS7设置tomcat开机自启动

    安装jdk 参考《在CentOS7上安装Hadoop和Hive》和《Docker安装tomcat服务》,安装jdk...

网友评论

      本文标题:安装Hadoop 和 Hive

      本文链接:https://www.haomeiwen.com/subject/vkugmftx.html