《菊花》
秋丛绕舍似陶家,遍绕篱边日渐斜。
不是花中偏爱菊,此花开尽更无花
说明:此系列文章是为了记录本人学习Hadoop过程,以此来加深对Hadoop的理解,本系列教程完全是入门系列,希望无意阅读到的道友莫要嘲讽!!!
基础环境搭建主要分为三部分说明:
三、Hadoop环境搭建
说明:经过前面两步的努力,现在可以通过我们创建的Linux系统部署我们想要发布的任何服务,接下来就让我们一起进入Hadoop环境的搭建吧!!!
>> 创建Hadoop用户
1.为了避免ROOT用户删库跑路事件,我们首先创建独立用户hadoop(注:此步骤非必需)
登录ROOT用户后执行如下命令:useradd hadoop
添加用户-12.设置新建用户hadoop密码-执行如下命令:passwd hadoop
设置密码-23.设置新建用户hadoop执行权限-执行如下命令:
命令-3说明:此处修改文件是通过VI命令,不熟悉的道友请自行百度
修改权限-44.切换Hadoop用户-执行如下命令:
>> su hadoop -- 切换hadoop用户
>> cd -- 进入hadoop用户家目录
切换Hadoop用户-5 5.创建Hadoop安装目录-执行如下命令:
>> mkdir my_install_software
创建安装目录-66.配置JDK环境-执行如下命令:
>> 下载JDK : JDK下载地址 可以执行命令:wget http://download.oracle.com/otn-pub/java/jdk/8u181-b13/96a7b8442fe848ef90c96a2fad6ed6d1/jdk-8u181-linux-x64.tar.gz?AuthParam=1532349899_0dee65e7970f1e0829d9ec59ec20798d
JDK下载-7>> 解压JDK压缩包-执行如下命令 :tar -zxvf jdk-8u162-linux-x64.tar.gz
JDK解压-8
>> 配置JAVA环境变量并刷新配置文件-执行如下命令 :
>> 安装SSH客户端-执行如下命令 :
安装SSH客户端-10>> Hadoop环境配置-执行如下命令 :
6.1.下载Hadoop安装包: Hadoop下载地址 可以通过命令 wget http://archive.apache.org/dist/hadoop/common/hadoop-2.8.3/hadoop-2.8.3.tar.gz
Hadoop下载-116.2.解压Hadoop压缩包-命令:tar -zxvf hadoop-2.8.3/hadoop-2.8.3.tar.gz
Hadoop解压-126.3.Hadoop配置文件- hadoop-env.sh -JAVA_HOME 修改:
>> cd /home/hadoop/my_install_software/hadoop-2.8.3/etc/hadoop -- Hadoop配置文件目录
>> vi hadoop-env.sh
Hadoop-JAVA_HOME-136.4.Hadoop配置文件- core-site.xml - 修改:vi core-site.xml
core-site-146.5.Hadoop配置文件- hdfs-site.xml - 修改:vi hdfs-site.xml
hdfs-site-156.6.Hadoop配置文件- mapred-site.xml - 修改:vi mapred-site.xml
说明:由于 mapred-site.xml 默认是不存在的我们需要执行如下命令创建
创建mapred-site-17 mapred-site-186.7.Hadoop配置文件- yarn-site.xml - 修改:vi yarn-site.xml
yarn-site-197.格式化Hadoop环境-执行如下命令:
Hadoop格式化-208.启动Hadoop-执行如下命令:
启动Hadoop-219.查看Hadoop是否启动成功-执行如下命令:JPS
说明:如果出现如下五个服务即表示启动成功
启动验证-2210.Hadoop服务验证:访问 192.168.2.14:8088 如果出现如下界面表示服务启动成功
Hadoop服务访问
网友评论