数据之始--初窥Hadoop

天下熙熙，皆为利来，天下攘攘，皆为利往....趁着大数据的火热，本人也开始了数据之路，以此记录学习的历程，希望能大势面前分一碗小汤......

Hadoop的简介在百度一搜一大堆，再贴在这里未免有凑字数之嫌，所以就不展开说明，因此就从Hadoop的单机模式安装开始：
注：此文是本人在多方尝试后得出的结果，和网上的方法略有出入，因此，若读者们在安装时出现错误，请多加思考，毕竟不是每篇文章都适合每个人!!

所用工具 Centos7、jdk8、winscp、putty

首先 当然是安装jdk和配置环境变量，虽然网上不少文章提及，但是本人还是贴出来，以作加深印象之用

在官网下载Linux版本的jdk8

官网下载

在/usr/目录下创建java目录

[root@localhost ~]# mkdir/usr/java
[root@localhost ~]# cd /usr/java

用winscp把压缩包拉到java文件夹里，解压
[root@localhost ~]# tar -zxvf jdk-8u161-linux-x64.tar.gz

配置jdk环境变量
[root@localhost ~]# vim /etc/profile

文件中添加以上代码

让修改生效
[root@localhost ~]# source /etc/profile

验证jdk是否已安装
[root@localhost java]# java -version

上图即为成功

添加hadoop用户
进入管理员用户
[root@localhost java]# su

添加Hadoop用户
[root@localhost java]# useradd hadoop

设置密码
[root@localhost java]# passwd hadoop

切换hadoop用户
[root@localhost java]# su hadoop

配置ssh免密登录

[hadoop@localhost java]# ssh-keygen -t rsa    （一路回车）
[hadoop@localhost java]# cat .ssh/id_rsa.pub >> .ssh/authorized_keys
[hadoop@localhost java]# chmod 600 .ssh/authorized_keys 

下载hadoop
[hadoop@localhost java]# wget http://labfile.oss.aliyuncs.com/hadoop-2.6.0.tar.gz

（此时，hadoop压缩包放在/home/hadoop/ 文件夹下）
解压压缩包
[hadoop@localhost java]# tar zxvf hadoop-2.6.0.tar.gz

在将解压后的文件放到新的文件夹hdfs下（可不创建，只是为了方便）

[hadoop@localhost java]# mv hadoop-2.6.0 /home/hadoop/hdfs 
（若原来有同名文件夹，先删除 [hadoop@localhost java]# rm -r /home/hadoop/hdfs）
[hadoop@localhost java]# chmod 777 /home/hadoop/hdfs

配置 hadoop
进入管理员用户
[hadoop@localhost java]# su
同样修改/etc/profile/ 文件
[root@localhost java]# vim /etc/profile/
最终结果是

最终结果

测试hadoop 配置

[root@localhost java]# cd /home/hadoop/hdfs
[root@localhost hdfs]# mkdir ./input  
[root@localhost hdfs]# cp ./etc/protocols ./input   # 将此文件作为输入文件  
[root@localhost hdfs]# ./bin/hadoop jar ./share/hadoop/mapreduce/sources/hadoop-mapreduce-examples-2.6.0-sources.jar wordcount input output  
[root@localhost hdfs]# cat ./output/*          # 查看运行结果

成功运行，则说明配置成功。

至此，单机安装成功

本人初学，若此文有不对的地方，请不吝指正
（转载请指明出处）