上一篇文章我们安装了虚拟机以及linux操作系统,接下来就要安装在操作系统上运作的大数据核心hadoop分布式系统基础架构!Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS,Hadoop的框架最核心的设计就是:HDFS和MapReduce:HDFS为海量的数据提供了存储,而MapReduce为海量的数据提供了计算,因此安装完hadoop以后我们可以进行hdfs文件存储、访问,也可以进行mapreduce实践操作,真正体验户在不了解分布式底层细节的情况下,开发分布式程序,充分利用集群的威力进行高速运算和存储。
首先要明白:hadoop需要以下两个软件才能进行搭建
hadoop-2.6.1.tar.gz
jdk-8u172-linux-x64.tar.gz
本文我们先安装java jdk1.8.0
一、设置共享文件夹
安装vmware tools,在虚拟机中版本更新里面选取安装即可,若不成功,按如下安装:
mount /dev/cdrom/media 加载文件系统到指定的加载点,常用于挂在cdrom,使我们可以访问cdrom中的数据;
tar xvzf VmwareTools-9.6.2-/688356.tar.gz将安装文件夹拷贝至自己的目录中并解压;
./vmware-install.pl进入解压好的目录后运行此安装命令;
vmware-hgfsclient查看共享目录此时应显示共享目录share-folder;
vmhgfs-fuse .host:/ /mnt/hgfs挂载目录;
cd /mnt/hgfs/share-folser进入目录。
二、安装jdk1.8
从共享目录拷贝至安装目录并解压:
cp jdk-8u172-linux-x64.tar.gz /usr/local/src
tar xvzf jdk-8u172-linux-x64.tar.gz
设置环境变量
vim ~/.bashrc
添加java路径如下:
#java
export JAVA_HOME=/usr/local/src/jdk1.8.0_172
export CLASSPATH=.:CLASSPATH: CLASSPATH:CLASSPATH:JAVA_HOME/lib
export PATH=PATH: PATH:PATH:JAVA_HOME/bin
检查是否安装成功
java 运行java;
which java 查看java信息;
java -version 查看java版本。
拷贝解压包至slave1、slave2中并设置.bashrc文件
scp -rp jdk1.8.0-172 192.168.198.22:/usr/local/src/
scp -rp jdk1.8.0-172 192.168.198.23:/usr/local/src/
.bashrc文件配置和master中一样!
分别检查三台机器都能运行java
至此java安装完成!
三、先安装一些依赖包
yum -y update #更新yum包
yum install -y vim
yum install -y net-tools
yum install -y gcc
yum install -y prel
yum install -y kernel-headers
此篇暂到这里,谢谢阅读,下一篇继续介绍安装。
欢迎关注:【大数据学习笔记】个人公众号,一起交流学习!感谢指导!
---------------------
作者:滚滚红尘125
来源:CSDN
原文:https://blog.csdn.net/weixin_42385668/article/details/88431308
版权声明:本文为博主原创文章,转载请附上博文链接!
网友评论