美文网首页大数据教程大数据 爬虫Python AI Sql玩转大数据
大数据Hadoop 系列教程(一):服务器基础环境

大数据Hadoop 系列教程(一):服务器基础环境

作者: 8ebaaa1b83e3 | 来源:发表于2019-05-16 17:41 被阅读0次

虚拟机linux使用的是centos7操作系统

1. 安装sz rz工具,用于以后用rz sz上传下载文件

yum install -y lrzsz

2. 将原来的yum源配置进行备份

mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base_repo_bak

很多初学者,对大数据的概念都是模糊不清的,大数据是什么,能做什么,学的时候,该按照什么线路去学习,学完往哪方面发展,想深入了解,想学习的同学欢迎加入大数据学习qq群:606859705,(零基础以及进阶的经典实战)与大家分享目前国内最完整的大数据高端实战实用学习流程体系。

3. 用rz命令将CentOS-Base.repo文件上传文件到当前用户的home目录"~"

4. 将上传完成的CentOS-Base.repo文件移动到/etc/yum.repos.d/目录

mv ~/CentOS-Base.repo /etc/yum.repos.d/

5. 删除以前yum配置下的所有缓存数据并根据新的yum源配置新建缓存

yum clean all && yum makecache

6. 更新系统中的一个或多个软件包

yum update -y

7. 安装系统常用软件

yum install -y openssh-server vim gcc gcc-c++ glibc-headers bzip2-devel lzo-devel curl wget openssh-clients zlib-devel autoconf automake cmake libtool openssl-devel fuse-devel snappy-devel telnet unzip zip net-tools.x86_64

8. 关闭防火墙

查看防火墙状态firewall-cmd --state

关闭防火墙systemctl stop firewalld.service

禁止防火墙开机启动 systemctl disable firewalld.service

查看服务是否开机启动 systemctl is-enabled firewalld.service

9. 修改主机名

hostnamectl set-hostname nn1.hadoop

修改完成之后用hostname查看

10. 创建hadoop用户

useradd hadoop

11. 修改hadoop用户密码

用passwd hadoop命令并且输入密码

或者用echo "hadoop666" | passwd --stdin "hadoop"命令直接修改密码

12. 给hadoop用户,配置SSH密钥

sudo us – hadoop 切换到hadoop用户

mkdir ~/.ssh 创建.ssh目录

ssh-keygen -t rsa -f ~/.ssh/id_rsa -P '' 生成ssh公私钥

cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys 输出公钥文件内容并且重新输入到~/.ssh/authorized_keys文件中

chmod 700 ~/.ssh 给~/.ssh文件加上700权限

chmod 600 ~/.ssh/ authorized_keys 给~/.ssh/ authorized_keys加上600权限

13. 关闭selinux

查看关闭状态

/usr/sbin/sestatus -v

关闭方法

vim /etc/selinux/config

把文件里的SELINUX=disabled

重启服务器

reboot

启动之后用

/usr/sbin/sestatus -v 查看selinux的修改状态

14. 安装JDK

用rz命令将jdk-8u73-linux-x64.rpm文件上传文件到当前用户的home目录"~"

用rpm -ivh jdk-8u73-linux-x64.rpm进行安装

执行完上面的命令,一个基础的linux系统就配置好了。然后把这个虚拟机导出,再根据这个导出的虚拟机创建3个linux系统。并用hadoop用户,测试彼此之间是否能进行ssh通信

相关文章

网友评论

    本文标题:大数据Hadoop 系列教程(一):服务器基础环境

    本文链接:https://www.haomeiwen.com/subject/wtcwaqtx.html