美文网首页
hadoop集群配置

hadoop集群配置

作者: Nenezsnp | 来源:发表于2023-04-12 15:11 被阅读0次

仅以此篇记录虚拟机linux安装hadoop3.3.4的过程,以昨日后学习之用
本篇是为了安装hive,此篇文章介绍安装hadoop集群配置+jdk配置,本篇文章只会列出文章大纲,因为相关作者写的太详细了,按着步骤来就行。

一.开始准备

原文链接:https://blog.csdn.net/Python_XTyyds/article/details/128246797

二.Hadoop部署模式

原文链接:https://blog.csdn.net/Python_XTyyds/article/details/128248861

三.Hadoop集群配置

原文链接:https://blog.csdn.net/Python_XTyyds/article/details/128277601

四.Hadoop集群测试

原文链接:https://blog.csdn.net/Python_XTyyds/article/details/128277628

文章主要的指令如下:

  • 将master虚拟机上的hadoop发送到slave1虚拟机上
scp -r $HADOOP_HOME root@slave1:$HADOOP_HOME

个人百度云下载链接地址:

mysql-5.7.27
链接:https://pan.baidu.com/s/1AIhTd-ppwYKWR0LB37Z1zQ 提取码:x6SX 

hadoop-3.3.4
链接:https://pan.baidu.com/s/1aGZ9SmmJcEoerxeDt5KvaQ 提取码:11x6 

jdk-8u231
链接:https://pan.baidu.com/s/1H7WzccdJf-fcMUj-2Fxr-A 提取码:66c5 

mysql-connection8.0.32
链接:https://pan.baidu.com/s/14g7JxOONtYWvnVgcbGbz3A 提取码:bLrs 

zookeepeer3.4.10
链接:https://pan.baidu.com/s/1eR0Lm_LezJsq9RmDl354YQ 提取码:B46G 

有坑:后续hive启动hiveserver2缺少配置需要加上

#core-site.xml添加
    <property>
        <name>hadoop.proxyuser.root.hosts</name>
        <value>*</value>
    </property>
    <property>
        <name>hadoop.proxyuser.root.groups</name>
        <value>*</value>
    </property>

相关文章

网友评论

      本文标题:hadoop集群配置

      本文链接:https://www.haomeiwen.com/subject/shhoddtx.html