hadoop

作者: 初夏时的猫 | 来源:发表于2021-12-08 20:16 被阅读0次

一 目录结构

1.bin:存放操作hadoop相关服务的脚本(hdfs;yarn;mapred)

2.sbin:存放启动/停止hadoop相关服务的脚本(hdfs;yarn;historyserver)

3.etc:存放Hadoop的配置文件。(常用配置:core;yarn;mapred;hdfs)

4.share:存放hadoop的jar包、文档和官方案例

5.lib:存放本地库(对数据进行压缩解压)

二参数的优先级

客户端代码配置>classpath配置>服务器的自定义配置(xxx-site.xml)>默认配置(xxx-default.xml)

error:

启动hdfs /tmp pid无权限
chmod -R 777 /tmp
sudo chmod 755 hsperfdata_*(不设置jps失效)
hdfs dfsadmin -refreshNodes 刷新namenode

相关文章

网友评论

      本文标题:hadoop

      本文链接:https://www.haomeiwen.com/subject/bzotfrtx.html