美文网首页数据挖掘与机器学习
hadoop全家桶系列1-zookeeper

hadoop全家桶系列1-zookeeper

作者: yunpiao | 来源:发表于2018-08-07 10:54 被阅读103次

    ZooKeeper服务命令

    启动ZK服务: sh bin/zkServer.sh start
    查看ZK服务状态: sh bin/zkServer.sh status
    停止ZK服务: sh bin/zkServer.sh stop
    重启ZK服务: sh bin/zkServer.sh restart

    zk客户端命令

    显示根目录下、文件: ls / 使用 ls 命令来查看当前 ZooKeeper 中所包含的内容
    显示根目录下、文件: ls2 / 查看当前节点数据并能看到更新次数等数据
    创建文件,并设置初始内容: create /zk "test" 创建一个新的 znode节点“ zk ”以及与它关联的字符串
    获取文件内容: get /zk 确认 znode 是否包含我们所创建的字符串
    修改文件内容: set /zk "zkbak" 对 zk 所关联的字符串进行设置
    删除文件: delete /zk 将刚才创建的 znode 删除
    退出客户端: quit
    帮助命令: help

    hadoop 高可用

    执行hdfs zkfc -formatZK 初始化HA的zookeeper信息
    hadoop namenode -format
    在nn1上执行hadoop-daemon.sh start namenode
    在nn2上执行hadoop namenode -bootstrapStandby 同步
    在nn2上执行 hadoop-daemon.sh start namenode
    在nn1和nn2分别启动hadoop-daemon.sh start zkfc,这时两个一个变成active,一个变成standby
    hdfs haadmin -getServiceState 可查看HA状态

    注意HA不能切换是因为nn1和nn2的没有安装fuser
    在nn1和nn2上执行yum -y install psmisc

    改变文件副本数 setrep
    hadoop fs -setrep -R -w 2 /test.txt
    -R 递归改变目录下所有文件的副本数。
    -w 等待副本数调整完毕后返回。可理解为加了这个参数就是阻塞式的了。
    hadoop dfsadmin
    例如:hadoop dfsadmin -report
    dfsadmin命令详解
    -report:查看文件系统的基本信息和统计信息。
    -safemode <enter | leave | get | wait>:安全模式命令。安全模式是NameNode的一种状态,在这种状态下,NameNode不接受对名字空间的更改(只读);不复制或删除块。NameNode在启动时自动进入安全模式,当配置块的最小百分数满足最小副本数的条件时,会自动离开安全模式。enter是进入,leave是离开。

    相关文章

      网友评论

        本文标题:hadoop全家桶系列1-zookeeper

        本文链接:https://www.haomeiwen.com/subject/svfsvftx.html