HDFS

作者: 小鑫_2bc0 | 来源:发表于2019-07-15 15:51 被阅读0次

    HDFS写入过程:

    1.请求写一个文件,响应可以上传

    2.请求传第一个块,返回一组节点(机架感知)

    3.传的时候,按照package下入本地缓存。每传一个packet会放入一个应答队列等待应答。

    机架感知:

    第一个副本在Client所处的节点上。如果客户端在集群外,随机选一个。

    第二个副本和第一个副本位于相同机架,随机节点。

    第三个副本位于不同机架,随机节点。

    SecondaryNameNode:

    第一次启动NameNode格式化后,创建fsimage和edits文件。

    SecondaryNameNode每隔一小时执行一次 ||  一分钟检查一次操作次数,当操作次数达到1百万时   执行一次checkpoint。

    相关文章

      网友评论

          本文标题:HDFS

          本文链接:https://www.haomeiwen.com/subject/afsnkctx.html