美文网首页hbase&hadoop
Hbase 的小合并大合并

Hbase 的小合并大合并

作者: 大数据修行 | 来源:发表于2019-03-28 13:03 被阅读0次

    compaction从store上面,选取一些HFile进行合并。把key-value按顺序排列写入到新的文件下面,取代之前的文件提供数据。分为minorcompaction和majorcompaction。
    1.minorcompaction
    较小的,相邻的HFile的合并
    2.majorcompaction
    一个store里面的所有HFile的合并,合并成一个,会清理三类数据:
    1.已经删除的数据
    2.ttl过期的数据
    3.版本超过限定的数据

    相关文章

      网友评论

        本文标题:Hbase 的小合并大合并

        本文链接:https://www.haomeiwen.com/subject/uhrtbqtx.html