美文网首页Spark知识点
reduceByKey和countByKey区别

reduceByKey和countByKey区别

作者: 0_9f3a | 来源:发表于2018-01-02 20:46 被阅读0次

    相同点:

    两者都会根据key来分组

    不同点:
    reduceByKey会根据用户传入的聚合逻辑对数组内的数据进行聚合,countByKey不需要用户传入聚合逻辑,他是直接对数组内的数据进行统计记录数

    reduceByKey是transormation类算子 countByKey是Action类算子

    相关文章

      网友评论

        本文标题:reduceByKey和countByKey区别

        本文链接:https://www.haomeiwen.com/subject/hhgqnxtx.html