美文网首页
有10个文件,每个文件1G,每个文件的每一行存放的都是用户的qu

有10个文件,每个文件1G,每个文件的每一行存放的都是用户的qu

作者: qmss | 来源:发表于2016-06-28 22:44 被阅读0次

    将所有查询进行hash(query)%10,映射成新的10个文件,大约每个1GB。对每个文件使用hash_map统计频率并排序,然后对10个结果再归并排序。

    相关文章

      网友评论

          本文标题:有10个文件,每个文件1G,每个文件的每一行存放的都是用户的qu

          本文链接:https://www.haomeiwen.com/subject/dbgtjttx.html