美文网首页
mongodb collection 全局遍历collectio

mongodb collection 全局遍历collectio

作者: 邪恶的奥伯伦 | 来源:发表于2019-02-22 10:25 被阅读0次

有时需要做统计, 需要全表遍历,

在数据库里直接用count 拿到 目标collection的数据是28997条
如果没用fields过滤, 只会返回11000 ,一直想不明白
如果把其中的一个头像url字段去掉 会拿到22791

发现问题是fileds 需要过滤, 不能全拿出来 不然数据太大了, 只会返回一部分records, 因为达到了某种传输上限

所以在类似做全表遍历时 一定要用好fields.


mongo 每一次返回有一个最大数据量 10M 或者1M,
暂时考虑用skip + limits 来遍历大数据

相关文章

  • mongodb collection 全局遍历collectio

    有时需要做统计, 需要全表遍历, 在数据库里直接用count 拿到 目标collection的数据是28997条如...

  • 总结

    #阿里 一面集合,LinkHashMap ArrayList 区别Set Collection collectio...

  • collections相关的数据结构及API

    1、列举几个Java Collection类库中的常用类 此处应该有Collection类图。 Collectio...

  • 常用数据结构的区别

    Java中几种常用的数据结构主要分为Collection和Map两个接口 Collection Collectio...

  • java-Collection

    首先,我们对Collection进行说明。下面先看看Collection的一些框架类的关系图: Collectio...

  • Mongodb索引详解

    为什么要使用索引? 当我们在使用mongodb查询操作的时候,每次都需要遍历整个collection去查找匹配条件...

  • java集合类

    三个接口 iterator(迭代) ,collection(继承接口iterator),Map collectio...

  • 【JAVA】集合框架

    集合框架 Collection 集合 -- 存储元素集合 Map 图 -- 存储键值对数据 Collectio...

  • [转载]solr的collection,shard,replic

    一、collection 1.由多个cores组成一个逻辑索引叫做一个collection。一个collectio...

  • solr的collection,shard,replica,co

    一.collection 1.由多个cores组成一个逻辑索引叫做一个collection。一个collectio...

网友评论

      本文标题:mongodb collection 全局遍历collectio

      本文链接:https://www.haomeiwen.com/subject/pxddyqtx.html