- 62
- 0
现有一个企业表company,里面有100万的数据,对应一个员工表user,每个企业ID company_id对应0到多条user数据,员工表中有300万条数据;具体结构如下:
db.company.find()
{
"_id" : ObjectId("5a4356fcac671b55711ba0f3"),
"name":"某某企业"
"create_time":Timestamp(1510644421, 1)
}
......
db.user.find()
{
"_id" : ObjectId("5a4356fcac671b55711ba0f4"),
"company_id":ObjectId("5a4356fcac671b55711ba0f3"),
"status":0,
"username":"小刘"
},
{
"_id" : ObjectId("5a4356fcac671b55711ba0f4"),
"company_id":ObjectId("5a4356fcac671b55711ba0f3"),
"status":1,
"username":"小马"
}
要找出所有没有员工的企业,包括company表在user里没有对应数据的,以及对应status为0的数据,每页显示十条,应该如何查找效率最快?
尝试过先找出user表里status里为1的company_id去重后取出一个数组,再用company表的_id去notin这个数组,但是数据里超过百万后,查询需要7s以上。
db.user.aggregate(
{'$match':{'status':1}},
{'$group':{'_id':'$company_id'}}
);
请问能够如何优化吗
- 共 0 条
- 全部回答
-
爱人想离我怎挽 普通会员 1楼
在 MongoDB 中,如果你想查询一个百万级别的数据并进行去重,可以使用以下的查询策略:
- 使用
聚合查询:MongoDB 提供了聚合查询功能,可以对数据进行更复杂的数据处理和分析。如果你只需要进行去重,那么可以使用mapReduce的unwind操作,将unwind需要处理的值拆分成多个值,然后进行去重。
javascript db.collection.aggregate([ { $unwind: "$unwind" }, { $group: { _id: "$unwind._id", uniqueValues: { $push: "$$unwind" }, } } ])- 使用
Cursor:如果你需要对百万级别的数据进行排序和分组,那么可以使用Cursor。Cursor是 MongoDB 的一种数据结构,可以提供对数据的快速访问和排序。
javascript db.collection.find().sort({ age: -1 }).cursor()-
使用索引:MongoDB 提供了多种索引类型,包括
text、int32、bool等,这些索引可以大大提高查询性能。如果你的数据主要以文本形式存在,那么可以考虑使用text索引。 -
使用
$group和$sort:如果你的数据主要是以表格形式存在,那么可以考虑使用$group和$sort进行分组和排序。$group和$sort是 MongoDB 的两个强大的聚合函数,可以让你对数据进行复杂的聚合和排序。
总的来说,选择哪种查询策略,主要取决于你的具体需求和数据的特性。如果你的数据主要是以表格形式存在,那么
$group和$sort是更好的选择。如果你的数据主要是以文本形式存在,那么$unwind或mapReduce的unwind操作可能更适合你。 - 使用
- 扫一扫访问手机版
回答动态

- 神奇的四哥:发布了悬赏问题阿里云幻兽帕鲁服务器更新之后。服务器里面有部分玩家要重新创建角色是怎么回事啊?预计能赚取 0积分收益

- 神奇的四哥:发布了悬赏问题函数计算不同地域的是不能用内网吧?预计能赚取 0积分收益

- 神奇的四哥:发布了悬赏问题ARMS可以创建多个应用嘛?预计能赚取 0积分收益

- 神奇的四哥:发布了悬赏问题在ARMS如何申请加入公测呀?预计能赚取 0积分收益

- 神奇的四哥:发布了悬赏问题前端小程序接入这个arms具体是如何接入监控的,这个init方法在哪里进行添加?预计能赚取 0积分收益

- 神奇的四哥:发布了悬赏问题阿里云幻兽帕鲁服务器刚到期,是不是就不能再导出存档了呢?预计能赚取 0积分收益

- 神奇的四哥:发布了悬赏问题阿里云幻兽帕鲁服务器的游戏版本不兼容 尝试更新怎么解决?预计能赚取 0积分收益

- 神奇的四哥:发布了悬赏问题阿里云幻兽帕鲁服务器服务器升级以后 就链接不上了,怎么办?预计能赚取 0积分收益

- 神奇的四哥:发布了悬赏问题阿里云幻兽帕鲁服务器转移以后服务器进不去了,怎么解决?预计能赚取 0积分收益

- 神奇的四哥:发布了悬赏问题阿里云幻兽帕鲁服务器修改参数后游戏进入不了,是什么情况?预计能赚取 0积分收益
- 回到顶部
- 回到顶部
