MongoDB学习记录

时间:2022-02-15 07:19:42

一、操作符

"$lt"       :"<"
"$lte" :"<="
"$gt" :">"
"$gte" :">="
"$ne" :"!="
"$in" :查询匹配指定条件值的文档;
"$nin" :查询不匹配指定条件值的文档;
"$or" :或查询

如果你熟悉常规的 SQL 数据,通过下表可以更好的理解 MongoDB 的条件语句查询:


操作 格式 范例 RDBMS中的类似语句
等于 {<key>:<value>} db.col.find({"by":"菜鸟教程"}).pretty() where by = '菜鸟教程'
小于 {<key>:{$lt:<value>}} db.col.find({"likes":{$lt:50}}).pretty() where likes < 50
小于或等于 {<key>:{$lte:<value>}} db.col.find({"likes":{$lte:50}}).pretty() where likes <= 50
大于 {<key>:{$gt:<value>}} db.col.find({"likes":{$gt:50}}).pretty() where likes > 50
大于或等于 {<key>:{$gte:<value>}} db.col.find({"likes":{$gte:50}}).pretty() where likes >= 50
不等于 {<key>:{$ne:<value>}} db.col.find({"likes":{$ne:50}}).pretty() where likes != 50

 
MongoDB 查询文档

二、链式操作

append方法:尤其适用于日期等区间查询条件。

三、一些基本操作

db.createCollection('user');  --创建表
db.getCollection('user').remove({'_id':1});  --删除记录
db.getCollection('user').ensureIndex({"email":1});  --新建索引
db.getCollection('user').insert({  --插入记录        
"_id" : 1,
"email" : "xxx@mtime.com",
"name" : "哈哈",
"salt" : "5927eb03f6ee9428bc55aa0d",
"pwd" : "121212",
"admin" : true,
"roles" : [

],
"subjects" : [
1,
2,
3,
4
],
"status" : 1,
"muser" : 1,
"mtime" : ISODate("2017-07-10T01:21:19.359Z")
}
);

--修改记录

db.getCollection('language').update({},{$set:{muser:5,mtime:new Date()}},false,true);
db.getCollection('language').update({},{$unset:{'modifyTime':''}},false, true); --删除列
db.getCollection('language_pack').update({},{$set:{modifyUser:5,modifyTime:new Date()}},false,true);

db.getCollection('activity').update({_id:25}, {$set: {status:2}}, {multi: true});

创建复合唯一索引

db.video.createIndex({source_type:1,source:1,video_id:1,key_word:1},{name:'idx_source_type_source_video_id_key_word',unique:true});

--分组聚合

管道的概念

管道在Unix和Linux中一般用于将当前命令的输出结果作为下一个命令的参数。

MongoDB的聚合管道将MongoDB文档在一个管道处理完毕后将结果传递给下一个管道处理。管道操作是可以重复的。

表达式:处理输入文档并输出。表达式是无状态的,只能用于计算当前聚合管道的文档,不能处理其它的文档。

这里我们介绍一下聚合框架中常用的几个操作:

  • $project:修改输入文档的结构。可以用来重命名、增加或删除域,也可以用于创建计算结果以及嵌套文档。
  • $match:用于过滤数据,只输出符合条件的文档。$match使用MongoDB的标准查询操作。
  • $limit:用来限制MongoDB聚合管道返回的文档数。
  • $skip:在聚合管道中跳过指定数量的文档,并返回余下的文档。
  • $unwind:将文档中的某一个数组类型字段拆分成多条,每条包含数组中的一个值。
  • $group:将集合中的文档分组,可用于统计结果。
  • $sort:将输入文档排序后输出。
  • $geoNear:输出接近某一地理位置的有序文档。
db.getCollection('video').aggregate([
{ $group: { _id : '$source', count: { $sum : 1 } } },
{ $match: { count: { $gt : 1} } }
])

db.getCollection('video').aggregate([
  {$project:{source : 1, source_type : 1,video_id:1,enter_time:1}},
  {$match: {source:2,enter_time:{"$gte":ISODate('2020-03-22 07:42:58.675') , "$lt":ISODate('2020-05-22 19:00:00.141') },can_capture:{$ne:1}}},
  {$group: { _id: {source : '$source', source_type : '$source_type',video_id:'$video_id'}, count: { $sum: 1 } }},
  {$sort:{video_id:1}},
  {$skip: 0 },
  {$limit: 10 }
]);

注意:$peoject中,1-包含,0-不包含,_id 字段默认为包含

--查询与删除重复数据

db.video.aggregate([{
$group: {
_id: {
source: '$source',
source_type: '$source_type',
video_id: '$video_id',
key_word: '$key_word'
},
count: {
$sum: 1
},
dups: {
$addToSet: '$_id'
}
}
}, {
$match: {
count: {
$gt: 1
}
}
}]).forEach(function(doc) {
doc.dups.shift();
db.video.remove({
_id: {
$in: doc.dups
}
});
})

按日期分组统计

{
"collection": "video",
"aggregate": [
{
"$match": {
"enter_time": {
"$gte": {
"$humanTime": "{{ StartDate }}"
},
"$lt": {
"$humanTime": "{{ EndDate }}"
}
}
}
},
{
"$group": {
"_id": {
"$dateToString": {
"format": "%Y-%m-%d",
"date": "$enter_time",
"timezone": "+0800"
}
},
"count": {
"$sum": 1
}
}
}
]
}

日期条件查询

db.video_comment_push_log.find({"source_type":4,"source":4}).sort({"_id":-1}).limit(2);

db.video_comment.find({"source_type":4,"source":4,"enter_time":{"$gte":ISODate('2020-04-22 07:42:58.675') , "$lt":ISODate('2020-04-22 19:00:00.141') }}).count();

db.video_comment.find({"source_type":4,"source":4}).sort({"enter_time":-1}).limit(100);

db.video_comment.count({"source_type":4,"source":4});

back

db.video_comment_push_log.find({"source_type":7,"source":2}).sort({"_id":-1}).limit(20);

db.video_comment.find({"source_type":4,"source":4,"enter_time":{"$gte":ISODate('2020-04-22 03:00:00.114') , "$lt":ISODate('2020-04-22 05:00:00.111') }}).count();

db.video_comment.find({"source_type":4,"source":4}).sort({"enter_time":-1}).limit(100);

db.video_comment.count({"source_type":4,"source":4});

db.video_push_log.find({"source_type":71,"source":2}).sort({"_id":-1}).limit(20);

db.video.count({"source_type":4,"source":4,"enter_time":{"$gte":ISODate('2020-04-22 17:00:00.136') , "$lt":ISODate('2020-04-23 06:00:00.098') }});

db.teleplay_episode.count({"source_type":7,"source":2,"enter_time":{"$gte":ISODate('2020-04-21 00:00:00.208') , "$lt":ISODate('2020-04-21 16:00:00.249') }});

db.teleplay_comment.count({"source_type":7,"source":2,"enter_time":{"$gte":ISODate('1970-01-01 00:00:00.001') , "$lt":ISODate('2020-04-22 06:00:00.156') }});

redash查询mongo

{
"collection":"series_top_list",
"query":{"code":"tengxunshipin"},
"$sort": [{"name": "ranking","direction": 1}]
}
{
"collection":"risk_score",
"aggregate":[
{"$group":{"_id":"$udid", "count":{"$sum":1}}},
{"$match":{"count":{"$gt":1}}},
{"$sort": [{"name": "count","direction": -1}]}
]
}

参考资料:

MongoDB教程

mongoDB document

MongoDB 入门

mongodb_查询操作使用_条件查询、where子句等

MongoDB学习笔记(查询)

MongoDB 查询文档

MongoDB 排序

MongoDB 聚合

MongoDB学习笔记-数据格式及数据类型

mongodb 格式化时间

Mongodb聚合框架Aggregate - 时间戳转时间聚合分组统计实现

mongoDB——java操作mongodb文档

mongodb-java-driver基本用法

MongoDB Java Driver

Mongo中append方法使用

学习MongoDB-应用举例(利用java操作MongoDB)

NoSQL 之 Morphia 操作 MongoDB

MongoDB 创建索引的语法

MongoDB查询和去除重复数据

MongoDB查询大于某个时间,小于某个时间,在某一段时间范围

mongoTemplate.aggregate()聚合查询

mongoTemplate.aggregate() 聚合查询,关联查询

mongoTemplate 聚合分组统计,aggregate分页

MongoDB批量更新和批量插入的方式

mongoDB-Criteria

mongo使用小记0之Query和Criteria查询语句

关于mongoDB使用java实现高级查询query参数的组装

MongoTemplate复合条件查询