记录一下实验过程中mongodb常用的操作语句

一、查询重复数据

# 方法一
db.集合名称.aggregate(
    {'$group':{
        '_id': {'查询重复字段名': '$查询重复字段名'},
        'uniqueIds': {'$addToSet': '$_id'},
        'count' : {'$sum': 1}
    }},
    {'$match': {
        'count': {'$gt': 1}
    }}
)

# 方法二
db.集合名称.aggregate(
    {"$group" : { "_id": "$查询重复字段名", "count": { "$sum": 1 } } },
    {"$match": {"_id" :{ "$ne" : null } , "count" : {"$gt": 1} } }, 
    {"$project": {"查询重复字段名" : "$_id", "_id" : 0} }
)

二、删除重复数据

db.表名.aggregate([
    {
        $group: { _id: {字段1: '$字段1', 字段2: '$字段2'},count: {$sum: 1},dups: {$addToSet: '$_id'}}
    },
    {
        $match: {count: {$gt: 1}}
    }
],{
    allowDiskUse: true
}).forEach(function(doc){
    doc.dups.shift();
    db.表名.remove({_id: {$in: doc.dups}});
})

解析：
1.首先用aggregate将重复字段取出。根据字段1，字段2分组并统计数量，addToSet在返回结果数组中增加_id字段
2.使用gt：greater than
3.doc.dups.shift();表示从数组第一个值开始删除；作用是踢除重复数据其中一个_id，让后面的删除语句不会删除所有数据
4.使用forEach循环根据_id删除数据

Tips：
1.数据量大的时候需要添加allowDiskUse: true，否则会报错。
2.addToSet返回，不会修改数组。

三、给所有数据增加字段

db.表.update(
    // query 
    {
        //"key" : "value"
    },
    
    // update 
    {
        $set:{"字段名":""}
    },
    
    // options 
    {
        "multi" : true,  // update only one document 
        "upsert" : false  // insert a new document, if no existing document match the query 
    }
);

四、更新某个字段

db.user_info_test.update( {"uid":"6727341136"}, {$set:{"follow":['sdsd','dsdsd']}})

set的话会直接将新的记录覆盖原有的记录，而不是在原有记录上做修改。

五、将mongodb的集合导出为csv

1、dos中进入mongodb的bin目录
2、mongoexport -d 数据库名 -c 集合名 --type=csv --fields 要导出的字段 -o 导出路径

TIM图片20200322121440.png

注意：

1、字段和字段之间用逗号分隔开就可以，不能额外添加空格。
2、此处我将字段用双引号括起来了，实际上此处也可以不用括号括起来，但是如果字段名本身含有空格的话，则必须用括号括起来。
3、导出的csv中文很可能出现乱码，解决方法：用记事本打开-->另存为-->编码类型选择ANSI-->确定即可。

---持续更新ing---