亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 數(shù)據(jù)庫 > MongoDB > 正文

使用aggregate在MongoDB中查詢重復(fù)數(shù)據(jù)記錄的方法

2020-10-29 18:50:09
字體:
供稿:網(wǎng)友

MongoDB中聚合(aggregate)主要用于處理數(shù)據(jù)(諸如統(tǒng)計平均值,求和等),并返回計算后的數(shù)據(jù)結(jié)果。有點(diǎn)類似sql語句中的 count(*)。

aggregate() 方法

MongoDB中聚合的方法使用aggregate()。

語法

aggregate() 方法的基本語法格式如下所示:

>db.COLLECTION_NAME.aggregate(AGGREGATE_OPERATION)

我們知道,MongoDB屬于文檔型數(shù)據(jù)庫,其存儲的文檔類型都是JSON對象。正是由于這一特性,我們在Node.js中會經(jīng)常使用MongoDB進(jìn)行數(shù)據(jù)的存取。但由于Node.js是異步執(zhí)行的,這就導(dǎo)致我們無法保證每一次的數(shù)據(jù)庫save操作都是原子型的。也就是說,如果客戶端連續(xù)兩次發(fā)起同一事件將數(shù)據(jù)存入數(shù)據(jù)庫,很可能會導(dǎo)致數(shù)據(jù)被重復(fù)保存。高并發(fā)的情況下,哪怕是你在代碼中已經(jīng)做了非常嚴(yán)格的校驗,例如插入數(shù)據(jù)前判斷要保存的數(shù)據(jù)是否已經(jīng)存在,但仍然有可能會出現(xiàn)數(shù)據(jù)被重復(fù)保存的風(fēng)險。因為在異步執(zhí)行中,你沒有辦法保證哪個線程先執(zhí)行,哪個線程后執(zhí)行,客戶端發(fā)起的所有請求并非按我們想象的都是順序執(zhí)行的。一個較好的解決辦法是在Mongo數(shù)據(jù)庫的所有表中創(chuàng)建唯一索引。事實上,MongoDB默認(rèn)會為所有表創(chuàng)建一個_id字段的唯一索引(可以取消)。如果你想在Node.js中通過mongoose.schema來自動創(chuàng)建索引,可以參考下面的代碼:

var mongoose = require('mongoose');var Schema = mongoose.Schema;var customerSchema = new mongoose.Schema({cname: String,cellPhone, String,sender: String,tag: String,behaviour: Number,createTime: {type: Date,default: Date.now},current:{type: Boolean,default: true}}, {versionKey: false});customerSchema.index({cname:1,cellPhone:1,sender:1,tag:1,behaviour:1}, {unique: true});module.exports = mongoose.model('customer', customerSchema); 

  上面的model中我們定義了表customer的結(jié)構(gòu),并通過index()方法在字段cname,cellPhone,sender,tag,behaviour上創(chuàng)建了唯一索引,這樣當(dāng)包含這些字段的重復(fù)數(shù)據(jù)被插入時,數(shù)據(jù)庫會拋出異常。借用mongoose,如果數(shù)據(jù)庫表之前已經(jīng)被創(chuàng)建并且程序正在運(yùn)行中,當(dāng)我們修改model并添加索引,然后重新啟動app,只要有對該model的訪問,mongoose會自動進(jìn)行檢測并創(chuàng)建索引。當(dāng)然,如果數(shù)據(jù)出現(xiàn)重復(fù),則索引創(chuàng)建會失敗。此時我們可以通過在創(chuàng)建索引時添加dropDups選項,讓數(shù)據(jù)庫自動將重復(fù)的數(shù)據(jù)刪除,如:

customerSchema.index({cname:1,cellPhone:1,sender:1,tag:1,behaviour:1}, {unique: true, dropDups: true});

  不過據(jù)MongoDB的官方說明,自3.0以后的版本不再使用該選項,而且也并沒有提供替代的解決辦法。貌似官方不再提供創(chuàng)建索引時自動刪除重復(fù)記錄的功能。那如何才能快速有效地找出重復(fù)的記錄并且刪除呢?首先我們要找出這些記錄,然后通過remove()方法進(jìn)行刪除。下面的查詢語句可以找出給定字段有重復(fù)數(shù)據(jù)的記錄:

db.collection.aggregate([{ $group: { _id: { firstField: "$firstField", secondField: "$secondField" }, uniqueIds: { $addToSet: "$_id" },count: { $sum: 1 } }}, { $match: { count: { $gt: 1 } }}]) 

  替換_id屬性的值以指定你想要進(jìn)行判斷的字段。相應(yīng)地,在Node.js中代碼如下:

var deferred = Q.defer();var group = { firstField: "$firstField", secondField: "$secondField"};model.aggregate().group({_id: group,uniqueIds: {$addToSet: '$_id'},count: {$sum: 1}}).match({ count: {$gt: 1}}).exec(deferred.makeNodeResolver());return deferred.promise; 

上述代碼使用了Q來替換函數(shù)執(zhí)行中的回調(diào)。在Node.js的異步編程中,使用Q來處理回調(diào)是個不錯的選擇。

  下面是返回的結(jié)果:

/* 1 */{"result" : [ {"_id" : {"cellPhone" : "15827577345","actId" : ObjectId("5694565fa50fea7705f01789")},"uniqueIds" : [ ObjectId("569b5d03b3d206f709f97685"), ObjectId("569b5d01b3d206f709f97684")],"count" : 2.0000000000000000}, {"_id" : {"cellPhone" : "18171282716","actId" : ObjectId("566b0d8dc02f61ae18e68e48")},"uniqueIds" : [ ObjectId("566d16e6cf86d12d1abcee8b"), ObjectId("566d16e6cf86d12d1abcee8a")],"count" : 2.0000000000000000}],"ok" : 1.0000000000000000}

  從結(jié)果中可以看到,一共有兩組數(shù)據(jù)相同的記錄,所以返回的result數(shù)組的長度為2。uniqueIds屬性為一個數(shù)組,其中存放了重復(fù)記錄的_id字段的值,通過該值我們可以使用remove()方法來查找并刪除對應(yīng)的數(shù)據(jù)。

發(fā)表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發(fā)表
麻豆视频免费看| 久久久久久久久久久久久夜| 一色桃子av在线| 欧美在线1区| 欧美一级二级三级| 亚洲一区二区自拍偷拍| 日韩av一区二区在线影视| 免费一级电影| 欧美性在线视频| 紧身裙女教师波多野结衣| 国产精品久久久久毛片大屁完整版| 色婷婷久久一区二区三区麻豆| 欧美18—19sex性hd| 欧美做受高潮中文字幕| 一道本一区二区| 四虎影视国产在线视频| 在线观看免费黄色片| 国产99久久久久| 欧美视频一二三区| 污网站在线看| 2022中文字幕| 一区二区视频免费看| 欧美亚洲黄色片| 亚洲精品wwwww| 热re99久久国产精品| 久久久亚洲福利精品午夜| 成人在线观看免费| 日本一道在线观看| 亚洲欧美自拍一区| 国家队第一季免费高清在线观看| 久久成人精品一区二区三区| 国产揄拍国内精品对白| www国产在线| 理论片鲁丝二区爱情网| 美女把尿口扒开让男人桶在线观看| bl动漫在线观看| 国产精品91一区二区| www.噜噜色.com| 欧美调教视频| 丝袜中文在线| 成人日韩欧美| 亚洲国产精品日韩专区av有中文| 香蕉视频国产精品| 亚洲黄色录像片| 本田岬高潮一区二区三区| 久久琪琪电影院| 夜夜操 天天摸| 日韩在线资源| 亚洲va中文在线播放免费| 国产精品吹潮在线观看| 久久66热re国产| 99在线精品视频在线观看| 亚洲精品一区二区三区四区五区| 久久久午夜电影| www.色香蕉| fc2人成共享视频在线观看| 亚洲 小说区 图片区| 狠狠色噜噜狠狠狠狠97| 丝袜足脚交91精品| 亚洲一区日韩精品中文字幕| 老司机精品在线| 免费观看国产成人| 国内精品免费视频| 婷婷五月综合激情| 狠狠色一日本高清视频| 日韩在线播放中文字幕| 亚洲优女在线| 国产综合 伊人色| 亚洲一二三区在线观看| 久久久久久久久亚洲精品| 女人天堂网站| 超碰97国产精品人人cao| 日韩欧美在线影院| 成人在线精品视频| 福利视频一区二区三区四区| 亚洲成人三区| 欧美日韩老妇| 奇米777国产一区国产二区| 欧洲成人一区二区| 97se狠狠狠综合亚洲狠狠| 95视频在线观看| 欧美日韩精品中文字幕一区二区| 亚洲激情国产精品| 国产日韩高清一区二区三区在线| 国产探花在线免费观看| 日韩三级久久| 久久99视频精品| 今天免费高清在线观看国语| 一本大道久久a久久精品综合| 天天做日日爱夜夜爽| 美女视频黄a视频全免费观看| 理论片午午伦夜理片在线播放| 伊甸园亚洲一区| 懂色aⅴ精品一区二区三区蜜月| 国产精品欧美久久久久无广告| 成人午夜电影久久影院| 久久激情免费视频| 免费av片风间由美在线| 亚洲一卡二卡在线| 亚洲第一福利视频| 手机在线观看免费av| 日韩欧美另类一区二区| 在线电影av| 青春有你2免费观看完整版在线播放高清| 亚洲精品激情| 久久久久久久久久久久久久久国产| 免费成人高清在线视频theav| 成人福利免费在线观看| 粉嫩av一区二区三区免费野| 欧洲一区精品| 欧美中文在线视频| 一个人在线视频免费观看www| 黄色三级视频在线观看| 1234区在线观看视频免费| 午夜视频久久久久久| 精品少妇无遮挡毛片| 亚洲男人的天堂在线播放| 亚洲mv在线| 成年人在线看片| 操欧美女人视频| 99免在线观看免费视频高清| 亚洲人亚洲人成电影网站色| a级片在线观看| 国产精品福利电影| 亚洲国产另类久久精品| 天涯成人国产亚洲精品一区av| 国产亚洲精品久久久久久打不开| 成人动漫av| 最新亚洲国产| dj大片免费在线观看| 日本韩国欧美三级| 99蜜桃臀久久久欧美精品网站| 成年网站在线视频网站| 日韩电影毛片| 九九这里只精品视在线99| 国产一区二区在线免费| 亚洲人与黑人屁股眼交| 国产成人一区二区三区电影| 国产视频一区二区在线观看| 国产精品欧美一区二区| 成人私拍视频| 日韩电影在线一区二区三区| 小舞被吸乳羞羞网站视频| 国色天香久久精品国产一区| 国产欧美在线观看免费| 国产精品免费aⅴ片在线观看| 欧美国产激情一区二区三区蜜月| 国产激情无码一区二区三区| 久久精品免视看国产成人| 99成人精品| 成看片vvv222| 国产美女喷水视频| 亚洲人成网站在线播放2019| 精品国产一区二区三区四区在线观看| 毛片在线视频播放| 欧美二区三区| 在线视频欧美一区| 激情综合网av| 亚洲熟妇av一区二区三区| 日韩成人网免费视频| 美女网站视频在线| 欧美成人免费网站| 你真棒插曲来救救我在线观看| 91精品国产色综合久久不卡粉嫩| 国内精品写真在线观看| 免费网站永久免费观看| 口述被爽到呻吟高潮自述| 九九三级毛片| 少妇人妻大乳在线视频| 天天草夜夜草| 欧美日韩免费观看一区=区三区| 免费人成网站在线观看欧美高清| 91av视频免费观看| 日韩三级中文字幕| 欧美色综合天天久久综合精品| 国产尤物视频在线| 久久精品青青大伊人av| 青娱乐在线视频观看| 黄色三级视频在线观看| 99pao成人国产永久免费视频| 日本午夜精品理论片a级app发布| 俺来俺也去www色在线观看| 俺来俺也去www色在线观看| 欧美黄色免费影院| 影音先锋男人每日资源站| 多男操一女视频| 国产调教打屁股xxxx网站| 国产精品一区二区三区免费观看| 亚洲乱妇老熟女爽到高潮的片| 亚洲精品一区二区三区精华液| 美女福利视频在线观看| 国产精品国产三级国产试看| 成人黄在线观看| 成年人在线免费| 18禁网站免费无遮挡无码中文| 啊啊啊久久久| 深夜成人在线观看| 国产成人高清精品| 麻豆映画在线观看| 杨幂一区二区三区免费看视频| 人妻与黑人一区二区三区| 欧美日韩在线视频一区二区三区| 日本高清一区| 久久久久久久久久国产| 四虎精品影院在线观看视频| 九九九九九精品| 精品99在线视频| 国产精品家庭影院| 日本网站在线看| 国产综合精品一区| 97视频色精品| 亚洲第一激情av| 国产精品成av人在线视午夜片| 高清不卡一二三区| 日韩精品免费综合视频在线播放| 成人动漫在线视频| 成人性生交大片免费看小说| 欧美中文字幕在线观看视频| 国内精品久久久久久不卡影院| 日韩视频一区二区在线观看| 成人高清视频在线| 91视频免费看片| 欧美成人精品三级网站| 亚洲激情影院| 中国毛片直接看| 欧美a级免费视频| 在线天堂视频| 日韩伦理在线| 中字幕一区二区三区乱码| 看片网站在线观看| 亚洲激情不卡| 海角社区69精品视频| 波多野结衣av一区二区全免费观看| 久久日免费视频| av中文字幕av| 青青草视频一区| 日韩电影视频免费| 国产另类xxxxhd高清| 姝姝窝人体www聚色窝| 热久久久久久久| eeuss性xxxxxx电影| 欧美一区二区三区综合| 你懂的国产精品永久在线| 美女毛片在线观看| 欧美va日韩va| 无码国产精品一区二区色情男同| 国产视频播放| 免费在线日韩av| 激情欧美一区二区三区| 国产精品进线69影院| 欧美大片在线观看| www.性欧美| 国产丝袜欧美中文另类| www.天堂在线观看| 欧美电影免费观看高清完整| 成人淫片免费视频95视频| 亚洲国产一区二区三区| 欧美日韩午夜在线| 999精品一区| 中国麻豆视频| 国产免费一区二区三区四区| 久久一区二区三区喷水| 在线免费一区| 亚洲一区亚洲二区| 色版视频在线观看| 四虎免费视频| 性一交一乱一区二区洋洋av| 国产精品电影院| 亚洲综合一区在线| 国产视频精品va久久久久久| 日本女优一区| 99精品99久久久久久宅男| 亚洲911精品成人18网站| 不卡专区在线| 三级黄色在线视频| 全国男人的天堂天堂网| 成看片vvv222| 日韩在线短视频| 黄色成人在线观看网站| 草莓视频末满18勿| 人人妻人人澡人人爽| 国产精品成人网| 狠狠色狠狠色综合人人| 精品国产一区二区三区在线| 99自拍偷拍视频| 精品视频在线一区二区在线| 九色网友自拍视频手机在线| 国产精品无码人妻一区二区在线| 日韩免费一区| 伊人久久高清| 欧美乱大交做爰xxxⅹ性3| 中文字幕精品av| 久久久久久久| 午夜福利三级理论电影| 色先锋资源久久综合5566| va亚洲va日韩不卡在线观看| 日韩 欧美 自拍| www.5588.com毛片| 国产高潮久久久| 国产精品一区二区视频| 国产精品久久久久久久久动漫| 男人天堂资源在线| 日韩在线视频网站| 欧美中文日韩| 真实国产乱子伦精品一区二区三区| 九九热视频免费在线观看| 亚洲天堂网视频| 一区二区三区免费观看视频| 国产69精品久久久久毛片| jizzjizz少妇亚洲水多| www.精品久久| 亚洲区中文字幕| 久久视频一区| 日韩欧美精品一区二区综合视频| 国产日韩精品一区二区三区在线| 国产精品一卡二卡在线观看| 九色porny视频国产网曝| 羞羞答答国产精品www一本| 国产xxxxx18| 美女久久久久久久久久| 国产真实生活伦对白| 同产精品九九九| 欧美日韩国产一区二区三区不卡| 日本天码aⅴ片在线电影网站| 中文字幕一二区| 99re8这里有精品热视频8在线| 91sa在线看| 久久久久久久激情|