亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 數據庫 > MongoDB > 正文

使用aggregate在MongoDB中查詢重復數據記錄的方法

2020-03-14 13:17:50
字體:
來源:轉載
供稿:網友
這篇文章主要介紹了使用aggregate在MongoDB中查詢重復數據記錄的方法的相關資料,需要的朋友可以參考下
 

MongoDB中聚合(aggregate)主要用于處理數據(諸如統計平均值,求和等),并返回計算后的數據結果。有點類似sql語句中的 count(*)。

aggregate() 方法

MongoDB中聚合的方法使用aggregate()。

語法

aggregate() 方法的基本語法格式如下所示:

>db.COLLECTION_NAME.aggregate(AGGREGATE_OPERATION)

我們知道,MongoDB屬于文檔型數據庫,其存儲的文檔類型都是JSON對象。正是由于這一特性,我們在Node.js中會經常使用MongoDB進行數據的存取。但由于Node.js是異步執行的,這就導致我們無法保證每一次的數據庫save操作都是原子型的。也就是說,如果客戶端連續兩次發起同一事件將數據存入數據庫,很可能會導致數據被重復保存。高并發的情況下,哪怕是你在代碼中已經做了非常嚴格的校驗,例如插入數據前判斷要保存的數據是否已經存在,但仍然有可能會出現數據被重復保存的風險。因為在異步執行中,你沒有辦法保證哪個線程先執行,哪個線程后執行,客戶端發起的所有請求并非按我們想象的都是順序執行的。一個較好的解決辦法是在Mongo數據庫的所有表中創建唯一索引。事實上,MongoDB默認會為所有表創建一個_id字段的唯一索引(可以取消)。如果你想在Node.js中通過mongoose.schema來自動創建索引,可以參考下面的代碼:

var mongoose = require('mongoose');var Schema = mongoose.Schema;var customerSchema = new mongoose.Schema({cname: String,cellPhone, String,sender: String,tag: String,behaviour: Number,createTime: {type: Date,default: Date.now},current:{type: Boolean,default: true}}, {versionKey: false});customerSchema.index({cname:1,cellPhone:1,sender:1,tag:1,behaviour:1}, {unique: true});module.exports = mongoose.model('customer', customerSchema); 

  上面的model中我們定義了表customer的結構,并通過index()方法在字段cname,cellPhone,sender,tag,behaviour上創建了唯一索引,這樣當包含這些字段的重復數據被插入時,數據庫會拋出異常。借用mongoose,如果數據庫表之前已經被創建并且程序正在運行中,當我們修改model并添加索引,然后重新啟動app,只要有對該model的訪問,mongoose會自動進行檢測并創建索引。當然,如果數據出現重復,則索引創建會失敗。此時我們可以通過在創建索引時添加dropDups選項,讓數據庫自動將重復的數據刪除,如:

customerSchema.index({cname:1,cellPhone:1,sender:1,tag:1,behaviour:1}, {unique: true, dropDups: true});

  不過據MongoDB的官方說明,自3.0以后的版本不再使用該選項,而且也并沒有提供替代的解決辦法。貌似官方不再提供創建索引時自動刪除重復記錄的功能。那如何才能快速有效地找出重復的記錄并且刪除呢?首先我們要找出這些記錄,然后通過remove()方法進行刪除。下面的查詢語句可以找出給定字段有重復數據的記錄:

db.collection.aggregate([{ $group: { _id: { firstField: "$firstField", secondField: "$secondField" }, uniqueIds: { $addToSet: "$_id" },count: { $sum: 1 } }}, { $match: { count: { $gt: 1 } }}]) 

  替換_id屬性的值以指定你想要進行判斷的字段。相應地,在Node.js中代碼如下:

var deferred = Q.defer();var group = { firstField: "$firstField", secondField: "$secondField"};model.aggregate().group({_id: group,uniqueIds: {$addToSet: '$_id'},count: {$sum: 1}}).match({ count: {$gt: 1}}).exec(deferred.makeNodeResolver());return deferred.promise; 

上述代碼使用了Q來替換函數執行中的回調。在Node.js的異步編程中,使用Q來處理回調是個不錯的選擇。

  下面是返回的結果:

/* 1 */{"result" : [ {"_id" : {"cellPhone" : "15827577345","actId" : ObjectId("5694565fa50fea7705f01789")},"uniqueIds" : [ ObjectId("569b5d03b3d206f709f97685"), ObjectId("569b5d01b3d206f709f97684")],"count" : 2.0000000000000000}, {"_id" : {"cellPhone" : "18171282716","actId" : ObjectId("566b0d8dc02f61ae18e68e48")},"uniqueIds" : [ ObjectId("566d16e6cf86d12d1abcee8b"), ObjectId("566d16e6cf86d12d1abcee8a")],"count" : 2.0000000000000000}],"ok" : 1.0000000000000000}

  從結果中可以看到,一共有兩組數據相同的記錄,所以返回的result數組的長度為2。uniqueIds屬性為一個數組,其中存放了重復記錄的_id字段的值,通過該值我們可以使用remove()方法來查找并刪除對應的數據。



注:相關教程知識閱讀請移步到MongoDB頻道。
發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
欧美日韩在线第一页| 98精品国产自产在线观看| 久久人人爽亚洲精品天堂| 欧美一区二区大胆人体摄影专业网站| 亚洲成人网av| 亚洲深夜福利视频| 亚洲自拍偷拍色图| 91精品美女在线| 国产精品久久久一区| 黄色精品一区二区| xvideos亚洲人网站| 亚洲午夜精品久久久久久久久久久久| 亚洲国产精品久久精品怡红院| 久久99热精品这里久久精品| 国产美女精品视频| 国产精品美女主播在线观看纯欲| 国产精品成av人在线视午夜片| 97香蕉久久夜色精品国产| 成人午夜小视频| 日韩精品在线视频观看| 97人人爽人人喊人人模波多| 精品中文字幕在线观看| 91中文精品字幕在线视频| 91精品国产91久久久久久最新| 中文字幕欧美日韩| 欧美精品一本久久男人的天堂| 国产噜噜噜噜噜久久久久久久久| 亚洲精品白浆高清久久久久久| 国产男女猛烈无遮挡91| 日韩亚洲欧美中文在线| 一区二区三区在线播放欧美| 欧美成人免费全部观看天天性色| 精品美女久久久久久免费| 亚洲第一视频在线观看| 成人免费自拍视频| 精品久久在线播放| 国产美女久久精品| 国产亚洲人成a一在线v站| 欧美日韩国产中文精品字幕自在自线| 国产精品视频专区| 日韩av在线免费看| 成人女保姆的销魂服务| 久久久久久尹人网香蕉| 国产日韩欧美日韩大片| 91精品啪aⅴ在线观看国产| 日韩欧美大尺度| 亚洲va久久久噜噜噜久久天堂| 精品国内产的精品视频在线观看| 国产精品成人va在线观看| 亚洲国产精品yw在线观看| 日韩有码在线视频| 欧美理论在线观看| 久久99精品久久久久久噜噜| 国产成人在线一区二区| 欧美丰满少妇xxxxx| 久久91精品国产91久久久| 国产精品稀缺呦系列在线| 久久精品青青大伊人av| 色视频www在线播放国产成人| 亚洲精品国产suv| 97婷婷大伊香蕉精品视频| 日韩欧美有码在线| 国产精品www色诱视频| 欧美性猛交xxxx偷拍洗澡| 久久久人成影片一区二区三区观看| 91av在线国产| 国产精品日韩专区| 亚洲国产天堂久久国产91| 欧美成人一区二区三区电影| 最近2019年中文视频免费在线观看| 日韩av三级在线观看| 欧美性69xxxx肥| 亚洲欧美日本另类| 国产一区二区三区三区在线观看| 日韩中文字幕网| 九九热这里只有精品6| 亚洲欧美色图片| 国产精品免费在线免费| 在线视频一区二区| 国产成人午夜视频网址| 欧美日韩人人澡狠狠躁视频| 精品视频在线播放色网色视频| xvideos成人免费中文版| 国产精品吹潮在线观看| 曰本色欧美视频在线| 精品亚洲va在线va天堂资源站| 精品视频在线播放色网色视频| 日本韩国欧美精品大片卡二| 久久久国产在线视频| 欧美在线免费看| 在线看片第一页欧美| 国产精品久久久久久久久久三级| 丝袜亚洲另类欧美重口| 亚洲国产精品国自产拍av秋霞| 91在线直播亚洲| 在线一区二区日韩| 欧美日韩国产91| 久久的精品视频| 国产精品日韩一区| 成人网中文字幕| 中文精品99久久国产香蕉| 欧美国产欧美亚洲国产日韩mv天天看完整| 久久在线观看视频| 亚洲第一视频网站| 亚洲色图50p| 欧美成人合集magnet| 国产精品视频自在线| 97在线免费观看视频| 国产精品电影网| 亚洲第一中文字幕在线观看| 国产精品夫妻激情| 亚洲福利在线播放| 国产精品旅馆在线| 日韩精品免费在线视频观看| 日韩国产在线播放| 最近2019好看的中文字幕免费| 国产精品视频久久久久| 精品一区精品二区| 日韩av电影手机在线观看| 久久男人资源视频| 亚洲精品久久在线| 欧美性猛交xxxxx免费看| 久久亚洲精品网站| 黄色成人在线免费| 欧美在线视频一二三| 日韩免费av一区二区| 国产亚洲视频在线| 日韩综合视频在线观看| 国产视频精品va久久久久久| 成人高清视频观看www| 深夜成人在线观看| 欧美日韩免费区域视频在线观看| 亚洲欧美一区二区三区四区| 亚州欧美日韩中文视频| 亚洲电影天堂av| 中文字幕亚洲无线码a| 日韩在线观看免费av| 尤物精品国产第一福利三区| 亚洲成人精品av| 欧美国产乱视频| 欧美极品在线播放| 精品成人乱色一区二区| 亚洲欧美成人网| 91精品国产91久久| 亚洲福利视频专区| 欧美高清videos高潮hd| 国产美女久久精品香蕉69| 日本成人激情视频| 亚洲欧美日韩国产成人| 成人免费高清完整版在线观看| 91国内揄拍国内精品对白| 欧美日韩国产一区中文午夜| 性色av一区二区三区红粉影视| 国产一区二区三区网站| 日韩av观看网址| 日韩av中文字幕在线播放| 精品福利在线观看| 91视频8mav| 97在线视频免费播放| 久久久成人精品视频| 91福利视频在线观看| 91在线网站视频| 国产视频精品免费播放| 国产性色av一区二区|