MongoDB分組查詢,聚合查詢,以及復雜查詢

準備數據

from pymongo import MongoClient
import datetimeclient=MongoClient('mongodb://localhost:27017')
table=client['db1']['emp']l=[
('張飛','male',18,'20170301','',7300.33,401,1), #以下是教學部
('張云','male',78,'20150302','teacher',1000000.31,401,1),
('劉備','male',81,'20130305','teacher',8300,401,1),
('關羽','male',73,'20140701','teacher',3500,401,1),
('曹操','male',28,'20121101','teacher',2100,401,1),
('諸葛亮','female',18,'20110211','teacher',9000,401,1),
('周瑜','male',18,'19000301','teacher',30000,401,1),
('司馬懿','male',48,'20101111','teacher',10000,401,1),('袁紹','female',48,'20150311','sale',3000.13,402,2),#以下是銷售部門
('張全蛋','female',38,'20101101','sale',2000.35,402,2),
('鵪鶉蛋','female',18,'20110312','sale',1000.37,402,2),
('王尼瑪','female',18,'20160513','sale',3000.29,402,2),
('我尼瑪','female',28,'20170127','sale',4000.33,402,2),('楊過','male',28,'20160311','operation',10000.13,403,3), #以下是運營部門
('小龍女','male',18,'19970312','operation',20000,403,3),
('郭靖','female',18,'20130311','operation',19000,403,3),
('黃蓉','male',18,'20150411','operation',18000,403,3),
('梅超風','female',18,'20140512','operation',17000,403,3)
]for n,item in enumerate(l):d={"_id":n,'name':item[0],'sex':item[1],'age':item[2],'hire_date':datetime.datetime.strptime(item[3],'%Y%m%d'),'post':item[4],'salary':item[5]}table.save(d)# 準備數據

分組的概念與mysql相同,以某個字段作為依據進行歸類,其目的是為了統計

$match

#match 用于對數據進行篩選
{"$match":{"字段":"條件"}},可以使用任何常用查詢操作符$gt,$lt,$in等#例1、select * from db1.emp where post='teacher';
db.emp.aggregate({"$match":{"post":"teacher"}})#例2、select * from db1.emp where id > 3;  
db.emp.aggregate({"$match":{"_id":{"$gt":3}}},
)

$project

# project翻譯為投射 ,即將一個數據結果映射為另一個結果 過程中可以對某些數據進行修改  控制其最終顯示的結果
{"$project":{"要保留的字段名":1,"要去掉的字段名":0,"新增的字段名":"表達式"}}#1、select name,post,(age+1) as new_age from db1.emp;
db.emp.aggregate({"$project":{"name":1,"post":1}})#2、表達式之數學表達式
{"$add":[expr1,expr2,...,exprN]} #相加
{"$subtract":[expr1,expr2]} #第一個減第二個
{"$multiply":[expr1,expr2,...,exprN]} #相乘
{"$divide":[expr1,expr2]} #第一個表達式除以第二個表達式的商作為結果
{"$mod":[expr1,expr2]} #第一個表達式除以第二個表達式得到的余數作為結果
#例:所有人年齡加1顯示
db.emp.aggregate({"$project":{"name":1,"post":1,"new_age":{"$add":["$age",1]}}})
# 錯誤示范: 原因:參加運算的字段不能被影藏
db.emp.aggregate({"$project":{"name":1,"salary":1,"age":0,"new_age":{"$add":["$age",1]}}})#3、表達式之日期表達式:$year,$month,$week,$dayOfMonth,$dayOfWeek,$dayOfYear,$hour,$minute,$second
#例如:select name,date_format("%Y") as hire_year from db1.emp
db.emp.aggregate({"$project":{"name":1,"hire_year":{"$year":"$hire_date"}}}
)#例如查看每個員工的工作多長時間
db.emp.aggregate({"$project":{"name":1,"hire_period":{"$subtract":[{"$year":new Date()},{"$year":"$hire_date"}]}}}
)#4、字符串表達式
{"$substr":[字符串/$值為字符串的字段名,起始位置,截取幾個字節]}
{"$concat":[expr1,expr2,...,exprN]} #指定的表達式或字符串連接在一起返回,只支持字符串拼接
{"$toLower":expr}
{"$toUpper":expr}db.emp.aggregate( {"$project":{"NAME":{"$toUpper":"$name"}}})#5、邏輯表達式
$and
$or
$not
其他見Mongodb權威指南

$group

# $group用于分組
# 分組后具體信息被影藏 
db.emp.aggregate({"$match":{"_id":{"$gt":3}}},{"$group":{"_id":"$post"}}  
)# 通常我們要對分組后的內容進行統計這就需要對應的幾個聚合函數# select id,avg(salary) from db1.emp where id > 3 group by post;  
db.emp.aggregate({"$match":{"_id":{"$gt":3}}},{"$group":{"_id":"$post",'avg_salary':{"$avg":"$salary"}}},
)
# math用于匹配 與mysql不同的是沒有順序限制 每一個操作像是一個管道接收上一個的數據進行處理再傳給下一個# select id,avg(salary) from db1.emp where id > 3 group by post having avg(salary) > 10000;  
db.emp.aggregate({"$match":{"_id":{"$gt":3}}},{"$group":{"_id":"$post",'avg_salary':{"$avg":"$salary"}}},{"$match":{"avg_salary":{"$gt":10000}}}
)# 對應的聚合函數 $sum、$avg、$max、$min、$first、$last#1、將分組字段傳給$group函數的_id字段即可
{"$group":{"_id":"$sex"}} #按照性別分組
{"$group":{"_id":"$post"}} #按照職位分組
{"$group":{"_id":{"state":"$state","city":"$city"}}} #按照多個字段分組,比如按照州市分組#2、分組后聚合得結果,類似于sql中聚合函數的聚合操作符:$sum、$avg、$max、$min、$first、$last
#例1:select post,max(salary) from db1.emp group by post; 
db.emp.aggregate({"$group":{"_id":"$post","max_salary":{"$max":"$salary"}}})#例2:去每個部門最大薪資與最低薪資
db.emp.aggregate({"$group":{"_id":"$post","max_salary":{"$max":"$salary"},"min_salary":{"$min":"$salary"}}})#例3:如果字段是排序后的,那么$first,$last會很有用,比用$max和$min效率高
db.emp.aggregate({"$group":{"_id":"$post","first_id":{"$first":"$_id"}}})#例4:求每個部門的總工資
db.emp.aggregate({"$group":{"_id":"$post","count":{"$sum":"$salary"}}})#例5:求每個部門的人數
db.emp.aggregate({"$group":{"_id":"$post","count":{"$sum":1}}})#3、數組操作符
{"$addToSet":expr}:不重復
{"$push":expr}:重復
# 等同于group_concat
#例:查詢崗位名以及各崗位內的員工姓名:select post,group_concat(name) from db1.emp group by post;
db.emp.aggregate({"$group":{"_id":"$post","names":{"$push":"$name"}}})
db.emp.aggregate({"$group":{"_id":"$post","names":{"$addToSet":"$name"}}})

$sort ,limit,skip

{"$sort":{"字段名":1,"字段名":-1}} #1升序,-1降序
{"$limit":n} 
{"$skip":n} #跳過多少個文檔
#例1、取平均工資最高的前兩個部門db.emp.aggregate(
{"$group":{"_id":"$post","平均工資":{"$avg":"$salary"}}
},
{"$sort":{"平均工資":-1}
},
{"$limit":2
}
)
#例2、
db.emp.aggregate(
{"$group":{"_id":"$post","平均工資":{"$avg":"$salary"}}
},
{"$sort":{"平均工資":-1}
},
{"$limit":2
},
{"$skip":1
}
)
排序:$sort、限制:$limit、跳過:$skip

$sample

# 隨機取出n條記錄
#集合users包含的文檔如下
{ "_id" : 1, "name" : "dave123", "q1" : true, "q2" : true }
{ "_id" : 2, "name" : "dave2", "q1" : false, "q2" : false  }
{ "_id" : 3, "name" : "ahn", "q1" : true, "q2" : true  }
{ "_id" : 4, "name" : "li", "q1" : true, "q2" : false  }
{ "_id" : 5, "name" : "annT", "q1" : false, "q2" : true  }
{ "_id" : 6, "name" : "li", "q1" : true, "q2" : true  }
{ "_id" : 7, "name" : "ty", "q1" : false, "q2" : true  }#下述操作時從users集合中隨機選取3個文檔
db.users.aggregate({"$sample":{"size":3}})
隨機選取n個:$sample

可視化工具

https://robomongo.org

轉載于:https://www.cnblogs.com/liu--huan/p/10721266.html

本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/news/248125.shtml
繁體地址,請注明出處:http://hk.pswp.cn/news/248125.shtml
英文地址,請注明出處:http://en.pswp.cn/news/248125.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

Python學習(三)基礎

一、函數與模塊 定義函數: 函數代碼塊以 def 關鍵詞開頭,后接函數標識符名稱和圓括號 ()。任何傳入參數和自變量必須放在圓括號中間,圓括號之間可以用于定義參數。函數的第一行語句可以選擇性地使用文檔字符串—用于存放函數說明。函數內容以…

操作系統原理之I/O設備管理(第六章上半部分)

一、I/O系統的組成 I/O系統不僅包括各種I/O設備,還包括與設備相連的設備控制器,有些系統還配備了專?? 于輸?/輸出控制的專?計算機,即通道。此外,I/O系統要通過總線與CPU、內存相連。 I/O系統的結構: I/O設備的分類…

js控制a標簽點擊事件 觸發下載

問題背景,動態獲取data把url賦值到a標簽的url中,讓a標簽自動下載 首先想到的應該是$(xxx).click(), 查資料明白:js中的$(...).click()事件只能觸發綁定的onClick方法,不能跳轉到href。 第二種方法:獲取到url之后locat…

操作系統原理之I/O設備管理(第六章下半部分)

五、I/O軟件原理 輸入輸出軟件的總體目標是將軟件組織成一種層次結構 低層軟件用來屏蔽硬件的具體細節高層軟件則主要是為用戶提供一個簡潔、規范的界面設備管理的4個層次: 用戶層軟件 -》向系統發出I/O請求,顯示I/O操作的結果,提供?戶與設備…

jQuery第二天

課程回顧: ? jQuery:JavaScript庫 ? 入口函數:$(function () {}); ? jQuery:jQuery對象,DOM對象 ? jQuery轉成DOM:$(‘元素’)[索引值] ? DOM轉成jQuery:$(DOM對象); ? 篩選方法&am…

切換Debug/Release編譯模式和Archive的作用

在學這個之前,以為很難,也起不到什么作用,但是等真正運用到工程里面,才發現,這個能幫你省下很多工作量。 1,Debug和Release版本區別? 進行iOS開發,在Xcode調試程序時&am…

Linux 防火墻:Netfilter iptables

一、Netfilter 簡介 (1) Netfilter 是 Linux 內置的一種防火墻機制,我們一般也稱之為數據包過濾機制,而 iptables 只是操作 netfilter 的一個命令行工具(2) Netfilter 是 Linux CentOS 6 內置的防火墻機制,Firewall 是 Linux CentOS 7 內置的…

無法加載 DLL“SQLite.Interop.DLL”: 找不到指定的模塊。 (異常來自 HRESULT:0x8007007E)。...

無法加載 DLL“SQLite.Interop.DLL”: 找不到指定的模塊。 (異常來自 HRESULT:0x8007007E)。 在項目里添加 現有項 把SQLite.Interop.DLL文件添加進來,然后點擊屬性 修改一個屬性 把 屬性 復制到輸出目錄 改為 始終復制 然后打開你的項目屬性 進入生成的 頁面&a…

jQuery第三天

課程回顧: ? 動畫效果:基本動畫,滑動動畫,淡入淡出,自定義動畫效果(animate) ? 事件切換:hover(over,out); ? 停止動畫:stop ? 操作屬性:prop(固有屬…

C語言程序設計II—第八周教學

第八周教學總結(15/4-21/4) 教學內容 本周的教學內容為:   8.4 電碼加密 知識點:指針與字符串,重難點:字符指針與字符串的關聯和區別;   8.5 任意個整數求和 知識點:動態內存分配…

AFNetworking 對數據進行https ssl加密

參考來源:http://www.cnblogs.com/jys509/p/5001566.html 現在在工作中的工作需求:https請求驗證證書一般來講如果app用了web service , 我們需要防止數據嗅探來保證數據安全.通常的做法是用ssl來連接以防止數據抓包和嗅探其實這么做的話還是不夠的 。…

數據庫系統原理(第一章概述)

一、數據庫基本概念 什么是數據:數據(Data)是描述事物的符號記錄,是指利用物理符號記錄下來的、 可以鑒別的信息。 數據是信息存在的一種形式,只有通過解釋或處理的數據才能成為有用的信息。 什么是數據庫:…

jQuery第四天

課程回顧: ? 元素操作: ? 遍歷元素: ? $(‘元素’).each(function (index, elm) {}); ? $.each(對象,function (index, elm) {}); ? 創建元素:$(‘ 新的元素?’);? 添加元素: ? 內部添加&…

navigationController的NavigationBar和ToolBar的POP或PUSH消失問題

今天在工作中發現一個坑, 其他頁面都是隱藏。YSViewController 使用的時候必須是需要 navigationBar 和 toorbar,但是 pop出這個viewcontroller后,需要隱藏navigationBar 和 toorbar,但是直接設置為hiddenYES會出現其他頁面壓棧出…

實驗二:Linux下Xen環境的安裝

實驗名稱: Linux下Xen環境的安裝(centOS7) 實驗環境: 本次實驗基本是在centOS7的環境下完成,系統內核和系統版本如下: 實驗要求: 為centOS7的環境下安裝Xen的平臺,能夠正常使用Xen下…

IDEA寫vue項目出現紅色波浪線警告如何解決??

1.看圖 2.希望對大家有幫助,只要修改了這個就可以,如有任何問題都可以留言,謝謝大家 2019-09-1923:54:11 作者:何秀好 轉載于:https://www.cnblogs.com/itboxue/p/11553395.html

數據可視化(BI報表的開發)第一天

課程回顧: ? jQuery事件注冊: ? $(元素).click(function () {}); ? $(元素).on(‘click’, [后代元素], function () {}); ? $(元素).one(‘click’, function () {}); ? 解綁事件:off ? 自動觸發: ? $(元素).click…

在Block中使用weakSelf與strongSelf的意義

在Block中使用weakSelf與strongSelf的意義 我們都會聲明一個弱引用在block中使用, 目的就是防止循環引用, 那么weakSelf與strongSelf一起使用目的是什么呢? 首先先定義2個宏: #define YXWeakSelf(type) __weak typeof(type) weak##type type; #define StrongSelf(type) __…

操作系統原理之操作系統簡介(第一章)

一、 什么是操作系統 操作系統:是一種復雜的系統軟件,是不同程序代碼、數據結構、數據初始化文件的集合,可執行。 操作系統是用戶與硬件之間的接口:操作系統與硬件部分相互作用,并且為運行在計算機上的應用程序提供執行…

數據可視化(BI報表的開發)第二天

9、公用面板樣式 所有的面板的基礎樣式是一致的,提前布局好。 面板 .panel :box-sizing,邊框圖,大小,定位【51 38 20 132】容器 .inner:padding:24,36,定位外部拉寬標…