
詳解SQL集合運算
本文主要是對集合運算中并集、交集、差集運算基礎的總結。
集合運算包含四種:
1.并集運算(兩種)
2.交集運算
3.差集運算
下面是集合運算的思維導圖:
為什么使用集合運算
1.在集合運算中比聯接查詢和EXISTS/NOT EXISTS更方便。
在閱讀下面的章節時,我們可以先把環境準備好,以下的SQL腳本可以幫助大家創建數據庫,創建表,插入數據。
一、集合運算
1.集合運算
(1)對輸入的兩個集合或多集進行的運算。
(2)多集:由兩個輸入的查詢生成的可能包含重復記錄的中間結果集。
(3)T-SQL支持三種集合運算:并集(UNION)、交集(INTERSECT)、差集(EXCEPT)
2.語法
集合運算的基本格式:
輸入的查詢1
集合運算符>
輸入的查詢2
[ORDER BY]
3.要求
(1)輸入的查詢不能包含ORDER BY字句;
(2)可以為整個集合運算結果選擇性地增加一個ORDER BY字句;
(3)每個單獨的查詢可以包含所有邏輯查詢處理階段(處理控制排列順序的ORDER BY字句);
(4)兩個查詢 必須包含相同的列數;
(5)相應列必須具有兼容的數據類型。兼容個的數據類型:優先級較低的數據類型必須能隱式地轉換為較高級的數據類型。比如輸入的查詢1的第一列為int類型,輸入的查詢2的第一列為float類型,則較低的數據類型int類型可以隱式地轉換為較高級float類型。如果輸入的查詢1的第一列為char類型,輸入的查詢2的第一列為datetime類型,則會提示轉換失?。簭淖址D換日期和/或時間時,轉換失??;
(6)集合運算結果中列名由輸入的查詢1決定,如果要為結果分配結果列,應該在輸入的查詢1中分配相應的別名;
(7)集合運算時,對行進行進行比較時,集合運算認為兩個NULL相等;
(8)UNION支持DISTINCT和ALL。不能顯示指定DISTINCT字句,如果不指定ALL,則默認使用DISTINCT;
(9)INTERSET和EXCEPT默認使用DISTINCT,不支持ALL。
二、UNION(并集)集合運算
1.并集的文氏圖
并集:兩個集合的并集是一個包含集合A和B中所有元素的集合。
圖中陰影區域代表集合A與集合B的并集
2.UNION ALL集合運算
(1)假設Query1返回m行,Query2返回n行,則Query1 UNION ALL Query2返回(m+n)行;
(2)UNION ALL 不會刪除重復行,所以它的結果就是多集,而不是真正的集合;
(3)相同的行在結果中可能出現多次。
3.UNION DISTINCT集合運算
(1)假設Query1返回m行,Query2返回n行,Query1和Query2有相同的h行,則Query1 UNION Query2返回(m+n-h)行;
(2)UNION 會刪除重復行,所以它的結果就是集合;
(3)相同的行在結果中只出現一次。
(4)不能顯示指定DISTINCT字句,如果不指定ALL,則默認使用DISTINCT。
(5)當Query1與Query2比較某行記錄是否相等時,會認為取值為NULL的列是相等的列。
三、INTERSECT(交集)集合運算
1.交集的文氏圖
交集:兩個集合(記為集合A和集合B)的交集是由既屬于A,也屬于B的所有元素組成的集合。
圖中陰影區域代表集合A與集合B的交集
2.INTERSECT DISTINCT集合運算
(1)假設Query1返回 m 行,Query2返回 n 行,Query1和Query2有相同的 h 行,則Query1 INTERSECT Query2返回 h 行;
(2)INTERSECT集合運算在邏輯上首先刪除兩個輸入多集中的重復行(把多集變為集合),然后返回只在兩個集合中都出現的行;
(3)INTERSECT 會刪除重復行,所以它的結果就是集合;
(4)相同的行在結果中只出現一次。
(5)不能顯示指定DISTINCT字句,如果不指定ALL,則默認使用DISTINCT。
(6)當Query1與Query2比較某行記錄是否相等時,會認為取值為NULL的列是相等的列。
(7)用內聯接或EXISTS謂詞可以代替INTERSECT集合運算,但是必須對NULL進行處理,否則這兩種方法對NULL值進行比較時,比較結果都是UNKNOWN,這樣的行會被過濾掉。
3.INTERSECT ALL集合運算
(1)ANSI SQL支持帶有ALL選項的INTERSECT集合運算,但SQL Server2008現在還沒有實現這種運算。后面會提供一種用于T-SQL實現的替代方案;
(2)假設Query1返回 m 行,Query2返回 n 行,如果行R在Query1中出現了x次,在Query2中出現了y次,則行R應該在INTERSECT ALL運算之后出現minimum(x,y)次。
下面提供用于T-SQL實現的INTERSECT ALL集合運算:公用表表達式 + 排名函數
結果如下:
其中UK NULL London有四個重復行,
在排序函數的OVER字句中使用 ORDER BY ( SELECT 常量> )可以告訴SQL Server不必在意行的順序。
四、EXCEPT(差集)集合運算
1.差集的文氏圖
差集:兩個集合(記為集合A和集合B)的由屬于集合A,但不屬于集合B的所有元素組成的集合。
圖中陰影區域代表集合A與集合B的差集
2.EXCEPT DISTINCT集合運算
(1)假設Query1返回 m 行,Query2返回 n 行,Query1和Query2有相同的 h 行,則Query1 INTERSECT Query2返回 m – h 行,而Query2 INTERSECT Query1 返回 n – h 行
(2)EXCEPT集合運算在邏輯上先刪除兩個輸入多集中的重復行(把多集轉變成集合),然后返回只在第一個集合中出現,在第二個集合眾不出現所有行。
(3)EXCEPT 會刪除重復行,所以它的結果就是集合;
(4)EXCEPT是不對稱的,差集的結果取決于兩個查詢的前后關系。
(5)相同的行在結果中只出現一次。
(6)不能顯示指定DISTINCT字句,如果不指定ALL,則默認使用DISTINCT。
(7)當Query1與Query2比較某行記錄是否相等時,會認為取值為NULL的列是相等的列。
(8)用左外聯接或NOT EXISTS謂詞可以代替INTERSECT集合運算,但是必須對NULL進行處理,否則這兩種方法對NULL值進行比較時,比較結果都是UNKNOWN,這樣的行會被過濾掉。
3.EXCEPT ALL集合運算
(1)ANSI SQL支持帶有ALL選項的EXCEPT集合運算,但SQL Server2008現在還沒有實現這種運算。后面會提供一種用于T-SQL實現的替代方案;
(2)假設Query1返回 m 行,Query2返回 n 行,如果行R在Query1中出現了x次,在Query2中出現了y次,且x>y,則行R應該在EXCEPT ALL運算之后出現 x – y 次。
下面提供用于T-SQL實現的EXCEPT ALL集合運算:公用表表達式 + 排名函數
結果如下:
五、集合運算的優先級
1.INTERSECT>UNION=EXCEPT
2.首先計算INTERSECT,然后從左到右的出現順序依次處理優先級的相同的運算。
3.可以使用圓括號控制集合運算的優先級,它具有最高的優先級。
六、特殊處理
1.只有ORDER BY能夠直接應用于集合運算的結果;
2.其他階段如表運算符、WHERE、GROUP BY、HAVING等,不支持直接應用于集合運算的結果,這個時候可以使用表表達式來避開這一限制。如根據包含集合運算的查詢定義個表表達式,然后在外部查詢中對表表達式應用任何需要的邏輯查詢處理;
3.ORDER BY字句不能直接應用于集合運算中的單個查詢,這個時候可以TOP+ORDER BY字句+表表達式來避開這一限制。如定義一個基于該TOP查詢的表表達式,然后通過一個使用這個表表達式的外部查詢參與集合運算。
七、練習題
1.寫一個查詢,返回在2008年1月有訂單活動,而在2008年2月沒有訂單活動的客戶和雇員。
期望結果:
方案一:EXCEPT
(1)先用查詢1查詢出2008年1月份有訂單活動的客戶和雇員
(2)用查詢2查詢2008年2月份客戶的訂單活動的客戶和雇員
(3)用差集運算符查詢2008年1月有訂單活動而2008年2月沒有訂單活動的客戶和雇員
SELECT custid ,
empid
FROM Sales.Orders
WHERE orderdate >= '20080101'
AND orderdate = '20080201'
AND orderdate
方案二:NOT EXISTS
必須保證custid,empid不能為null,才能用NOT EXISTS進行查詢,如果custid或empid其中有null值存在,則不能用NOT EXISTS進行查詢,因為比較NULL值的結果是UNKNOWN,這樣的行用NOT EXISTS查詢返回的子查詢的行會被過濾掉,所以最后的外查詢會多出NULL值的行,最后查詢結果中會多出NULL值的行。
SELECT custid ,
empid
FROM Sales.Orders AS O1
WHERE orderdate >= '20080101'
AND orderdate = '20080201'
AND orderdate
如果我往Sales.Orders表中插入兩行數據:
插入cutid=NULL,empid=1,orderdate=‘20080101’
INSERT INTO [TSQLFundamentals2008].[Sales].[Orders]
( [custid] ,
[empid] ,
[orderdate] ,
[requireddate] ,
[shippeddate] ,
[shipperid] ,
[freight] ,
[shipname] ,
[shipaddress] ,
[shipcity] ,
[shipregion] ,
[shippostalcode] ,
[shipcountry]
)
VALUES ( NULL ,
1 ,
'20080101' ,
'20080101' ,
'20080101' ,
1 ,
1 ,
'A' ,
'20080101' ,
'A' ,
'A' ,
'A' ,
'A'
)
GO
插入cutid=NULL,empid=1,orderdate=‘20080201’
INSERT INTO [TSQLFundamentals2008].[Sales].[Orders]
( [custid] ,
[empid] ,
[orderdate] ,
[requireddate] ,
[shippeddate] ,
[shipperid] ,
[freight] ,
[shipname] ,
[shipaddress] ,
[shipcity] ,
[shipregion] ,
[shippostalcode] ,
[shipcountry]
)
VALUES ( NULL ,
1 ,
'20080201' ,
'20080101' ,
'20080101' ,
1 ,
1 ,
'A' ,
'20080101' ,
'A' ,
'A' ,
'A' ,
'A'
)
GO
用方案一查詢出來結果為50行,會把cutid=NULL,empid=1的行過濾掉
用方案二查詢出來結果為51行,不會把cutid=NULL,empid=1的行過濾掉
用下面的方案可以解決上面的問題,需要處理cutid=NULL,或者empid=null的情況。返回50行
SELECT custid ,
empid
FROM Sales.Orders AS O1
WHERE orderdate >= '20080101'
AND orderdate = '20080201'
AND orderdate
2.寫一個查詢,返回在2008年1月和在2008年2月都有訂單活動的客戶和雇員。
期望結果:
方案一:INTERSECT
(1)先用查詢1查詢出2008年1月份有訂單活動的客戶和雇員
(2)用查詢2查詢2008年2月份客戶的訂單活動的客戶和雇員
(3)用交集運算符查詢2008年1月和2008年2月都有訂單活動的客戶和雇員
SELECT custid ,
empid
FROM Sales.Orders
WHERE orderdate >= '20080101'
AND orderdate = '20080201'
AND orderdate
方案二:EXISTS
必須保證custid,empid不能為null,才能用EXISTS進行查詢,如果custid或empid其中有null值存在,則不能用EXISTS進行查詢,因為比較NULL值的結果是UNKNOWN,這樣的行用EXISTS查詢返回的子查詢的行會被過濾掉,所以最后的外查詢會少NULL值的行,最后查詢結果中會少NULL值的行。數據分析師培訓
SELECT custid ,
empid
FROM Sales.Orders AS O1
WHERE orderdate >= '20080101'
AND orderdate = '20080201'
AND orderdate
如果我往Sales.Orders表中插入兩行數據:
插入cutid=NULL,empid=1,orderdate=’20080101′
插入cutid=NULL,empid=1,orderdate=’20080201′
用方案一查詢出來結果為6行,不會把cutid=NULL,empid=1的行過濾掉
用方案二查詢出來結果為5行,會把cutid=NULL,empid=1的行過濾掉
用下面的方案可以解決上面的問題,需要處理cutid=NULL,或者empid=null的情況。返回6行。
SELECT custid ,
empid
FROM Sales.Orders AS O1
WHERE orderdate >= '20080101'
AND orderdate = '20080201'
AND orderdate
3.寫一個查詢,返回在2008年1月和在2008年2月都有訂單活動,而在2007年沒有訂單活動的客戶和雇員
期望結果:
方案一:INTERSECT + EXCEPT
SELECT custid ,
empid
FROM Sales.Orders
WHERE orderdate >= '20080101'
AND orderdate = '20080201'
AND orderdate = '20070101'
AND orderdate
方案二:EXISTS + NOT EXISTS
SELECT custid ,
empid
FROM Sales.Orders AS O1
WHERE orderdate >= '20080101'
AND orderdate = '20080201'
AND orderdate = '20070101'
AND orderdate
數據分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
CDA數據分析師證書考試體系(更新于2025年05月22日)
2025-05-26解碼數據基因:從數字敏感度到邏輯思維 每當看到超市貨架上商品的排列變化,你是否會聯想到背后的銷售數據波動?三年前在零售行 ...
2025-05-23在本文中,我們將探討 AI 為何能夠加速數據分析、如何在每個步驟中實現數據分析自動化以及使用哪些工具。 數據分析中的AI是什么 ...
2025-05-20當數據遇見人生:我的第一個分析項目 記得三年前接手第一個數據分析項目時,我面對Excel里密密麻麻的銷售數據手足無措。那些跳動 ...
2025-05-20在數字化運營的時代,企業每天都在產生海量數據:用戶點擊行為、商品銷售記錄、廣告投放反饋…… 這些數據就像散落的拼圖,而相 ...
2025-05-19在當今數字化營銷時代,小紅書作為國內領先的社交電商平臺,其銷售數據蘊含著巨大的商業價值。通過對小紅書銷售數據的深入分析, ...
2025-05-16Excel作為最常用的數據分析工具,有沒有什么工具可以幫助我們快速地使用excel表格,只要輕松幾步甚至輸入幾項指令就能搞定呢? ...
2025-05-15數據,如同無形的燃料,驅動著現代社會的運轉。從全球互聯網用戶每天產生的2.5億TB數據,到制造業的傳感器、金融交易 ...
2025-05-15大數據是什么_數據分析師培訓 其實,現在的大數據指的并不僅僅是海量數據,更準確而言是對大數據分析的方法。傳統的數 ...
2025-05-14CDA持證人簡介: 萬木,CDA L1持證人,某電商中廠BI工程師 ,5年數據經驗1年BI內訓師,高級數據分析師,擁有豐富的行業經驗。 ...
2025-05-13CDA持證人簡介: 王明月 ,CDA 數據分析師二級持證人,2年數據產品工作經驗,管理學博士在讀。 學習入口:https://edu.cda.cn/g ...
2025-05-12CDA持證人簡介: 楊貞璽 ,CDA一級持證人,鄭州大學情報學碩士研究生,某上市公司數據分析師。 學習入口:https://edu.cda.cn/g ...
2025-05-09CDA持證人簡介 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度、美團、阿里等 ...
2025-05-07相信很多做數據分析的小伙伴,都接到過一些高階的數據分析需求,實現的過程需要用到一些數據獲取,數據清洗轉換,建模方法等,這 ...
2025-05-06以下的文章內容來源于劉靜老師的專欄,如果您想閱讀專欄《10大業務分析模型突破業務瓶頸》,點擊下方鏈接 https://edu.cda.cn/g ...
2025-04-30CDA持證人簡介: 邱立峰 CDA 數據分析師二級持證人,數字化轉型專家,數據治理專家,高級數據分析師,擁有豐富的行業經驗。 ...
2025-04-29CDA持證人簡介: 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度,美團,阿里等 ...
2025-04-28CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-27數據分析在當今信息時代發揮著重要作用。單因素方差分析(One-Way ANOVA)是一種關鍵的統計方法,用于比較三個或更多獨立樣本組 ...
2025-04-25CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-25