
相信接觸過Excel的小伙伴都知道,Excel有一個非常強大的功能“數據透視表”,使用數據透視表可以自由選擇不同字段,用不同的聚合函數進行匯總,并建立交叉表格,用以從不同層面觀察數據。這么強大的功能,在Python中怎么去實現呢?
不用擔心,Python的"數據分析小能手"Pandas很貼心地為我們提供了一個快速實現數據透視表功能的方法——pivot_table()。事不宜遲,讓我們趕緊看看如何在Python中實現數據透視表!
為幫助大家更好地理解,在講解如何使用pivot_table( )實現透視表前,我們先導入示例數據,在接下來的講解中都使用此數據作為例子。
# 導入示例數據 <<< data =pd.read_csv("data.csv") <<< data.head() 月份 項目 部門 金額 剩余金額 0 1月 水費 市場部 1962.37 8210.58 1 2月 水費 市場部 690.69 9510.60 2 2月 電費 市場部 2310.12 5384.92 3 2月 電費 運營部 -1962.37 7973.10 4 2月 電費 開發部 1322.33 6572.16
下面我將帶大家使用pivot_table( )一步一步實現數據透視表的操作。
首先,原數據有5個字段,我們在做數據透視表之前必須理解每個字段的意思,明確清楚自己需要得到什么信息。
假設我們想看看不同月份所花費的水電費金額是多少,這時我們需要把字段“月份”設置為索引,將字段“金額”設置為我們需要看的值,具體代碼如下:
<<< data.pivot_table(index=['月份'],values=['金額']) 金額 月份 10月 3723.940000 11月 2900.151667 12月 10768.262857 1月 1962.370000 2月 1432.280000 3月 3212.106667 4月 4019.175000 5月 4051.480000 6月 6682.632500 7月 11336.463333 8月 17523.485000 9月 10431.960000
參數index為設置的索引列表,即分組依據,需要用中括號[ ]將索引字段括起來;參數values為分組后進行計算的字段列表,也需要用中括號[ ]括起來。這兩個參數的值可以是一個或多個字段,即按照多個字段進行分組和對多個字段進行計算匯總。例如,設置index=['項目','部門']代表求不同項目不同部門下的金額。
<<< data.pivot_table(index=['項目','部門'],values=['金額']) 金額 項目 部門 水費 市場部 3614.318125 開發部 2358.205000 運營部 5896.213333 電費 市場部 6094.748235 開發部 1322.330000 運營部 7288.615000 采暖費 市場部 5068.380000 運營部 55978.000000
若設置values=['金額','剩余金額'],即求不同項目不同部門下金額和剩余金額的值。
<<< data.pivot_table(index=['項目','部門'],values=['金額','剩余金額']) 剩余金額 金額 項目 部門 水費 市場部 7478.423125 3614.318125 開發部 6866.490000 2358.205000 運營部 7224.033333 5896.213333 電費 市場部 7645.535882 6094.748235 開發部 6572.160000 1322.330000 運營部 8821.895000 7288.615000 采暖費 市場部 6572.030000 5068.380000 運營部 7908.560000 55978.000000
同時,如果我們想以交叉表的形式查看不同項目和不同部門下的消費金額,這時就要將字段‘部門’設置為列名,進行交叉查看,具體代碼如下:
<<< data.pivot_table(index=['項目'],columns=['部門'],values=['金額']) 金額 部門 市場部 開發部 運營部 項目 水費 3614.318125 2358.205 5896.213333 電費 6094.748235 1322.330 7288.615000 采暖費 5068.380000 NaN 55978.000000
通過上面的示例,我們可以看到某個分組下不存在記錄會被標記為NAN,例如上述中采暖部和開發部不存在金額這一字段的記錄,則會標記為NAN。如果不希望被標記為NAN,我們可以通過設置參數fill_value=0來用數值0替代這部分的缺失值。
<<< data.pivot_table(index=['項目'],columns=['部門'],values=['金額'],fill_value=0) 金額 部門 市場部 開發部 運營部 項目 水費 3614.318125 2358.205 5896.213333 電費 6094.748235 1322.330 7288.615000 采暖費 5068.380000 0.000 55978.000000
在上面的示例中,我們都是默認分組后對值進行求平均值計算,假如我們想查看不同項目不同部門下金額的總和該怎么實現呢?
通過設置參數aggfunc=np.sum即可對分組后的值進行求和操作,參數aggfunc代表分組后值的匯總方式,可傳入numpy庫中的聚合方法。
<<< data.pivot_table(index=['項目'],columns=['部門'],values=['金額'],fill_value=0,aggfunc=np.sum) 金額 部門 市場部 開發部 運營部 項目 水費 57829.09 4716.41 17688.64 電費 103610.72 1322.33 29154.46 采暖費 5068.38 0.00 55978.00
除了常見的求和、求平均值這兩種聚合方法,我們還可能接觸到以下這幾種:
描述方法標準差np.std()方差np.var()所有元素相乘np.prod()中數np.median()冪運算np.power()開方np.sqrt()最小值np.min()最大值np.max()以e為底的指數np.exp(10)對數np.log(10)
與前面介紹的參數index,columns,value一樣,參數aggfunc傳入的值也是一個列表,表示可傳入一個或多個值。當傳入多個值時,表示對該值進行多種匯總方式,例如同時求不同項目不同部門下金額的求和值和平均值:
<<< data.pivot_table(index=['項目'],columns=['部門'],values=['金額'],fill_value=0,aggfunc=[np.sum,np.max]) sum amax 金額 金額 部門 市場部 開發部 運營部 市場部 開發部 運營部 項目 水費 57829.09 4716.41 17688.64 16807.58 2941.28 6273.56 電費 103610.72 1322.33 29154.46 18239.39 1322.33 26266.60 采暖費 5068.38 0.00 55978.00 5068.38 0.00 55978.00
同時,如果我們想對不同字段進行不同的匯總方式,可通過對參數aggfunc傳入字典來實現,例如我們可以同時對不同項目不同部門下,對字段金額求總和值,對字段剩余金額求平均值:
<<< data.pivot_table(index=['項目'],columns=['部門'],values=['金額','剩余金額'],fill_value=0,aggfunc={'金額':np.sum,'剩余金額':np.max}) 剩余金額 金額 部門 市場部 開發部 運營部 市場部 開發部 運營部 項目 水費 9510.60 8719.34 7810.38 57829.09 4716.41 17688.64 電費 9625.27 6572.16 9938.82 103610.72 1322.33 29154.46 采暖費 6572.03 0.00 7908.56 5068.38 0.00 55978.00
另外,在進行以上功能的同時,pivot_table還為我們提供了一個求所有行及所有列對應合計值的參數margins,當設置參數margins=True時,會在輸出結果的最后添加一行'All',表示根據columns進行分組后每一項的列總計值;以及在輸出結果的最后添加一列'All',表示根據index進行分組后每一項的行總計值。
<<< pd.set_option('precision',0) <<< data.pivot_table(index=['項目'],columns=['部門'],values=['金額','剩余金額'],fill_value=0,aggfunc={'金額':np.sum,'剩余金額':np.max},margins=True) 剩余金額 金額 部門 市場部 開發部 運營部 All 市場部 開發部 運營部 All 項目 水費 9511 8719 7810 9511 57829 4716 17689 80234 電費 9625 6572 9939 9939 103611 1322 29154 134088 采暖費 6572 0 7909 7909 5068 0 55978 61046 All 9625 8719 9939 9939 166508 6039 102821 275368
上面詳細介紹了如何在python中通過pivot_table( )方法實現數據透視表的功能,那么,與數據透視表原理相同,顯示方式不同的‘數據透視圖’又該怎么實現呢?
實現方法非常簡單,將上述進行pivot_table操作后的對象進行實例化,再對實例化后的對象進行plot繪圖操作即可,具體代碼如下:
<<< df=data.pivot_table(index=['項目'],columns=['部門'],values='金額',fill_value=0) <<< df.plot(kind='bar')
數據分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
CDA數據分析師證書考試體系(更新于2025年05月22日)
2025-05-26解碼數據基因:從數字敏感度到邏輯思維 每當看到超市貨架上商品的排列變化,你是否會聯想到背后的銷售數據波動?三年前在零售行 ...
2025-05-23在本文中,我們將探討 AI 為何能夠加速數據分析、如何在每個步驟中實現數據分析自動化以及使用哪些工具。 數據分析中的AI是什么 ...
2025-05-20當數據遇見人生:我的第一個分析項目 記得三年前接手第一個數據分析項目時,我面對Excel里密密麻麻的銷售數據手足無措。那些跳動 ...
2025-05-20在數字化運營的時代,企業每天都在產生海量數據:用戶點擊行為、商品銷售記錄、廣告投放反饋…… 這些數據就像散落的拼圖,而相 ...
2025-05-19在當今數字化營銷時代,小紅書作為國內領先的社交電商平臺,其銷售數據蘊含著巨大的商業價值。通過對小紅書銷售數據的深入分析, ...
2025-05-16Excel作為最常用的數據分析工具,有沒有什么工具可以幫助我們快速地使用excel表格,只要輕松幾步甚至輸入幾項指令就能搞定呢? ...
2025-05-15數據,如同無形的燃料,驅動著現代社會的運轉。從全球互聯網用戶每天產生的2.5億TB數據,到制造業的傳感器、金融交易 ...
2025-05-15大數據是什么_數據分析師培訓 其實,現在的大數據指的并不僅僅是海量數據,更準確而言是對大數據分析的方法。傳統的數 ...
2025-05-14CDA持證人簡介: 萬木,CDA L1持證人,某電商中廠BI工程師 ,5年數據經驗1年BI內訓師,高級數據分析師,擁有豐富的行業經驗。 ...
2025-05-13CDA持證人簡介: 王明月 ,CDA 數據分析師二級持證人,2年數據產品工作經驗,管理學博士在讀。 學習入口:https://edu.cda.cn/g ...
2025-05-12CDA持證人簡介: 楊貞璽 ,CDA一級持證人,鄭州大學情報學碩士研究生,某上市公司數據分析師。 學習入口:https://edu.cda.cn/g ...
2025-05-09CDA持證人簡介 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度、美團、阿里等 ...
2025-05-07相信很多做數據分析的小伙伴,都接到過一些高階的數據分析需求,實現的過程需要用到一些數據獲取,數據清洗轉換,建模方法等,這 ...
2025-05-06以下的文章內容來源于劉靜老師的專欄,如果您想閱讀專欄《10大業務分析模型突破業務瓶頸》,點擊下方鏈接 https://edu.cda.cn/g ...
2025-04-30CDA持證人簡介: 邱立峰 CDA 數據分析師二級持證人,數字化轉型專家,數據治理專家,高級數據分析師,擁有豐富的行業經驗。 ...
2025-04-29CDA持證人簡介: 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度,美團,阿里等 ...
2025-04-28CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-27數據分析在當今信息時代發揮著重要作用。單因素方差分析(One-Way ANOVA)是一種關鍵的統計方法,用于比較三個或更多獨立樣本組 ...
2025-04-25CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-25