利用python匯總統(tǒng)計(jì)多張Excel
為什么越來(lái)越多的非程序員白領(lǐng)都開(kāi)始學(xué)習(xí) Python ?他們可能并不是想要學(xué)習(xí) Python 去爬取一些網(wǎng)站從而獲得酷酷的成就感,而是工作中遇到好多數(shù)據(jù)分析處理的問(wèn)題,用 Python 就可以簡(jiǎn)單高效地解決。本文就通過(guò)一個(gè)實(shí)際的例子來(lái)給大家展示一下 Python 是如何應(yīng)用于實(shí)際工作中高效解決復(fù)雜問(wèn)題的。
背景
小明就職于一家戶外運(yùn)動(dòng)專(zhuān)營(yíng)公司,他們公司旗下有好多個(gè)品牌,并且涉及到很多細(xì)分的行業(yè)。小明在這家公司任數(shù)據(jù)分析師,平時(shí)都是通過(guò) Excel 來(lái)做數(shù)據(jù)分析的。今天老板丟給他一個(gè)任務(wù):下班前篩選出集團(tuán)公司旗下最近一年銷(xiāo)售額前五名的品牌以及銷(xiāo)售額。
對(duì)于 Excel 大佬來(lái)說(shuō),這不就是分分鐘的事嗎?小明并沒(méi)有放在眼里,直到市場(chǎng)部的同事將原始的數(shù)據(jù)文件發(fā)給他,他才意識(shí)到事情并沒(méi)有那么簡(jiǎn)單:
這并不是想象中的排序取前五就行了。這總共有90個(gè)文件,按常規(guī)的思路來(lái)看,他要么將所有文件的內(nèi)容復(fù)制到一張表中進(jìn)行分類(lèi)匯總,要么將每張表格進(jìn)行分類(lèi)匯總,然后再最最終結(jié)果進(jìn)行分類(lèi)匯總。
想想這工作量,再想想截止時(shí)間,小明撓了撓頭,感覺(jué)到要漸漸頭禿。
思路分析
這種體力活,寫(xiě)程序解決是最輕松的啦。小明這時(shí)候想到了他的程序員好朋友小段,于是他把這個(gè)問(wèn)題拋給了小段。
小段縷了下他那所剩無(wú)幾的頭發(fā),說(shuō):so easy,只需要找潘大師即可。
小明說(shuō):你搞不定嗎?還要找其他人!
小段苦笑說(shuō):不不不,潘大師是 Python 里面一個(gè)處理數(shù)據(jù)的庫(kù),叫 Pandas ,俗稱(chēng) 潘大師。
小明說(shuō):我不管什么大師不大師,就說(shuō)需要多久搞定。
小段說(shuō):給我?guī)追昼妼?xiě)程序,再跑幾秒鐘就好了!
小明發(fā)過(guò)去了膜拜大佬的表情。
小段略微思考了下,整理了一下程序思路:
計(jì)算每張表每一行的銷(xiāo)售額,用“訪客數(shù) * 轉(zhuǎn)化率 * 客單價(jià)”就行。 將每張表格根據(jù)品牌匯總銷(xiāo)售額。 將所有表格的結(jié)果匯總成一張總表 在總表中根據(jù)品牌匯總銷(xiāo)售額并排序編碼
第零步,讀取 Excel :
import pandas as pddf = pd.read_excel('./tables/' + name)
第一步,計(jì)算每張表格內(nèi)的銷(xiāo)售額:
df[’銷(xiāo)售額’] = df[’訪客數(shù)’] * df[’轉(zhuǎn)化率’] * df[’客單價(jià)’]
第二步,將每張表格根據(jù)品牌匯總銷(xiāo)售額:
df_sum = df.groupby(’品牌’)[’銷(xiāo)售額’].sum().reset_index()
第三步,將所有表格的結(jié)果匯總成一張總表:
result = pd.DataFrame()result = pd.concat([result, df_sum])
第四步,在總表中根據(jù)品牌匯總銷(xiāo)售額并排序:
final = result.groupby(’品牌’)[’銷(xiāo)售額’].sum().reset_index().sort_values(’銷(xiāo)售額’, ascending=False)
最后,我們來(lái)看看完整的程序:
import pandas as pdimport osresult = pd.DataFrame()for name in os.listdir('./tables'): try: df = pd.read_excel('./tables/' + name) df[’銷(xiāo)售額’] = df[’訪客數(shù)’] * df[’轉(zhuǎn)化率’] * df[’客單價(jià)’] df_sum = df.groupby(’品牌’)[’銷(xiāo)售額’].sum().reset_index() result = pd.concat([result, df_sum]) except: print(name) passfinal = result.groupby(’品牌’)[’銷(xiāo)售額’].sum().reset_index().sort_values(’銷(xiāo)售額’, ascending=False)pd.set_option(’display.float_format’, lambda x: ’%.2f’ % x)print(final.head())
最后的結(jié)果是這樣的:
品牌 銷(xiāo)售額15 品牌-5 1078060923.628 品牌-17 1064495314.964 品牌-13 1038560274.213 品牌-12 1026115153.0013 品牌-3 1006908609.07
可以看到最終的前五已經(jīng)出來(lái)了,整個(gè)程序運(yùn)行起來(lái)還是很快的。
幾分鐘之后,小段就把結(jié)果給小明發(fā)過(guò)去了,小明感動(dòng)得內(nèi)牛滿面,直呼改天請(qǐng)吃飯,拜師學(xué)藝!
總結(jié)
本文主要是想通過(guò)一個(gè)實(shí)際的案例來(lái)向大家展示潘大師(Pandas)的魅力,特別是應(yīng)用于這種表格處理,可以說(shuō)是太方便了。寫(xiě)過(guò)程序的可能都有點(diǎn)熟悉的感覺(jué),這種處理方式有點(diǎn)類(lèi)似于 SQL 查詢(xún)語(yǔ)句。潘大師不僅能使我們的程序處理起來(lái)變得更簡(jiǎn)單高效,對(duì)于需要經(jīng)常處理表格的非程序員也是非常友好的,上手起來(lái)也比較簡(jiǎn)單。
示例代碼:https://github.com/JustDoPython/python-examples/tree/master/xianhuan/pandasexcel
以上就是利用python匯總統(tǒng)計(jì)多張Excel的詳細(xì)內(nèi)容,更多關(guān)于python匯總統(tǒng)計(jì)多張Excel的資料請(qǐng)關(guān)注好吧啦網(wǎng)其它相關(guān)文章!
相關(guān)文章:
1. Intellij IDEA 2019 最新亂碼問(wèn)題及解決必殺技(必看篇)2. JS繪圖Flot如何實(shí)現(xiàn)動(dòng)態(tài)可刷新曲線圖3. Android Manifest中meta-data擴(kuò)展元素?cái)?shù)據(jù)的配置與獲取方式4. Android自定義View實(shí)現(xiàn)掃描效果5. CSS3實(shí)現(xiàn)動(dòng)態(tài)翻牌效果 仿百度貼吧3D翻牌一次動(dòng)畫(huà)特效6. 關(guān)于HTML5的img標(biāo)簽7. 未來(lái)的J2EE主流應(yīng)用框架:對(duì)比Spring和EJB38. JS+css3實(shí)現(xiàn)幻燈片輪播圖9. css3溢出隱藏的方法10. ASP.NET MVC獲取多級(jí)類(lèi)別組合下的產(chǎn)品
