利用python匯總統(tǒng)計(jì)多張Excel
為什么越來(lái)越多的非程序員白領(lǐng)都開(kāi)始學(xué)習(xí) Python ?他們可能并不是想要學(xué)習(xí) Python 去爬取一些網(wǎng)站從而獲得酷酷的成就感,而是工作中遇到好多數(shù)據(jù)分析處理的問(wèn)題,用 Python 就可以簡(jiǎn)單高效地解決。本文就通過(guò)一個(gè)實(shí)際的例子來(lái)給大家展示一下 Python 是如何應(yīng)用于實(shí)際工作中高效解決復(fù)雜問(wèn)題的。
背景
小明就職于一家戶外運(yùn)動(dòng)專(zhuān)營(yíng)公司,他們公司旗下有好多個(gè)品牌,并且涉及到很多細(xì)分的行業(yè)。小明在這家公司任數(shù)據(jù)分析師,平時(shí)都是通過(guò) Excel 來(lái)做數(shù)據(jù)分析的。今天老板丟給他一個(gè)任務(wù):下班前篩選出集團(tuán)公司旗下最近一年銷(xiāo)售額前五名的品牌以及銷(xiāo)售額。
對(duì)于 Excel 大佬來(lái)說(shuō),這不就是分分鐘的事嗎?小明并沒(méi)有放在眼里,直到市場(chǎng)部的同事將原始的數(shù)據(jù)文件發(fā)給他,他才意識(shí)到事情并沒(méi)有那么簡(jiǎn)單:
這并不是想象中的排序取前五就行了。這總共有90個(gè)文件,按常規(guī)的思路來(lái)看,他要么將所有文件的內(nèi)容復(fù)制到一張表中進(jìn)行分類(lèi)匯總,要么將每張表格進(jìn)行分類(lèi)匯總,然后再最最終結(jié)果進(jìn)行分類(lèi)匯總。
想想這工作量,再想想截止時(shí)間,小明撓了撓頭,感覺(jué)到要漸漸頭禿。
思路分析
這種體力活,寫(xiě)程序解決是最輕松的啦。小明這時(shí)候想到了他的程序員好朋友小段,于是他把這個(gè)問(wèn)題拋給了小段。
小段縷了下他那所剩無(wú)幾的頭發(fā),說(shuō):so easy,只需要找潘大師即可。
小明說(shuō):你搞不定嗎?還要找其他人!
小段苦笑說(shuō):不不不,潘大師是 Python 里面一個(gè)處理數(shù)據(jù)的庫(kù),叫 Pandas ,俗稱(chēng) 潘大師。
小明說(shuō):我不管什么大師不大師,就說(shuō)需要多久搞定。
小段說(shuō):給我?guī)追昼妼?xiě)程序,再跑幾秒鐘就好了!
小明發(fā)過(guò)去了膜拜大佬的表情。
小段略微思考了下,整理了一下程序思路:
計(jì)算每張表每一行的銷(xiāo)售額,用“訪客數(shù) * 轉(zhuǎn)化率 * 客單價(jià)”就行。 將每張表格根據(jù)品牌匯總銷(xiāo)售額。 將所有表格的結(jié)果匯總成一張總表 在總表中根據(jù)品牌匯總銷(xiāo)售額并排序編碼
第零步,讀取 Excel :
import pandas as pddf = pd.read_excel('./tables/' + name)
第一步,計(jì)算每張表格內(nèi)的銷(xiāo)售額:
df[’銷(xiāo)售額’] = df[’訪客數(shù)’] * df[’轉(zhuǎn)化率’] * df[’客單價(jià)’]
第二步,將每張表格根據(jù)品牌匯總銷(xiāo)售額:
df_sum = df.groupby(’品牌’)[’銷(xiāo)售額’].sum().reset_index()
第三步,將所有表格的結(jié)果匯總成一張總表:
result = pd.DataFrame()result = pd.concat([result, df_sum])
第四步,在總表中根據(jù)品牌匯總銷(xiāo)售額并排序:
final = result.groupby(’品牌’)[’銷(xiāo)售額’].sum().reset_index().sort_values(’銷(xiāo)售額’, ascending=False)
最后,我們來(lái)看看完整的程序:
import pandas as pdimport osresult = pd.DataFrame()for name in os.listdir('./tables'): try: df = pd.read_excel('./tables/' + name) df[’銷(xiāo)售額’] = df[’訪客數(shù)’] * df[’轉(zhuǎn)化率’] * df[’客單價(jià)’] df_sum = df.groupby(’品牌’)[’銷(xiāo)售額’].sum().reset_index() result = pd.concat([result, df_sum]) except: print(name) passfinal = result.groupby(’品牌’)[’銷(xiāo)售額’].sum().reset_index().sort_values(’銷(xiāo)售額’, ascending=False)pd.set_option(’display.float_format’, lambda x: ’%.2f’ % x)print(final.head())
最后的結(jié)果是這樣的:
品牌 銷(xiāo)售額15 品牌-5 1078060923.628 品牌-17 1064495314.964 品牌-13 1038560274.213 品牌-12 1026115153.0013 品牌-3 1006908609.07
可以看到最終的前五已經(jīng)出來(lái)了,整個(gè)程序運(yùn)行起來(lái)還是很快的。
幾分鐘之后,小段就把結(jié)果給小明發(fā)過(guò)去了,小明感動(dòng)得內(nèi)牛滿面,直呼改天請(qǐng)吃飯,拜師學(xué)藝!
總結(jié)
本文主要是想通過(guò)一個(gè)實(shí)際的案例來(lái)向大家展示潘大師(Pandas)的魅力,特別是應(yīng)用于這種表格處理,可以說(shuō)是太方便了。寫(xiě)過(guò)程序的可能都有點(diǎn)熟悉的感覺(jué),這種處理方式有點(diǎn)類(lèi)似于 SQL 查詢語(yǔ)句。潘大師不僅能使我們的程序處理起來(lái)變得更簡(jiǎn)單高效,對(duì)于需要經(jīng)常處理表格的非程序員也是非常友好的,上手起來(lái)也比較簡(jiǎn)單。
示例代碼:https://github.com/JustDoPython/python-examples/tree/master/xianhuan/pandasexcel
以上就是利用python匯總統(tǒng)計(jì)多張Excel的詳細(xì)內(nèi)容,更多關(guān)于python匯總統(tǒng)計(jì)多張Excel的資料請(qǐng)關(guān)注好吧啦網(wǎng)其它相關(guān)文章!
相關(guān)文章:
1. springboot整合Mybatis-plus的實(shí)現(xiàn)2. 如何用VUE和Canvas實(shí)現(xiàn)雷霆戰(zhàn)機(jī)打字類(lèi)小游戲3. 常用設(shè)計(jì)模式之迭代器模式及其PHP實(shí)現(xiàn)(Yii框架)4. jsp文件下載功能實(shí)現(xiàn)代碼5. PHP里10個(gè)鮮為人知但卻非常有用的函數(shù)6. Python搭建Keras CNN模型破解網(wǎng)站驗(yàn)證碼的實(shí)現(xiàn)7. ajax請(qǐng)求后臺(tái)得到j(luò)son數(shù)據(jù)后動(dòng)態(tài)生成樹(shù)形下拉框的方法8. Java 在PDF中添加條形碼的兩種方法9. css進(jìn)階學(xué)習(xí) 選擇符10. Spring MVC+ajax進(jìn)行信息驗(yàn)證的方法
