厭倦了EXCEL想玩點新花樣?教你利用Python做資料篩選(下)
前言
回顧一下上次的案例模型,我們知道了只要寫3行程式碼,就可以利用python對EXCEL資料做簡單的篩選,說明了python是一門非常簡單和實用的資料分析工具。前面學過的這幾句簡單的語言,不知道你們學會了沒?今天我們依舊是利用ETL+Python的搭配組合,對EXCEL資料進行深層次的加工,這一次我們要做的是高階篩選,請跟著我一起學習吧。
資料來源
我們還是用上次的那份電商訂單明細表,資料已脫敏:
EXCEL 篩選
我們回顧一下上一篇文章裡的資料需求,第一個是根據訂單日期篩選2010年的訂單,第二個是根據訂單等級去篩選高階的訂單,這一次我們把篩選條件進行升級,增加一個條件:在原先兩個篩選條件的基礎上,篩選出利潤金額前10的訂單。如果在EXCEL裡操作的話,可以利用公式或者自身的篩選功能去實現,但是在python又是怎樣實現的呢?
我們可以在pycharm等軟體上寫python指令碼去實現,但是我推薦大家用智分析的ETL功能去實現,智分析的ETL介面裡也提供了python指令碼的編寫頁面,並且很多簡單的需求透過ETL就能實現,無需撰寫複雜的程式碼,非常適合程式設計小白。
載入資料
開啟智分析裡ETL介面,我們先連線好資料來源,我已經提前把EXCEL檔案匯入到了智分析的系統裡,然後把關係資料來源拉拽到展示區裡,並在右邊找到資料來源存放的路徑:
載入完成後,我們可以對資料來源進行預覽:
條件過濾
當完成了資料連線後,接下來就可以利用智分析ETL裡自帶的python指令碼對資料進行各種處理,我們先把python的元件拉拽到中間的展示區,並與上面的關係資料來源進行相連:
以下指令碼是智分析自帶的指令碼,已經提前安裝好了pandas和numpy的庫,後面的函式也寫好了一部分程式碼,只要根據以下指令碼進行擴充套件,便可以在ETL上利用python進行資料清洗:
在輸入python指令碼之前,我們再明確一下要實現的需求,其中前面兩個條件是和上次一樣的,我們無需進行改動,直接複製指令碼過來即可,如果不懂的可以檢視我前一篇文章。第三個條件需要做的是篩選利潤額前10的訂單,這裡我們引用pandas中的sort_values函式進行排序,原理類似於SQL中的order by,可以將資料集依照某個欄位中的資料進行排序,後面接 ascending=False ,即對資料進行降序排列, head(10) 代表的是取前 10 的值:
我們看一下python指令碼執行後的效果,年份這一列把2010年給篩選出來了,訂單這一列篩選的是高階的訂單,訂單利潤這一列的資料按照降序把前10的資料給篩選出來了:
資料輸出
完成python的篩選程式後,我們把執行篩選後的表格進行儲存,可以選擇儲存在資料庫中,也可以儲存在資料集裡,這裡我依舊選擇資料集的儲存方式,因為方便在EXCEL裡進行呼叫:
回到EXCEL裡,點選EXCEL外掛裡的“檢視”,在右邊會出現智分析的資料集皮膚介面,點選下拉選單,便可以找到儲存在雲端的資料集,也可以直接輸入檔名進行搜尋:
點選EXCEL工具欄上的“重新整理”,資料集裡的欄位便會顯示在EXCEL裡,我們就可以利用這些資料在EXCEL裡進行資料分析了:
下篇預告
本文介紹了python的多條件篩選功能,下一篇將講解如何對欄位進行去重,敬請關注。
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69980489/viewspace-2753818/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 懂點EXCEL就行!教你利用Python做資料篩選(上)ExcelPython
- 海量資料“一鍵篩選”,比Excel還好用的篩選功能,更便捷了!Excel
- 教你excel篩選手機號碼公式和excel篩選正常電話號碼Excel公式
- excel怎麼篩選?教你一個簡單粗暴的篩選技巧Excel
- Excel如何篩選出自己想要的資料 excel怎麼篩選出需要的內容Excel
- excel篩選條件怎麼設定 excel怎麼篩選出自己想要的資料Excel
- Python:利用Entrez庫篩選下載PubMed文獻摘要Python
- Python做點選率資料預測Python
- excel批量篩選重複人名 excel怎麼篩選相同的名字Excel
- excel批次篩選重複人名 excel怎麼篩選相同的名字Excel
- excel高階篩選怎麼做 表格的高階篩選怎麼設定條件Excel
- 教你excel表篩選手機號不是11位,wps怎麼篩選不正確的手機號Excel
- excel怎麼快速篩選?Excel
- excel如何篩選出自己想要的部分 excel表格如何篩選特定內容Excel
- 我厭倦了 Redux,那就造個輪子 Rectx:第三集Redux
- 【Python基礎】Python處理Excel檔案,進行篩選資料、排序等操作及儲存新的Excel檔案PythonExcel排序
- Finereport11 類Excel篩選Excel
- excel篩選後複製貼上怎樣跳過隱藏行 如何只貼上到篩選出的部分Excel
- R:SNP資料篩選.R
- KVC原理與資料篩選
- Pandas根據篩選條件對指定excel列進行篩選!神器!Excel
- Python 利用pymysql和openpyxl操作MySQL資料庫並插入Excel資料PythonMySql資料庫Excel
- ztree 篩選選中節點
- 在DataSet資料集中 DataView篩選資料View
- Android沉浸式狀態列還能這樣玩—教你玩出新花樣Android
- 常用資料庫選型!你做對了嗎?資料庫
- 過濾/篩選樹節點
- excel重複項篩選標色 excel表格重複項變色Excel
- Python 利用pandas和mysql-connector獲取Excel資料寫入到MySQL資料庫PythonMySqlExcel資料庫
- Excel資料透視表怎麼做 Excel資料透視表技巧Excel
- zdimension/embed-c:厭倦了安全程式設計?將C程式碼直接嵌入到Rust程式碼中程式設計C程式Rust
- 零售資料分析操作篇14:利用記憶體計算做銷售篩選分析記憶體
- Excel檔案 利用MySQL/Python 實現自動處理資料的功能ExcelMySqlPython
- 對爬塔類卡牌遊戲感到厭倦?試試《冒險公社》吧遊戲
- Element-UI Table 實現篩選資料功能UI
- excel怎麼篩選重複的內容 excel找出重複項並提取Excel
- 電力行業跨網傳資料 這樣做就對了!行業
- 濤思資料 TDengine 徵稿— 利用python指令碼做TDengine效能測試Python指令碼