解決python 打包成exe太大的問題
這是一個很長的故事,嫌長的直接看最後的結論
事情經過
上周接瞭個需求,寫瞭個小工具給客戶,他要求打包成exe文件,這當然不是什麼難事。因為除瞭寫Python的,絕大多數人電腦裡都沒有Python編譯器,所以打包成exe,讓用戶(windows)雙擊就可以打開,也算是必備技能瞭。
直接用Pyinstaller,打開cmder:
pyinstaller -Fw E:\test\url_crawler.py
(-F 是打包成一個文件,-w是不出現調試窗口,因為我的小工具裡有GUI,所以不用默認的調試窗口)
等瞭好久,終於完成打包,一看文件,嚯,200M!怪不得打包瞭這麼久…
上網查瞭下資料,有人說,Anaconda裡內置瞭很多庫,打包的時候打包瞭很多不必要的模塊進去,要用純凈的Python來打包。
有點道理,想著裝虛擬機時間更長,準備拿出閑置的筆記本,重新裝個Python來打包。
可剛巧我最近在學flask的時候,用到pipenv,雖然還不懂pipenv的強大之處,但知道它是個管理虛擬環境和包的工具,於是想著能不能用pipenv來創建一個新的python編譯器以運行pyinstaller進行打包。
於是趕緊上網查瞭一下,pipenv pyinstaller,沒有搜到有用的信息,幹脆自己試一試,反正pipenv操作不麻煩。
打開cmder:
#建立虛擬環境 pipenv install #進入虛擬環境 pipenv shell #安裝模塊 pip install 小工具.py裡面用到的模塊 #打包的模塊也要安裝 pip install pyinstaller #開始打包 pyinstaller -Fw E:\test\url_crawler.py
打包完成,一看大小,11M!成功!
後來因為客戶改瞭需求,我又改瞭一下源代碼,然後換瞭個目錄用pipenv重新打包,結果打包完又變回200M!嘗試瞭無數次,怎麼也回不到過去的20M!我都懷疑之前的20M是我的幻覺瞭。
不過無論如何要先交差,200M的“小“工具,用戶體驗肯定不行,所以我就用排除法,看看是哪個模塊占的體積大,再想辦法優化。最先懷疑的是GUI,我幾乎毫不猶豫地認定是它,我用的是PySimpleGUI(強烈推薦,基於tkinter),先把PySimpleGUI的內容註釋掉,再進行打包,你們猜打包完有多大?
198M!
看來是我錯怪他瞭,經過幾次排除,發現瞭罪魁禍首就是:fake_useragent
這個庫是用來偽裝請求頭的,主要是我懶得復制user-agent,所以問題不大,把fake_useragent註釋掉,自己手動粘貼一個user-agent就行瞭
#from fake_useragent import UserAgent #ua = UserAgent() #headers = {'user-agent':ua.random} headers = {'user-agent':'Mozilla/5.0 (Windows NT 6.2; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/30.0.1599.17 Safari/537.36'}
不用fake_useragent,打包成exe是 14M,已經不錯瞭,先交差再說
之後經過瞭多次探索,多次放棄的邊緣(反復刪除創建環境),終於找到瞭完美打包的方法
結論
關鍵點就一個:要在虛擬環境裡安裝pyinstaller
如果你沒有在虛擬環境中安裝pyinstaller,你同樣可以使用pyinstaller命令,但是調用的是你系統原本的那個python編譯器,內含很多關聯庫,導致即使在虛擬環境中,你打包的exe文件仍然非常大。
另外一點要註意的是:要在虛擬環境裡安裝好你py文件中調用的庫,不然打包出來也沒法正常運行。
最後再復習一下正確流程 (前提是安裝好pipenv):
#建立虛擬環境 pipenv install #進入虛擬環境(上一步可省略,因為沒有虛擬環境的話會自動建立一個) pipenv shell #安裝模塊 pip install requests pyquery pysimplegui fake_useragent #打包的模塊也要安裝 pip install pyinstaller #開始打包 pyinstaller -Fw E:\test\url_crawler.py
補充:python代碼如何打包為.exe文件
我使用的python版本為3.6,現在最新的python版本是3.7,但是pyinstaller現在還不支持最新的3.7,所以大傢不要用最新版本的python,最新版本的兼容性不好。
下面我們正式開始吧:
一、我們點擊電腦的開始菜單,搜索cmd。
二、安裝pyinstaller
python3自帶pip installer,所以我們直接輸入pip install pyinstaller並按回車,如下圖
三、用pyinstaller生成.exe文件
1、在D盤新建一個hello.py文件做測試
hello.py的內容為:
2、在命令行中找到hello.py的目錄
3、輸入pyinstaller 文件名.py也就是 pyinstaller hello,py
pyinstaller -F hello.py生成的是單一的exe文件,這樣比較簡便,缺點是exe文件過大
或者:
4、運行成功後,將在hello.py的同目錄下生成一個dist文件夾,打開後找到exe文件運行即可
打開dist文件
雙擊運行一下
成功瞭!你學會瞭嗎?
以上為個人經驗,希望能給大傢一個參考,也希望大傢多多支持WalkonNet。如有錯誤或未考慮完全的地方,望不吝賜教。
推薦閱讀:
- Pyinstaller打包文件太大的解決方案
- python爬蟲實戰之制作屬於自己的一個IP代理模塊
- Python爬蟲報錯<response [406]>(已解決)
- python用faker庫批量生成假數據
- python 虛擬環境詳解