python安裝scrapy出錯怎麼解決

starkbl發表於2021-09-11

python安裝scrapy出錯怎麼解決

安裝 Scrapy 與安裝其他 Python 包沒有區別,同樣使用如下命令來安裝:

pip install scrapy

如果在命令列視窗中執行該命令,將會看到程式並不立即下載、安裝 Scrapy,而是不斷地下載大量第三方包。

如果在命令列視窗中提示找不到 pip 命令,則也可以透過 python 命令執行 pip 模組來安裝 Scrapy,
例如 python -m pip install scrapy。
這是因為 Scrapy 需要依賴、大量第三方包。典型的,Scrapy 需要依賴如下第三方包:
pyOpenSSL:Python 用於支援 SSL(Security Socket Layer)的包。
cryptography:Python 用於加密的庫。
CFFI:Python 用於呼叫 C 的介面庫。
zope.interface:為 Python 缺少介面而提供擴充套件的庫。
lxml:一個處理 XML、HTML 文件的庫,比 Python 內建的 xml 模組更好用。
cssselect:Python 用於處理 CSS 選擇器的擴充套件包。
Twisted:為 Python 提供的基於事件驅動的網路引擎包。
......

推薦學習

如果在 Python 環境下沒有這些第三方包,那麼 Python 會根據依賴自動下載並安裝它們。這個過程原本沒啥好講的,pip 通常會自動完成整個過程,我們只需要等待即可。但 pip 在自動下載、安裝 Twisted 時會提示以下錯誤:

error:Microsoft Visual C++ 14.0 is required. Get it with "Microsoft Visual 
C++ Build Tools":

按照上面的錯誤提示,我們需要先下載和安裝 Microsoft Visual C++ Build Tools 工具,然後才能安裝 Twisted。為了安裝一個小小的 Twisted 包,難道就需要安裝一個龐大的 Microsoft Visual C++ Build Tools?

答案是否定的,提示上面的錯誤只是因為 pip 自動下載的 Twisted 安裝包有一些缺陷,因此可以先自行下載 Twisted 安裝包。登入 ~gohlke/pythonlibs/ 站點,在該頁面中間查詢“Twisted”專案,可以看到如圖 1 所示的下載連結。

2-1Z3111JPI50.gif

從圖 1 所示的連結可以看到,當前 Twisted 的最新版是 18.9.0,Twisted 為 2.7、3.5、3.6、3.7 等不同版本的 Python 提供了對應的安裝包。由於本教程內容主要以 Python 3.6 為主,因此應該下載 Twisted 的 Python 3.6 版本,其中檔名帶 win32 的是 32 位版本,而帶 win_amd64 的則是 64 位版本,此處還需要根據作業系統的位數選擇對應的版本。

在下載了合適的 Twisted 安裝包後,會得到一個 Twisted-18.9.0-cp36-cp36m-win_amd64.whl 檔案(針對 64 位系統的),該檔案就是 Twisted 安裝包。

執行如下命令來安裝 Twisted 包。

pip install Twisted-18.9.0-cp36-cp36m-win_amd64.whl

在安裝過程中會自動檢查,如有必要,會自動下載並安裝 Twisted 所依賴的第三方包,如 zope.interface、Automat、incremental 等。

在安裝完成後,會提示如下安裝成功的資訊:

Successfully installed Twisted-18.9.0

來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/3705/viewspace-2835297/,如需轉載,請註明出處,否則將追究法律責任。

相關文章