python 3.6.2 安裝與執行 Scrapy 問題與解決

python 3.6.2 安裝與執行 Scrapy 問題與解決

Scrapy官方安裝指引

Scrapy依賴：

• lxml, 一個高效的XML和HTML解析器
• parsel, 一個寫在lxml之上的HTML / XML資料提取庫
• w3lib, ，一個用於處理URL和網頁編碼的多功能助手扭曲，非同步網路框架
• twisted, 非同步網路框架,如twisted安裝失敗。參考python 3.6 安裝 Twisted 錯誤與解決
• cryptography and pyOpenSSL,以處理各種網路級的安全需求

問題如下：

1. 報錯問題：twisted
   解決方式：到https://www.lfd.uci.edu/~gohlke/pythonlibs/下載Twisted-17.9.0-cp36-cp36m-win32.whl。注意，你的python 是64位的就下載64位版本，是32位就下載32位版本。
   執行：pip install Twisted-17.9.0-cp36-cp36m-win32.whl

2. 報錯問題：import win32api ImportError: DLL load failed: 找不到指定的模組。
   解決：到https://www.lfd.uci.edu/~gohlke/pythonlibs/下載pywin32-221-cp36-cp36m-win32.whl。注意，你的python 是64位的就下載64位版本，是32位就下載32位版本。
   執行：pip install pywin32-221-cp36-cp36m-win32.whl
   依然報錯-解決：拷貝E:\Program Files\Python\Python36-32\Lib\site-packages\pywin32_system32\*至C:\Windows\System32
   還是報錯-解決：在cmd執行python E:/Program Files/Python/Python36-32/Scripts/pywin32_postinstall.py -install