安裝Scrapy（Windows下Python的爬蟲環境）

如果沒有安裝Pyhton環境可以按照http://write.blog.csdn.net/postedit/78942650安裝，以下以2.7為例。

我的Python安裝在D盤（以下均以此為例），在“D:\Python27\Scripts”目錄下，按住“shift”鍵，在資料夾空白處右擊選擇“在此處開啟命令視窗”，在開啟的命令列視窗的“D:\Python27\Scripts>”下進行以下安裝操作。

①安裝setuptools

python -m pip install  -U pip setuptools

②安裝Zope.Interface

下載地址： https://pypi.python.org/pypi/zope.interface/4.4.2#downloads

最下面選擇zope.interface-4.4.2.win32-py2.7.exe 下載後執行安裝即可，Python命令列下

import zope.interface

不報錯即視為安裝成功。

③安裝Twisted

python -m pip install  -U pip twisted

④安裝w3lib

python -m pip install  -U pip w3lib

⑤安裝pyOpenSSL

python -m pip install  -U pip pyOpenSSL

⑥安裝VCForPython27.msi

下載地址： https://www.microsoft.com/en-us/download/details.aspx?id=44266

⑦安裝libxml2

下載地址： https://www.lfd.uci.edu/~gohlke/pythonlibs/

找到Libxml-python

選擇第一個下載，

①將下載的字尾為“.whl”的檔案拷貝到“D:\Python27\Scripts”目錄下；

②按住“shift”鍵，在資料夾空白處右擊選擇“在此處開啟命令視窗”；

③命令列輸入

pip install libxml2_python-2.9.3-cp27-none-win32.whl

見到successfully installed則完成安裝。

然後輸入

python -m pip install  -U pip lxml

⑧安裝scrapy

python -m pip install  -U pip scrapy

⑨安裝PyWin32

pip install pypiwin32