【總結】10款Python爬蟲框架！Python入門

　　Python之所以被稱為“爬蟲”的首選語言，主要原因是因為Python擁有很多爬蟲框架，不僅功能齊全、優點多，而且可以幫助程式設計師以更少的程式碼實現更多的功能，讓工作變得更加輕鬆便利。那麼，你知道Python爬蟲框架有哪些嗎?本文為大家推薦10款常見的框架。

　　1. Scrapy：Scrapy是一個為了抓取網站資料，提取結構性資料而編寫的應用框架，可以應用在包括資料探勘、資訊處理和儲存歷史資料等一系列的程式中，用這個框架你可以輕鬆爬取各種商品資訊。

　　2. Portia：Portia是一個開源視覺化爬蟲工具，可以讓您在不需要任何程式設計知識的情況下爬取網站，簡單註釋您感興趣的Python頁面。

　　3. Newspaper：是可以用來提取新聞、文章和內容分析，使用多執行緒，支援多種程式語言。

　　4. PySpider：Pyspider是一個用Python實現的功能強大的網路爬蟲系統，能夠在瀏覽器介面上進行指令碼的編寫，功能的排程和爬取結果的實時檢視，後端使用常用的資料庫進行抓取結果的儲存，還能定時設定任務與任務優先順序等。

　　5. Crawley：Crawley可以高速爬取對應網站的內容，支援關係和非關聯式資料庫，資料庫可以匯出為JSON、XML等。

　　6. Cola：Cola是一個分散式爬蟲框架，對於使用者來說，只需要編寫幾個特定的函式，而無需關注分散式執行的細節;任務會自動分配到多臺機器上，整個過程對使用者是透明的。

　　7. Python-goose框架：可以提取的資訊包括：文章主體內容、文章圖片、文章中嵌入的影片、元描述、元標籤等。

　　8. Beautiful Soup：是一個可以從HTML或XML檔案中提取資料的Python庫，它能夠透過你喜歡的轉換器實現慣用的文件導航，查詢，修改文件的方式，還可以幫你節省時間。

　　9. Grab：是一個用於構建web刮板的Python框架。藉助Grab，您可以構建各種複雜的網頁抓取工具，從簡單的幾行指令碼到處理數百萬個網頁的複雜非同步網站抓取工具。

　　10. Selenium：是自動化測試工具。它支援各種瀏覽器，如果在這些瀏覽器裡面安裝它，你可以方便地實現Web介面的測試，而且Selenium支援瀏覽器驅動。