Python為什麼叫爬蟲?Python為什麼適合寫爬蟲?

　　今天，小編聽到有人問：Python為什麼叫爬蟲?我想很多人對於這個問題都很好奇，甚至對於Python和爬蟲的概念模糊，今天小編透過這篇文章為大家詳細解答一下。

　　Python與爬蟲有什麼關係?

　　爬蟲一般是指網路資源的抓取，因為Python的指令碼特性，Python易於配置，對字元的處理也非常靈活，加上Python有豐富的網路抓取模組，所以兩者經常聯絡在一起。

　　簡單的用Python自己的Urllib也可以;用Python寫一個搜尋引擎，而搜尋引擎就是一個複雜的爬蟲，從這裡你就瞭解到什麼是Python爬蟲了，是基於Python程式設計而創造出來的一種網路資源的抓取方式，Python並不是爬蟲。

　　Python為什麼適合寫爬蟲?

　　1抓取網頁本身的介面

　　相比其他靜態語言，如Java、C++、C#，Python抓取網頁文件的介面更簡潔;對比動態指令碼語言，如Prel、shell，Python的urllib2包提供了較為完整的訪問網頁文件的API。

　　此外，抓取網頁有時需要模擬瀏覽器的行為，很多網站對於生硬的爬蟲抓取都是封殺的，這時需要我們模擬User agent的行為構造合適的請求，比如：模擬使用者登陸、模擬session/cookie的儲存和設定。

　　2網頁抓取後的處理

　　抓取的網頁通常需要處理，比如過濾HTML標籤、提取文字等;Python的beautifulsoap提供了簡潔的文件處理功能，能用極短的程式碼完成大部分文件的處理。

　　其實以上功能很多語言和工具都可以做，但是用Python更快、更乾淨。