python爬蟲需要什麼模組

jerrysun發表於2021-09-11

python爬蟲需要什麼模組

Python爬蟲我們所需的庫

Python的爬蟲我們需要安裝一下幾個庫:

1、BeautifulSoup4
2、lxml
3、requests
4、pymongo

requests 庫是用來在Python中發出標準的HTTP請求。 它將請求背後的複雜性抽象成一個漂亮,簡單的API,以便你可以專注於與服務交

互和在應用程式中使用資料。

Beautiful Soup提供一些簡單的、python式的函式用來處理導航、搜尋、修改分析樹等功能。它是一個工具箱,透過解析文件為使用者提

供需要抓取的資料,因為簡單,所以不需要多少程式碼就可以寫出一個完整的應用程式。Beautiful Soup自動將輸入文件轉換為Unicode編

碼,輸出文件轉換為utf-8編碼。

推薦學習《》。

來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/151/viewspace-2835111/,如需轉載,請註明出處,否則將追究法律責任。

相關文章