所花時間(包括上課): |
2h |
程式碼量(行): |
150左右 |
搏客量(篇): |
1 |
瞭解到的知識點: |
python |
備註(其他): |
進行資料爬取的幾個練習
1、簡易網頁採集器
import requests if __name__ == '__main__':
#UA檢測 #UA偽裝:讓爬蟲對應的請求載體身份標識偽裝成某一款瀏覽器 headers = { 'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/109.0.0.0 Safari/537.36 SLBrowser/9.0.0.10191 SLBChan/103' } url='https://www.sogou.com/web' kw=input('輸入欄位') param = { 'query':kw } response=requests.get(url=url,params=param,headers=headers) page_text =response.text fileName =kw+'.html' with open(fileName, 'w', encoding='utf-8') as fp: fp.write(page_text) print('爬取資料完成')
顯示效果