堆糖網爬蟲(根據關鍵字下載圖片)

GreenSunIT發表於2021-10-24

一、分析過程

  1. 開啟charles,訪問堆糖網,輸入關鍵字點選搜尋,觀察charles結果
    image
    發現這裡傳了兩個引數,一個是kw關鍵字,和一個type
    下面我們拖動進度條,繼續往下瀏覽,看介面會發生哪些變化

image
這個介面是新增的,請求的引數也包含了我們的關鍵字,而且多了一些不知道是什麼的引數,但是看第二個引數是24
繼續往下瀏覽

image
發現每觸發一次介面這個值都會增加24

image
每觸發一次介面返回24張圖片,那我每次都給他加24就好了。

image
看返回的資料是json型別的,標出的就是圖片的url地址,根據json取到,再存到本地就可以了。

這個站還是比較簡單的,不需要登入,而且變化的值也就那麼幾個引數

工具成品:堆糖網圖片批量下載工具

相關文章