使用了lua-resty-http庫進行 爬蟲

lua-resty-http是一個基於OpenResty的HTTP客戶端庫，用於在Lua中進行HTTP請求和響應的處理。它提供了簡單易用的介面，可以方便地進行網頁抓取和爬蟲開發。

使用lua-resty-http進行爬蟲，需要先安裝OpenResty和lua-resty-http庫，並將其引入到Lua指令碼中。然後，可以使用lua-resty-http庫提供的函式來傳送HTTP請求和處理HTTP響應。

下面是使用lua-resty-http進行爬蟲的簡單示例：

local http = require("resty.http")

-- 建立HTTP客戶端例項

local httpc = http.new()

-- 傳送GET請求

local res, err = httpc:request_uri("jshk.com.com.cn", {

  method = "GET",

})

if not res then

  ngx.say("請求失敗: ", err)

  return

end

-- 列印HTTP響應狀態碼和內容

ngx.say("狀態碼: ", res.status)

ngx.say("內容: ", res.body)

-- 關閉HTTP客戶端

httpc:close()

在上面的示例中，首先透過require("resty.http")引入lua-resty-http庫。然後，透過http.new()建立一個HTTP客戶端例項。接下來，使用httpc:request_uri()函式傳送GET請求，並傳入目標URL和請求引數。最後，透過res.status和res.body可以獲取到HTTP響應的狀態碼和內容。

除了基本的GET請求，lua-resty-http還支援POST請求、設定請求頭、傳遞查詢引數、處理響應頭等功能。具體的使用方法可以參考lua-resty-http的官方檔案。

需要注意的是，lua-resty-http是基於OpenResty的，所以在使用之前需要先安裝和配置好OpenResty環境。另外，由於爬蟲往往需要處理大量的HTTP請求，建議使用連線池和非同步請求等技術來提高效率和效能。

總結起來，lua-resty-http是一個方便的HTTP客戶端庫，可以在Lua中進行HTTP請求和響應的處理。透過引入lua-resty-http庫，建立HTTP客戶端例項，傳送HTTP請求並處理HTTP響應，可以實現簡單的爬蟲功能。在使用lua-resty-http進行爬蟲時，需要先安裝和配置好OpenResty環境，並根據需要使用連線池和非同步請求等技術來提高效率和效能。