如何測試該海外HTTP代理適合爬蟲使用？

有很多人在做海外爬蟲業務時需要引入代理IP去爬取內容，為了業務能夠持續執行，需要不斷構造、維護、驗證代理IP，為了繞過服務端對IP和頻率的限制，阻止服務端獲取真正的IP地址。

那麼哪家海外HTTP代理適合爬蟲使用？

下面我們可以透過一下測試標準來檢驗該海外HTTP代理是否合適爬蟲使用。

1、可用率

可用率就是測試的代理ip中可以正常使用的比率。假設我們無法使用這個代理去請求某個網站或者請求超時，那麼就代表這個代理ip是不可用的。比如說你的測試樣本大小是1000個，就提取1000個代理，看看這1000個代理裡面可用的比率是多少。

2、響應速度

爬蟲代理的響應速度可以用耗費時間來衡量，就是你測試的時候使用的代理ip從請求網站到網站響應所耗費的時間，響應時間越短那麼速度肯定越快。這裡需要注意的是響應速度要根據使用代理機器所在的地理位置來判斷，不同的地理位置會有差異。

3、穩定性

代理ip的資源是否穩定會直接影響到工作進度和資料結果。這個主要看測試的時候連線是否會超時，如果測試時候發現用第一次響應特別快，但是下一次請求等了60秒才得到響應，甚至有更長的時間。那麼這種代理就是極其不穩定的，相當影響爬取效率。

4、服務性

最後一定在測試的過程中看看這家的售後服務怎麼樣，這個是不容易忽視的一點，假如測試的時候什麼問題都沒有，但是在使用過程中出現了問題，找不人也是得不償失的，還是會影響工作，所以售後也很重要！

最後給大家推薦幾款我一直使用感受不錯的海外HTTP代理商，供大家選擇。

一：Smartproxy

有靜態和動態兩種住宅代理，目前還有即將開放的資料中心代理、現在目前IP可以精準定位城市級了。

優點：價格比較實惠，相比於其他海外IP代理確實便宜了不少，5000萬+IP池，每個月都會更新IP池，有效保證乾淨度，連通率高達99.2%，還擁有海外IP ads免費測試，沒有寬度限制，白名單代理列表，支援http、https和Socks5協議，按流量收費。

缺點：代理的服務套餐少，可選擇性單薄，但看到官網後續會開展其他服務套餐。

二：luminati

2014年成立，個別可以支援退款但以個人名義購買不支援，最低價500美元起售，隱匿性不如前面幾家，價格確實很貴。

優點：有中文客服，流暢的操作介面，可定製化訂購代理，可在移動終端或計算機上使用，賬戶密碼授權，使用起來很方便，支援HTTP(s)和Socks協議。

缺點：太貴了，不支援API提取方式，支付方式不便利，隱匿性稍差。

三：Proxybonanza
Proxybonanza是歐盟註冊的代理服務提供商，自2008年開始運營，主要是提供共享代理，這家共享代理伺服器都位於美國，適合在美國衝浪，但是不能用於除了美國其他以外的地方，而且不提供免費試用。

這家為Firefox和Chrome開發了附加元件，這些載入項可以與其它提供商的代理一起使用。

優點：30天退款保證，支援Paypal、銀行轉帳和比特幣付款
缺點：不提供免費試用，共享代理只支援美國。