為什麼使用了高匿代理IP還是會被限制？

眾所周知，代理 IP可以根據其匿名程度分為三類，分別是透明代理，普通匿名代理和高匿代理。透明代理並不會對使用者的真實IP進行隱藏，普通匿名代理雖然對使用者IP進行了隱藏，但這一行為仍然會被站點伺服器所檢測出來，而高匿代理則是可以完全的將使用者偽裝。不過在實際的使用時，部分使用者會發現自己明明使用了高匿代理，但仍然遭到了限制，這又是什麼原因造成的呢？

 

1.確認是否為高匿代理

目前市面上有許多代理服務商會將普通匿名代理給到使用者，並聲稱自己的代理為高匿代理，實際上使用者很簡單就可以檢測出代理IP的匿名性，並鑑別出自己所使用的代理IP屬於那一類代理。使用者只需要檢視伺服器的HTTP頭資訊，如果使用的確實是高匿代理的話，HTTP_X_FORWARDED_FOR會直接不進行顯示。

2.代理IP利用率較低

如果使用者使用的代理IP是共享代理IP的話，就可能會發生這種情況：代理IP池用的人越多，利用率就越低，同一個代理IP，有很多人用來訪問同一個網站，這種就非常容易被限制,從而導致使用者自身的使用也受到影響。

3.請求頻率過高

爬蟲任務通常任務量較大，而為了按時完成任務，使用者設定在單位時間內的請求頻率過高，從而給目標網站伺服器帶來巨大的壓力。當這種情況持續一段時間後，即便使用者使用了高匿代理也會被目標站點伺服器察覺到異常，並直接進行限制。

4.請求模式過於固定

如果爬蟲程式的請求模式太過固定的話，每個請求花費的時間都會完全一致，非常的有規律，即便使用高匿代理也很容易就會被檢測到從而被限制。所以在使用爬蟲時應當設定隨機模式，調整爬取時間，儘量模擬真實使用者的訪問行為。

IPIDEA已向眾多網際網路知名企業提供服務，對提高爬蟲的抓取效率提供幫助，支援API批量使用，支援多執行緒高併發使用。