在實際的爬蟲抓取的過程中，由於會存在惡意採集或者惡意攻擊的情況，很多網站都會設定相應的防爬取機制，通常防爬程式都是通過ip來識別機器人使用者的，因此充足可用的ip資訊可以為我們解決很多爬蟲中的實際問題。
通常一些爬蟲開發者為了能夠正常的採集資料，會選擇減慢採集速度或者是去網上找一些免費的代理ip，但是網上很多的免費ip都不可用，可用的也很可能不穩定，因此怎麼樣在不侵犯對方利益的前提下正常的採集資料就成為了問題所在。但是，也並不是意味著一點辦法都沒有。
1、使用代理ip：在一個ip資源不能用的時候，想要繼續正常工作，就需要大量穩定的ip資源，網上的確是有很多的免費代理ip，但是需要花時間去找，而且不能保證一定可用。因此這裡給大家推薦——億牛雲HTTP代理，億牛雲HTTP代理有很多可用穩定的ip資源，可以滿足大量的需求，這裡可以給大家一個小技巧，在一個ip沒有被禁止訪問之前，及時換下一個ip，然後可以迴圈使用，節省一點資源。
2、使用HTTP代理：HTTP代理可以起到增加緩衝以達到提高訪問速度的目的，通常代理伺服器都會設定一個很大的緩衝區，這樣當網站的資訊經過時，就會儲存下來相應的資訊，下次再瀏覽同樣的網站或者是同樣的資訊，就可以通過上次的資訊直接呼叫，這樣一來就很大程度上的提高了訪問速度。其次，可以隱藏自己的真實ip，來防止自己受到惡意攻擊。億牛雲HTTP代理有不同的HTTP代理伺服器介面，可以解決抓取速度以及ip的問題。
當然，也有人會推薦使用撥號網路或者是斷網撥號的方法，但是這種方法ip重複的概率很大，個人還是建議採用代理ip。
總結：想要應對ip禁止訪問的問題，需要大量穩定可用的ip資源，至於怎麼樣選擇，全看各位自己的偏好了。