億牛雲代理yyds資料化時代，我們即使要做個小小的資料分析

資料化時代，我們即使要做個小小的資料分析，也是需要抓取非常多的網頁資料來分析結果，這單靠人工獲取資料是不現實的，因此大家都是使用各種採集器或者直接使用爬蟲去爬取資料的。就像無論網際網路行業發展到何種地步，“資源”永遠是任何網際網路公司必不可少的彈藥糧草，那麼對於爬蟲來說代理ip也是必不可少的彈藥糧草。

幾乎99%的爬蟲工作者都會網上選擇購買代理IP的方法去解決網站限制ip訪問的困難，但是網上各種評測，讓人眼花繚亂，其實都是廣告軟文，不要太過較真，選擇代理IP要具體情況具體分析。一家穩定的，靠譜的代理商是很重要的，大家可以關注下億牛雲代理，長期和企業合作，有專業的團隊支撐，一流的服務。提供的ip池比較大，定時更新，提供多種代理的使用方式，能滿足客戶的大量資料需求。

這裡我們簡單舉例，使用億牛雲提供的爬蟲代理動態轉發模式去訪問某個目標網站：

#! -*- encoding:utf-8 -*-
    import requests
    import random
    # 要訪問的目標頁面
    targetUrl = "
    # 要訪問的目標HTTPS頁面
    # targetUrl = "
    # 代理伺服器(產品官網 )
    proxyHost = "t.16yun.cn"
    proxyPort = "31111"
    # 代理驗證資訊
    proxyUser = "username"
    proxyPass = "password"
    proxyMeta = "http://%(user)s:%(pass)s@%(host)s:%(port)s" % {
        "host" : proxyHost,
        "port" : proxyPort,
        "user" : proxyUser,
        "pass" : proxyPass,
    }
    # 設定 http和https訪問都是用HTTP代理
    proxies = {
        "http"  : proxyMeta,
        "https" : proxyMeta,
    }
    #  設定IP切換頭
    tunnel = random.randint(1,10000)
    headers = {"Proxy-Tunnel": str(tunnel)}
    resp = requests.get(targetUrl, proxies=proxies, headers=headers)
    print resp.status_code
    print resp.text

關於更多的示例可以去官網瞭解，有了代理的輔助，網站限制ip的訪問就不是什麼大問題了。