精講RestTemplate第10篇-使用代理作為跳板傳送請求

字母哥部落格發表於2020-08-18
REST

本文是精講RestTemplate第10篇，前篇的blog訪問地址如下：

本節我們要為大家介紹一下，如何在使用RestTemplate傳送請求的時候使用代理Proxy。至於為什麼要使用代理，給大家舉一個簡單的例子：一些做過爬蟲的同學可能都知道，當爬蟲高頻的多次訪問一個網站資料，可能導致請求客戶端Ip被封鎖的可能。很多情況下，做爬蟲的企業就維護一個代理IP池，每傳送一次請求，就更換一次IP。
代理Proxy作為跳板成為服務的直接訪問者，代理使用者（真正的客戶端）是間接訪問服務。這樣在服務端看來，每次請求是代理髮出的，從代理IP池中一直更換代理髮送請求，這樣能夠降低IP封鎖的可能。

我們本節就來為大家介紹，作為一個代理使用者，該如何使用RestTemplate傳送請求的時候使用代理Proxy。

一、搭建一個代理伺服器

筆者只從知識的層面去講解使用方法，所以不做蠅營狗苟的勾當。代理伺服器還是由我自己來搭建用來測試，在我的一個CentOS伺服器上安裝tinyproxy，tinyproxy可以提供代理服務。

# 安裝tinyproxy 命令
sudo yum install tinyproxy -y

編輯tinyproxy的配置檔案vim /etc/tinyproxy/tinyproxy.conf。為該代理配置允許訪問的使用者客戶端ip，也就是我家的ip，所以這個代理服務只能我用，其他人用不了。

# 代理服務埠
Port 1080
# 允許哪個客戶端使用該代理程式？
Allow xxx.xxx.xxx.xxx

啟動tinyproxy提供代理服務，最好檢查一下防火牆是否開放了1080埠。

systemctl start tinyproxy.service

二、用於測試的服務端

  • 我們這次要訪問的服務端是：http://www.httpbin.org, 這個網站是提供線上的HTTP訪問服務的網站。我們可以用它進行測試。
  • http://www.httpbin.org/ip是我們本次要訪問的服務，響應結果是訪問者的IP。

我在家裡使用電腦訪問這個服務的時候結果如下：

上圖沒有使用代理，所以返回的是我家的ip。如果我使用代理訪問，返回結果應該是proxy代理伺服器的ip地址。

三、代理使用者RestTemplate

我的第一小節中的代理伺服器的ip是88.99.10.251，tinyproxy代理服務埠1080。下文程式碼通過SimpleClientHttpRequestFactory設定訪問代理

@SpringBootTest
class ProxyTests {

   @Resource
   private RestTemplate restTemplate;

   @Test
   void testProxyIp() {

      String url = "http://www.httpbin.org/ip";

      SimpleClientHttpRequestFactory requestFactory = new SimpleClientHttpRequestFactory();
      requestFactory.setProxy(
         new Proxy(
            Proxy.Type.HTTP,
            new InetSocketAddress("88.99.10.251", 1080)  //設定代理服務
         )
      );
      restTemplate.setRequestFactory(requestFactory);
      //傳送請求
      String result = restTemplate.getForObject(url, String.class);
      System.out.println(result);  //列印響應結果
   }

}

代理型別可以是HTTP也可以是SOCKS。下圖是 "http://www.httpbin.org/ip" 的請求響應結果，返回的是代理伺服器的ip，而不是我家裡的ip。說明我們為RestTemplate 設定的代理生效了。

歡迎關注我的部落格，裡面有很多精品合集

  • 本文轉載註明出處（必須帶連線，不能只轉文字）：字母哥部落格。

覺得對您有幫助的話，幫我點贊、分享！您的支援是我不竭的創作動力！ 。另外，筆者最近一段時間輸出瞭如下的精品內容，期待您的關注。

相關文章