介面請求重試的8種方法,你用哪種?
來源:三分惡
大家好,我是老三,最近比較忙碌,一個多月沒寫原創文章了,把以前的一篇舊稿整理整理,混一期。
大家都知道老三是做跨境業務的,在跨境業務中,可能第三方的伺服器分佈在世界的各個角落,所以請求三方介面的時候,難免會遇到一些網路問題,這時候需要加入重試機制了,這期就給大家分享幾個介面重試的寫法。
重試機制實現
1. 迴圈重試
這是最簡單也最直接的一種方式。在請求介面的程式碼塊中加入迴圈,如果請求失敗則繼續請求,直到請求成功或達到最大重試次數。
示例程式碼:
int retryTimes = 3;
for(int i = 0; i < retryTimes; i++){
try{
// 請求介面的程式碼
break;
}catch(Exception e){
// 處理異常
Thread.sleep(1000); // 延遲1秒後重試
}
}
這段簡單的示例程式碼裡,直接用了一個for
迴圈來進行重試,最大重試次數設定為3次。同時在發生異常的時候,為了避免頻繁請求,使用Thread.sleep()
加一個適當的延遲。
2. 使用遞迴結構
除了迴圈,還可以使用遞迴來實現介面的請求重試。遞迴是我們都比較熟悉的程式設計技巧,在請求介面的方法中呼叫自身,如果請求失敗則繼續呼叫,直到請求成功或達到最大重試次數。
示例程式碼:
public void requestWithRetry(int retryTimes){
if(retryTimes <= 0) return;
try{
// 請求介面的程式碼
}catch(Exception e){
// 處理異常
Thread.sleep(1000); // 延遲1秒後重試
requestWithRetry(retryTimes - 1);
}
}
這段程式碼裡,我們定義了一個名為requestWithRetry
的方法,其中retryTimes
表示最大重試次數。如果重試次數小於等於0,則直接返回。否則,在捕獲到異常後,我們使用Thread.sleep()
方法來新增一個適當的延遲,然後呼叫自身進行重試。
3.使用網路工具的內建重試機制
我們常用的一些HTTP客戶端通常內建了一些重試機制,只需要在建立對應的客戶端例項的時候進行配置即可,以Apache HttpClient
為例:
4.5+版本:使用 HttpClients.custom().setRetryHandler()
方法來設定重試機制
CloseableHttpClient httpClient = HttpClients.custom()
.setRetryHandler(new DefaultHttpRequestRetryHandler(3, true))
.build();
5.x版本:使用 HttpClients.custom().setRetryStrategy()
方法來設定重試機制
CloseableHttpClient httpClient = HttpClients.custom()
.setRetryStrategy(new DefaultHttpRequestRetryStrategy(3,NEG_ONE_SECOND))
.build();
在上面的示例程式碼中,我們使用DefaultHttpRequestRetryHandler
或DefaultHttpRequestRetryStrategy
來建立一個重試機制,最大重試次數為3次。如果請求失敗,則會自動重試。
Apache HttpClient
還支援自定義重試策略,可以可以實現HttpRequestRetryHandler
介面(4.5+版本)或者RetryStrategy
介面(5.x版本),並根據需要進行重試邏輯的實現。
這是一個自定義重試策略的示例:
CloseableHttpClient httpClient = HttpClients.custom()
.setRetryStrategy((response, executionCount, context) -> {
if (executionCount > 3) {
// 如果重試次數超過3次,則放棄重試
return false;
}
int statusCode = response.getCode();
if (statusCode >= 500 && statusCode < 600) {
// 如果遇到伺服器錯誤狀態碼,則進行重試
return true;
}
// 其他情況不進行重試
return false;
})
.build();
4.使用Spring Retry庫
當在Spring專案中使用重試機制時,可以使用Spring Retry庫來實現。Spring Retry提供了一組註解和工具類,可以方便地為方法新增重試功能。
<dependency>
<groupId>org.springframework.retry</groupId>
<artifactId>spring-retry</artifactId>
<version>1.3.1</version>
</dependency>
Spring Retry的使用有兩種方式,一種是使用RetryTemplate來顯式呼叫需要重試的方法,一種實用註解來自動觸發重試。
顯式使用RetryTemplate
建立RetryTemplate物件並配置重試策略:
RetryTemplate retryTemplate = new RetryTemplate();
// 配置重試策略
RetryPolicy retryPolicy = new SimpleRetryPolicy(3);
retryTemplate.setRetryPolicy(retryPolicy);
// 配置重試間隔策略
FixedBackOffPolicy backOffPolicy = new FixedBackOffPolicy();
backOffPolicy.setBackOffPeriod(1000);
retryTemplate.setBackOffPolicy(backOffPolicy);
在程式碼裡,我們建立了一個RetryTemplate物件,並配置了重試策略和重試間隔策略。這裡使用了SimpleRetryPolicy來指定最大重試次數為3次,使用FixedBackOffPolicy來指定重試間隔為1秒。
使用RetryTemplate呼叫方法:
retryTemplate.execute((RetryCallback<Void, Exception>) context -> {
// 請求介面的程式碼
return null;
});
程式碼裡,我們使用retryTemplate.execute()
方法來執行需要重試的程式碼塊。在RetryCallback
的doWithRetry()
方法中,可以編寫需要重試的邏輯。如果方法執行失敗,RetryTemplate會根據配置的重試策略和重試間隔策略進行重試。
Spring Retry是一個提供重試機制的庫,可以方便地在Spring專案中使用。使用@Retryable註解標記需要重試的方法,如果方法丟擲異常則會自動重試。
@Retryable(value = Exception.class, maxAttempts = 3)
public void request(){
// 請求介面的程式碼
}
Spring Retry提供了多種重試策略和重試間隔策略,我們可以根據具體的業務需求選擇合適的策略:
重試策略: SimpleRetryPolicy:指定最大重試次數。 TimeoutRetryPolicy:指定最大重試時間。 AlwaysRetryPolicy:無條件進行重試。 重試間隔策略: FixedBackOffPolicy:固定間隔重試。 ExponentialBackOffPolicy:指數遞增間隔重試。 UniformRandomBackOffPolicy:隨機間隔重試。
透過配置不同的重試策略和重試間隔策略,可以靈活地控制重試行為。Spring Retry還提供了自定義重試策略和重試間隔策略,可以透過實現RetryPolicy
介面和BackOffPolicy
介面,分別實現自定義的重試策略和重試間隔策略。
使用註解呼叫
除了顯式使用RetryTemplate呼叫,Spring Retry還提供了註解方式來觸發重試。
配置重試切面:
@Configuration
@EnableRetry
public class RetryConfig {
// 配置其他的Bean
}
程式碼裡,我們使用@Configuration
註解將類標記為配置類,使用@EnableRetry
註解啟用重試功能。
使用@Retryable註解標記需要重試的方法:
@Retryable(maxAttempts = 3)
public void request() {
// 請求介面的程式碼
}
我們使用@Retryable
註解標記了request()
方法,指定了最大重試次數為3次。
呼叫被標記的方法:
@Autowired
private HttpService httpService;
httpService.request();
在SpringBoot專案裡使用更加地簡單,使用@EnableRetry註解啟用Spring Retry功能,並在需要進行重試的方法上新增@Retryable註解。
示例程式碼:
@SpringBootApplication
@EnableRetry // 啟用Spring Retry功能
public class MyApplication {
public static void main(String[] args) {
SpringApplication.run(MyApplication.class, args);
}
}
@Service
public class MyService {
@Retryable(value = {MyException.class}, maxAttempts = 3, backoff = @Backoff(delay = 1000))
public void doSomething() {
// 需要進行重試的方法邏輯
}
}
程式碼裡,@EnableRetry註解啟用了Spring Retry功能,@Retryable註解標記了需要進行重試的方法,並指定了重試的異常型別、最大重試次數和重試間隔。
其中,@Backoff註解用於指定重試間隔策略,delay屬性表示每次重試之間的間隔時間。在這個例子中,每次重試之間的間隔時間為1秒。
需要注意的是,@Retryable註解只能標記在public方法上。如果需要在非public方法上使用重試功能,可以使用代理模式實現。
另外,如果需要在重試過程中進行一些特定的操作,比如記錄日誌、傳送訊息等,可以在重試方法中使用RetryContext引數,它提供了一些有用的方法來獲取重試的上下文資訊。例如:
@Service
public class MyService {
@Retryable(value = {MyException.class}, maxAttempts = 3, backoff = @Backoff(delay = 1000))
public void doSomething(RetryContext context) {
// 獲取重試次數
int retryCount = context.getRetryCount();
// 獲取上一次異常
Throwable lastThrowable = context.getLastThrowable();
// 記錄日誌、傳送訊息等操作
// ...
// 需要進行重試的方法邏輯
}
}
5.使用Resilience4j庫
Resilience4j是一個輕量級的,易於使用的容錯庫,提供了重試、熔斷、限流等多種機制。
<dependency>
<groupId>io.github.resilience4j</groupId>
<artifactId>resilience4j-spring-boot2</artifactId>
<version>1.7.0</version>
</dependency>
我們來看下Resilience4j的使用,Resilience4j也支援程式碼顯式呼叫和註解配置呼叫。
透過程式碼顯式呼叫
建立建立一個RetryRegistry物件:
首先,需要建立一個RetryRegistry物件,用於管理Retry例項。可以使用
RetryRegistry.ofDefaults()
方法建立一個預設的RetryRegistry物件。
RetryRegistry retryRegistry = RetryRegistry.ofDefaults();
配置Retry例項:
接下來,可以透過RetryRegistry物件建立和配置Retry例項。可以使用
RetryConfig
類來自定義Retry的配置,包括最大重試次數、重試間隔等。
RetryConfig config = RetryConfig.custom()
.maxAttempts(3)
.waitDuration(Duration.ofMillis(1000))
.retryOnResult(response -> response.getStatus() == 500)
.retryOnException(e -> e instanceof WebServiceException)
.retryExceptions(IOException.class, TimeoutException.class)
.ignoreExceptions(BusinessException.class, OtherBusinessException.class)
.failAfterMaxAttempts(true)
.build();
Retry retry = retryRegistry.retry("name", config);
透過以上程式碼,我們建立了一個名為"name"的Retry例項,並配置了最大重試次數為3次,重試間隔為1秒,當返回結果的狀態碼為500時進行重試,當丟擲WebServiceException異常時進行重試,忽略BusinessException和OtherBusinessException異常,達到最大重試次數後丟擲MaxRetriesExceededException異常。
使用Retry呼叫:
最後,可以使用
Retry
來裝飾和執行需要進行重試的程式碼塊。比如,可以使用Retry.decorateCheckedSupplier()
方法來裝飾一個需要重試的Supplier。
CheckedFunction0<String> retryableSupplier = Retry.decorateCheckedSupplier(retry, () -> {
// 需要進行重試的程式碼
return "result";
});
透過註解呼叫
透過註解的方式,使用Resilience4j來使用重試功能,更加簡潔。
在Spring Boot專案中,可以使用@Retryable
註解來標記需要進行重試的方法。
@Service
public class MyService {
@Retryable(value = {MyException.class}, maxAttempts = 3, backoff = @Backoff(delay = 1000))
public void doSomething() {
// 需要進行重試的方法邏輯
}
}
程式碼裡,@Retryable
註解標記了doSomething()
方法,指定了重試的異常型別為MyException.class
,最大重試次數為3次,重試間隔為1秒。
6.自定義重試工具類
如果說我們不想在專案裡額外地引入一些重試的框架,自己定義一個重試工具類也是可以的,這是我在某個第三方提供的client-sdk裡發現的一套重試工具類,比較輕量級,給大家分享一下。
首先,定義一個實現了
Callback
抽象類的具體回撥類,實現其中的doProcess()
方法來執行需要重試的邏輯。回撥類的doProcess()
方法返回一個RetryResult
物件,表示重試的結果。public abstract class Callback {
public abstract RetryResult doProcess();
}然後,定義一個
RetryResult
類,用於封裝重試的結果。RetryResult
類包含一個isRetry
屬性表示是否需要進行重試,以及一個obj
屬性表示重試的結果物件。public class RetryResult {
private Boolean isRetry;
private Object obj;
// 構造方法和getter方法省略
public static RetryResult ofResult(Boolean isRetry, Object obj){
return new RetryResult(isRetry, obj);
}
public static RetryResult ofResult(Boolean isRetry){
return new RetryResult(isRetry, null);
}
}最後,定義一個
RetryExecutor
類,其中的execute()
方法接收一個重試次數和一個回撥物件,根據重試次數迴圈執行回撥物件的doProcess()
方法,直到達到最大重試次數或回撥物件返回不需要重試的結果。public class RetryExecutor {
public static Object execute(int retryCount, Callback callback) {
for (int curRetryCount = 0; curRetryCount < retryCount; curRetryCount++) {
RetryResult retryResult = callback.doProcess();
if (retryResult.isRetry()) {
continue;
}
return retryResult.getObj();
}
return null;
}
}使用這個自定義的重試工具類時,只需要實現一個繼承自
Callback
的回撥類,並在其中實現具體的重試邏輯。然後,透過呼叫RetryExecutor.execute()
方法來執行重試操作。這裡直接用了一個匿名的實現://最大重試次數
int maxRetryCount = 3;
Object result = RetryExecutor.execute(maxRetryCount, new Callback() {
@Override
public RetryResult doProcess() {
// 執行需要重試的邏輯
// 如果需要重試,返回 RetryResult.ofResult(true)
// 如果不需要重試,返回 RetryResult.ofResult(false, result)
}
});
7.併發框架非同步重試
在有些需要快速響應的場景下,我們可以使用併發框架,來實現非同步的重試。
比如使用執行緒池ThreadPoolExecutor
,把請求介面轉化成一個非同步任務,將任務放入執行緒池中非同步執行,併發地重試請求介面。可以在任務執行完成後,判斷任務執行結果,如果失敗則繼續重試。
int maxRetryTimes = 3;
int currentRetryTimes = 0;
ThreadPoolExecutor executor = new ThreadPoolExecutor(
10, // 核心執行緒數
10, // 最大執行緒數
0L, // 空閒執行緒存活時間
TimeUnit.MILLISECONDS, // 時間單位
new LinkedBlockingQueue<>() // 任務佇列
);
Callable<String> task = () -> {
// 請求介面的程式碼
return "result";
};
Future<String> future;
while (currentRetryTimes < maxRetryTimes) {
try {
future = executor.submit(task);
String result = future.get();
// 判斷任務執行結果
break;
} catch (Exception e) {
currentRetryTimes++;
// 處理異常
try {
Thread.sleep(1000);
} catch (InterruptedException ex) {
Thread.currentThread().interrupt();
}
}
}
在這個示例中,我們直接使用ThreadPoolExecutor
來建立執行緒池,設定核心執行緒數和最大執行緒數為10,使用LinkedBlockingQueue
作為任務佇列。然後,我們定義了一個Callable
型別的任務,用於執行請求介面的程式碼。在重試的過程中,我們使用executor.submit(task)
提交任務並獲得一個Future
物件,透過future.get()
獲取任務的執行結果。如果任務執行成功,則跳出迴圈;如果任務執行失敗,則繼續重試,直到達到最大重試次數。
8. 訊息佇列重試
在某些情況下,我們希望儘可能保證重試的可靠性,不會因為服務中斷,而導致重試任務的丟失,我們可以引入訊息佇列。我們直接把訊息投遞到訊息佇列裡,透過對訊息的消費,來實現重試機制。
使用RocketMQ的示例程式碼如下:
@Component
@RocketMQMessageListener(topic = "myTopic", consumerGroup = "myConsumerGroup")
public class MyConsumer implements RocketMQListener<String> {
@Override
public void onMessage(String message) {
try {
// 請求介面的程式碼
} catch (Exception e) {
// 處理異常
DefaultMQProducer producer = new DefaultMQProducer("myProducerGroup");
producer.setNamesrvAddr("127.0.0.1:9876");
try {
producer.start();
Message msg = new Message("myTopic", "myTag", message.getBytes());
producer.send(msg);
} catch (Exception ex) {
// 處理傳送異常
} finally {
producer.shutdown();
}
}
}
}
上面的程式碼裡,我們使用@RocketMQMessageListener
註解標記MyConsumer
類,並指定了消費者的相關配置,包括消費者組和訂閱的主題。
在onMessage()
方法中,我們處理請求的邏輯。如果請求失敗,我們建立一個RocketMQ的生產者,並將請求重新傳送到訊息佇列中,等待下一次處理。
透過使用訊息佇列(如RocketMQ)來實現重試機制,可以提高系統的可靠性和穩定性。即使在服務中斷的情況下,重試任務也不會丟失,而是等待服務恢復後再次進行處理。
最佳實踐和注意事項
在請求重試的時候,我們也要注意一些關鍵點,以免因為重試,引發更多的問題:
合理設定重試次數和重試間隔時間,避免頻繁地傳送請求,同時也不要設定過大的重試次數,以免影響系統的效能和響應時間。 考慮介面冪等性:如果請求是寫操作,而且下游的服務不保證請求的冪等性,那麼在重試時需要謹慎處理,可以透過查詢等冪等的方式進行重試 在重試過程中,需要考慮併發的問題。如果多個執行緒同時進行重試,可能會導致請求重複傳送或請求順序混亂等問題。可以使用鎖或者分散式鎖來解決併發問題。 在處理異常時,需要根據具體的異常型別來進行處理。有些異常是可以透過重試來解決的,例如網路超時、連線異常等;而有些異常則需要進行特殊的處理,例如資料庫異常、檔案讀寫異常等。 在使用重試機制時,需要注意不要陷入死迴圈。如果請求一直失敗,重試次數一直增加,可能會導致系統崩潰或者資源耗盡等問題。
參考:
[1]. 《Java業務開發常見錯誤100例》
[2]. https://juejin.cn/post/7028947828248412168#heading-9
[3].
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/70024922/viewspace-2992345/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 七種HTTP請求方法HTTP
- Python多種介面請求方式示例Python
- HTTP 協議六種請求方法HTTP協議
- java解決請求跨域的兩種方法Java跨域
- Springboot處理CORS跨域請求的三種方法Spring BootCORS跨域
- GET和POST兩種基本請求方法的區別
- Http請求get與post請求方式的各種相關面試總結HTTP面試
- K8S deployment 重啟的三種方法K8S
- php請求API介面方法PHPAPI
- 配置 gRPC 請求的重試策略RPC
- 在Node.js中發起HTTP請求的5種方法Node.jsHTTP
- 盤點 Spring Boot 解決跨域請求的幾種方法Spring Boot跨域
- 用Python實現線性迴歸,8種方法哪個最高效?Python
- php下請求url的幾種方式PHP
- 基於jQuery的三種AJAX請求jQuery
- gRPC應用實戰:(三)gRPC四種請求模式RPC模式
- python 使用 retrying 重試請求Python
- 8 種方案解決重複提交問題!你選擇哪一種呀?
- Linux幾種轉發請求方案Linux
- POSTMAN HTTP請求的四種方式區別PostmanHTTP
- curl 傳送 POST 請求的四種方式
- 【HTTP】HTTP請求體中的四種格式HTTP
- python介面測試—get請求(一)Python
- python介面測試—post請求(二)Python
- Java 中九種 Map 的遍歷方式,你一般用的是哪種呢?Java
- axios(xhr) 和 fetch 兩種請求方式iOS
- 陣列去重的幾種方法陣列
- 陣列去重的六種方法陣列
- 前端請求後端資料的三種方式!前端後端
- React 中獲取資料的 3 種方法:哪種最好?React
- 【LeetCode】求眾數(四種方法)LeetCode
- 自定義的請求頭,你去哪裡了?
- 介面自動化測試框架--http請求的get、post方法的實現框架HTTP
- 如何根據介面請求型別和請求方法,自動執行對應請求型別
- 簡述六種請求方法,get、head、put、delete、post、options區別delete
- 請列舉幾種可以清除浮動的方法(至少兩種)
- Prometheus多叢集監控的3種方案,你選哪種?Prometheus
- Vue路由切換 & Axios介面取消重複請求Vue路由iOS