一文教你如何实现并发请求的失败自动重试及重试次数限制

2024-06-11 21:04

本文主要是介绍一文教你如何实现并发请求的失败自动重试及重试次数限制,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

需求

在并发接口请求的时候,能够自动对失败的请求进行重发尝试(超过指定重试次数则不再重试),并将最终的结果返回(包含每个请求是否成功、返回结果)

核心思路

img

代码实现

使用案例

为了演示我们代码的最终实现效果,我们使用如下的案例:

js复制代码function request1() {return new Promise((resolve) => {setTimeout(() => {console.log('请求完毕111');resolve(111)}, 1000);})
}
function request2() {return new Promise((resolve, reject) => {setTimeout(() => {console.log('请求完毕222');reject(222)}, 2000);})
}
function request3() {return new Promise((resolve, reject) => {setTimeout(() => {console.log('请求完毕333');reject(333)}, 3000)})
}

如上存在3个异步请求,我们想要并发发送,并获取到它们的请求结果,理想的方式是这样的:

js复制代码new RequestParallelWithRetry([ request1, request2, request3 ]).send().then((value) => {console.log(value);
})

因此,这里我们需要实现一个RequestParallelWithRetry

传入方法标记

根据我们上面提出的思路,我们需要将传入的请求方法进行标记并保存它们的关系,便于后续请求失败时可以利用这个标记来再次调用这个方法

js复制代码class RequestParallelWithRetry {requestListretryCountmap = {}result = []constructor(requestList = [], retryCount = 3) {this.requestList = requestListthis.retryCount = retryCount// 需要给每个方法添加标记this.requestList.forEach((item, index) => {item._index = indexthis.map[ index ] = item})console.log(this.map);}
}

这里我们使用传入的请求列表下标作为标记,并保存起来,打印出来的map结果如下:

img

并发请求发送

之后我们需要实现RequestParallelWithRetry类的send方法,它用来并发发送请求,并且要求能够得知每个请求的执行结果。因为我们这里请求的返回结果都是一个promise对象,因此我们可以利用Promise.allSettled方法来获取所有promise的最终结果:

js复制代码send() {const queue = []this.requestList.forEach(request => {queue.push(request())})Promise.allSettled(queue).then((value) => {console.log('所有请求都完成了', value)})
}

此时,调用new RequestParallelWithRetry([ request1, request2, request3 ]).send()将得到如下的打印结果:

img

可以看到:

  • request2request3都请求失败了(返回rejected
  • 我们此时需要做的其实是将这些所有状态为rejected的请求再次执行直到所有的请求都成功(fulfilled)了(先不考虑重试次数限制的情况)
  • 因此,我们需要递归执行这个过程(发送请求->找到失败的请求->再次发送)

包装请求的执行结果

我们已经知道了我们重复执行那些失败的请求直到成功,但是还存在一个问题:现在我们只能知道失败请求的结果,但是我们无法根据这个结果来找到原先执行请求的方法。因此,我们需要对传入的请求进行一层包装,使得执行的返回结果中包含一个标记,我们能根据这个标记找到这个请求方法:

js复制代码send() {const queue = []this.requestList.forEach(request => {queue.push(this._wrapRequest(request))})Promise.allSettled(queue).then((value) => {console.log('所有请求都完成了', value)})
}
_wrapRequest(request) {return new Promise((resolve, reject) => {request().then((value) => {resolve({value,index: request._index})}).catch(reason => {reject({reason,index: request._index})})})
}

此时,我们就能在请求结果中获取到原先请求方法的标记index了,利用这个标记和已经保存过的map关系映射,就能获取到原先的请求方法,从而再次调用

img

请求失败再次调用

js复制代码send() {let queue = []this.requestList.forEach(request => {queue.push(this._wrapRequest(request))})const sendAllSettled = () => {Promise.allSettled(queue).then((value) => {queue = []console.log('所有请求都完成了', value);// 检查是否存在失败的请求value.forEach(result => {if (result.status === "rejected") {const { reason, index } = result.reasonconst request = this.map[ index ]queue.push(this._wrapRequest(request))}})//  检查队列中是否还需要发送请求if (queue.length) {sendAllSettled()}})}sendAllSettled()
}

这里,我们在send方法内部递归调用sendAllSettled方法,sendAllSettled方法做的事情很简单:

  1. queue队列中的请求发送出去
  2. 将失败的请求重新添加到队列中,再次发送

重试次数限制

在上面的代码中,我们已经实现了并发请求失败时自动重新尝试,但是在实际开发中,我们并不能让它无限制地重试下去,而是应该指定重试的次数,一旦超过这个次数了,就不再重试

具体的实现也很简单,只需要给每个请求方法添加一个记录重试次数的属性_retryCount即可,一旦这个_retryCount超过retryCount就不再重试了

具体代码如下:

js复制代码send() {let queue = []this.requestList.forEach(request => {request._retryCount = 0queue.push(this._wrapRequest(request))})const sendAllSettled = () => {Promise.allSettled(queue).then((value) => {queue = []console.log('所有请求都完成了', value);// 检查是否存在失败的请求value.forEach(result => {if (result.status === "rejected") {const { reason, index } = result.reasonconst request = this.map[ index ]if (request._retryCount < this.retryCount) {queue.push(this._wrapRequest(request))request._retryCount++}}})//  检查队列中是否还需要发送请求if (queue.length) {sendAllSettled()}})}sendAllSettled()
}

并发请求执行结果返回

上面的代码中,我们已经实现了并发请求的失败重试以及重试次数的限制了,最后我们需要将并发请求的最终执行结果返回给用户

由于并发请求是一系列的异步操作,因此我们对于send方法的返回结果也应该是一个promise对象,这个对象包含了每个请求的执行结果(成功或失败)和返回结果

具体实现如下:

js复制代码send() {return new Promise((resolve) => {// 1. 将所有的网络请求进行包装,使得其返回结果中携带有_index// 2. 发送所有的网络请求let queue = []this.requestList.forEach(request => {// 3. 记录每个请求的重试次数request._retryCount = 0queue.push(this._wrapRequest(request))})const sendAllSettled = () => {Promise.allSettled(queue).then((value) => {// 3. 清除发送队列queue = []console.log('所有请求都完成了', value);// 4. 检查是否存在失败的请求value.forEach(result => {if (result.status === "fulfilled") {const { value, index } = result.valuethis.result[ index ] = { value, status: 'fulfilled' }}else if (result.status === "rejected") {const { reason, index } = result.reasonconst request = this.map[ index ]if (request._retryCount < this.retryCount) {queue.push(this._wrapRequest(request))request._retryCount++} else {this.result[ index ] = { reason, status: 'rejected' }}}})//  5. 检查队列中是否还需要发送请求if (queue.length) {sendAllSettled()} else {resolve(this.result)}})}sendAllSettled()})
}

最终用户的调用形式和执行结果会是这样的:

js复制代码new RequestParallelWithRetry([ request1, request2, request3 ]).send().then((value) => {console.log(value);
})

这篇关于一文教你如何实现并发请求的失败自动重试及重试次数限制的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1052276

相关文章

Redis客户端连接机制的实现方案

《Redis客户端连接机制的实现方案》本文主要介绍了Redis客户端连接机制的实现方案,包括事件驱动模型、非阻塞I/O处理、连接池应用及配置优化,具有一定的参考价值,感兴趣的可以了解一下... 目录1. Redis连接模型概述2. 连接建立过程详解2.1 连php接初始化流程2.2 关键配置参数3. 最大连

Python实现网格交易策略的过程

《Python实现网格交易策略的过程》本文讲解Python网格交易策略,利用ccxt获取加密货币数据及backtrader回测,通过设定网格节点,低买高卖获利,适合震荡行情,下面跟我一起看看我们的第一... 网格交易是一种经典的量化交易策略,其核心思想是在价格上下预设多个“网格”,当价格触发特定网格时执行买

SQL Server跟踪自动统计信息更新实战指南

《SQLServer跟踪自动统计信息更新实战指南》本文详解SQLServer自动统计信息更新的跟踪方法,推荐使用扩展事件实时捕获更新操作及详细信息,同时结合系统视图快速检查统计信息状态,重点强调修... 目录SQL Server 如何跟踪自动统计信息更新:深入解析与实战指南 核心跟踪方法1️⃣ 利用系统目录

python设置环境变量路径实现过程

《python设置环境变量路径实现过程》本文介绍设置Python路径的多种方法:临时设置(Windows用`set`,Linux/macOS用`export`)、永久设置(系统属性或shell配置文件... 目录设置python路径的方法临时设置环境变量(适用于当前会话)永久设置环境变量(Windows系统

python运用requests模拟浏览器发送请求过程

《python运用requests模拟浏览器发送请求过程》模拟浏览器请求可选用requests处理静态内容,selenium应对动态页面,playwright支持高级自动化,设置代理和超时参数,根据需... 目录使用requests库模拟浏览器请求使用selenium自动化浏览器操作使用playwright

SpringBoot监控API请求耗时的6中解决解决方案

《SpringBoot监控API请求耗时的6中解决解决方案》本文介绍SpringBoot中记录API请求耗时的6种方案,包括手动埋点、AOP切面、拦截器、Filter、事件监听、Micrometer+... 目录1. 简介2.实战案例2.1 手动记录2.2 自定义AOP记录2.3 拦截器技术2.4 使用Fi

Python对接支付宝支付之使用AliPay实现的详细操作指南

《Python对接支付宝支付之使用AliPay实现的详细操作指南》支付宝没有提供PythonSDK,但是强大的github就有提供python-alipay-sdk,封装里很多复杂操作,使用这个我们就... 目录一、引言二、准备工作2.1 支付宝开放平台入驻与应用创建2.2 密钥生成与配置2.3 安装ali

Spring Security 单点登录与自动登录机制的实现原理

《SpringSecurity单点登录与自动登录机制的实现原理》本文探讨SpringSecurity实现单点登录(SSO)与自动登录机制,涵盖JWT跨系统认证、RememberMe持久化Token... 目录一、核心概念解析1.1 单点登录(SSO)1.2 自动登录(Remember Me)二、代码分析三、

PyCharm中配置PyQt的实现步骤

《PyCharm中配置PyQt的实现步骤》PyCharm是JetBrains推出的一款强大的PythonIDE,结合PyQt可以进行pythion高效开发桌面GUI应用程序,本文就来介绍一下PyCha... 目录1. 安装China编程PyQt1.PyQt 核心组件2. 基础 PyQt 应用程序结构3. 使用 Q

Python实现批量提取BLF文件时间戳

《Python实现批量提取BLF文件时间戳》BLF(BinaryLoggingFormat)作为Vector公司推出的CAN总线数据记录格式,被广泛用于存储车辆通信数据,本文将使用Python轻松提取... 目录一、为什么需要批量处理 BLF 文件二、核心代码解析:从文件遍历到数据导出1. 环境准备与依赖库