幂等的通用实现方案

2024-09-03 07:20
文章标签 实现 通用 方案

本文主要是介绍幂等的通用实现方案,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

文章目录

  • 一、幂等的概念
    • 1.1 什么是幂等
    • 1.2 举个例子
  • 二、幂等问题的解决方案
    • 2.1 准备:先添加2张表(账户表、充值订单表)
    • 2.2 方案1:update时将status=0作为条件判断解决
      • 原理
      • 源码
    • 2.3 方案2:乐观锁
      • 原理
      • 源码
    • 2.4 方案3:唯一约束
      • 需要添加一张唯一约束辅助表
      • 原理
      • 用这种方案来处理支付回调通知,伪代码如下
      • 源码
    • 2.5 方案四:分布式锁
    • 2.6 总结

一、幂等的概念

1.1 什么是幂等

幂等指多次操作产生的影响只会跟一次执行的结果相同,通俗的说:某个行为重复的执行,最终获取的结果是相同的,不会因为重复执行对系统造成变化。

1.2 举个例子

比如说咱们有个网站,网站上支持购物,但只能用网站上自己的金币进行付款。

金币从哪里来呢?可通过支付宝充值来,1元对1金币,充值的过程如下

在这里插入图片描述

上图中的第7步,这个地方支付宝会给商家发送通知,商家收到支付宝的通知后会执行下面逻辑

step1、判断订单是否处理过
step2、若订单已处理,则直接返回SUCCESS,否则继续向下走
step3、将订单状态置为成功
step4、给用户在平台的账户加金币
step5、返回SUCCESS

由于网络存在不稳定的因素,这个通知可能会发送多次,极端情况下,同一笔订单的多次通知可能同时到达商户端,若商家这边不做幂等操作,那么同一笔订单就可能被处理多次。

比如2次通知同时走到step2,都会看到订单未处理,则会继续向下走,那么账户就会被加2次钱,这将出现严重的事故,搞不好公司就被干倒闭了。

二、幂等问题的解决方案

2.1 准备:先添加2张表(账户表、充值订单表)

-- 创建账户表
create table if not exists t_account
(id      varchar(50) primary key comment '账户id',name    varchar(50)    not null comment '账户名称',balance decimal(12, 2) not null default '0.00' comment '账户余额'
) comment '账户表';-- 充值记录表
create table if not exists t_recharge
(id         varchar(50) primary key comment 'id,主键',account_id varchar(50)    not null comment '账户id,来源于表t_account.id',price      decimal(12, 2) not null comment '充值金额',status     smallint       not null default 0 comment '充值记录状态,0:处理中,1:充值成功',version    bigint         not null default 0 comment '系统版本号,默认为0,每次更新+1,用于乐观锁'
) comment '充值记录表';-- 准备测试数据,
-- 账号数据来一条,
insert ignore into t_account values ('1', '路人', 0);
-- 充值记录来一条,状态为0,稍后我们模拟回调,会将状态置为充值成功
insert ignore into t_recharge values ('1', '1', 100.00, 0, 0);

下面我们将实现,业务方这边给支付宝提供的回调方法,在这个回调方法中会处理刚才上面sql中插入的那个订单,会将订单状态置为成功,成功也就是1,然后给用户的账户余额中添加100金币。

也就是,多个请求渴望对同一个订单进行处理,修改订单的状态,如何只让其中一个请求进行有效修改不要出现用户只充值了1次,但是由于网络问题,支付宝回调了多次接口,给用户的余额进行了多次添加

这个回调方法,下面会提供4种实现,都可以确保这个回调方法的幂等性,余额只会加100。

2.2 方案1:update时将status=0作为条件判断解决

原理

逻辑如下,重点在于更新订单状态的时候要加上status = 0这个条件,如果有并发执行到这条sql的时候,数据库会对update的这条记录加锁,确保他们排队执行,只有一个会执行成功。

String rechargeId = "充值订单id";// 根据rechargeId去找充值记录,如果已处理过,则直接返回成功
RechargePO rechargePo = select * from t_recharge where id = #{rechargeId};// 充值记录已处理过,直接返回成功
if(rechargePo.status==1){return "SUCCESS";
}开启Spring事务// 下面这个sql是重点,重点在where后面要加 status = 0 这个条件;count表示影响行数
int count = (update t_recharge set status = 1 where id = #{rechargeId} and status = 0);// count = 1,表示上面sql执行成功
if(count!=1){// 走到这里,说明有并发,直接抛出异常throw new RuntimeException("系统繁忙,请重试")
}else{//给账户加钱update t_account set balance = balance + #{rechargePo.price} where id = #{rechargePo.accountId}
}提交Spring事务

源码

在这里插入图片描述

2.3 方案2:乐观锁

原理

String rechargeId = "充值订单id";// 根据rechargeId去找充值记录,如果已处理过,则直接返回成功
RechargePO rechargePo = select * from t_recharge where id = #{rechargeId};// 充值记录已处理过,直接返回成功
if(rechargePo.status==1){return "SUCCESS";
}开启Spring事务// 期望的版本号
Long expectVersion = rechargePo.version;// 下面这个sql是重点,重点在set后面要有version = version + 1,where后面要加 status = 0 这个条件;count表示影响行数
int count = (update t_recharge set status = 1,version = version + 1 where id = #{rechargeId} and version = #{expectVersion});// count = 1,表示上面sql执行成功
if(count!=1){// 走到这里,说明有并发,直接抛出异常throw new RuntimeException("系统繁忙,请重试")
}else{//给账户加钱update t_account set balance = balance + #{rechargePo.price} where id = #{rechargePo.accountId}
}提交spring事务

重点在于update t_recharge set status = 1,version = version + 1 where id = #{rechargeId} and version = #{expectVersion}这条sql

  • set 后面必须要有 version = version + 1
  • where后面必须要有 version = #{expectVersion}

这样乐观锁才能起作用。

源码

在这里插入图片描述

2.4 方案3:唯一约束

需要添加一张唯一约束辅助表

如下,这个表重点关注第二个字段idempotent_key,这个字段添加了唯一约束,说明同时向这个表中插入同样值的idempotent_key,则只有一条记录会执行成功,其他的请求会报异常,而失败,让事务回滚,这个知识点了解后,方案就容易看懂了。

-- 幂等辅助表
create table if not exists t_idempotent
(id             varchar(50) primary key comment 'id,主键',idempotent_key varchar(200) not null comment '需要确保幂等的key',unique key uq_idempotent_key (idempotent_key)
) comment '幂等辅助表';

原理

String idempotentKey = "幂等key";// 幂等表是否存在记录,如果存在说明处理过,直接返回成功
IdempotentPO idempotentPO = select * from t_idempotent where idempotent_key = #{idempotentKey};
if(idempotentPO!=null){return "SUCCESS";
}开启Spring事务(这里千万不要漏掉,一定要有事务)// 这里放入需要幂等的业务代码,最好是db操作的代码。。。。。String idempotentId = "";
// 这里是关键一步,向 t_idempotent 插入记录,如果有并发过来,只会有一个成功,其他的会报异常导致事务回滚
insert into t_idempotent (id, idempotent_key) values (#{idempotentId}, #{idempotentKey});提交spring事务

用这种方案来处理支付回调通知,伪代码如下

String rechargeId = "充值订单id";// 根据rechargeId去找充值记录,如果已处理过,则直接返回成功
RechargePO rechargePo = select * from t_recharge where id = #{rechargeId};// 充值记录已处理过,直接返回成功
if(rechargePo.status==1){return "SUCCESS";
}// 生成idempotentKey,这里可以使用,业务id:业务类型,那么我们这里可以使用rechargeId+":"+"RECHARGE_CALLBACK"
String idempotentKey = rechargeId+":"+"RECHARGE_CALLBACK";// 幂等表是否存在记录,如果存在说明处理过,直接返回成功
IdempotentPO idempotentPO = select * from t_idempotent where idempotent_key = #{idempotentKey};
if(idempotentPO!=null){return "SUCCESS";
}开启Spring事务(这里千万不要漏掉,一定要有事务)// count表示影响行数,这个sql比较特别,看起来并发会出现问题,实际上配合唯一约束辅助表,就不会有问题了
int count = update t_recharge set status = 1 where id = #{rechargeId};// count != 1,表示未成功
if(count!=1){// 走到这里,直接抛出异常,让事务回滚throw new RuntimeException("系统繁忙,请重试")
}else{//给账户加钱update t_account set balance = balance + #{rechargePo.price} where id = #{rechargePo.accountId}
}String idempotentId = "";
// 这里是关键一步,向 t_recharge 插入记录,如果有并发过来,只会有一个成功,其他的会报异常导致事务回滚,上面的
insert into t_recharge (id, idempotent_key) values (#{idempotentId}, #{idempotentKey});提交spring事务

源码

在这里插入图片描述

2.5 方案四:分布式锁

上面三种方式都是依靠数据库的功能解决幂等性的问题,所以比较适合对数据库操作的业务。

若业务没有数据库操作,需要实现幂等,可用分布式锁解决,逻辑如下:

在这里插入图片描述

2.6 总结

  1. 数据库操作的幂等性,4种种方案都可以,第3种方案算是一种通用的方案,可以在项目框架搭建初期就提供此方案,然后在组内推广,让所有人都知晓,可避免很多幂等性问题。
  2. 方案4大家也要熟悉这个处理过程。

这篇关于幂等的通用实现方案的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1132391

相关文章

Spring Security 单点登录与自动登录机制的实现原理

《SpringSecurity单点登录与自动登录机制的实现原理》本文探讨SpringSecurity实现单点登录(SSO)与自动登录机制,涵盖JWT跨系统认证、RememberMe持久化Token... 目录一、核心概念解析1.1 单点登录(SSO)1.2 自动登录(Remember Me)二、代码分析三、

PyCharm中配置PyQt的实现步骤

《PyCharm中配置PyQt的实现步骤》PyCharm是JetBrains推出的一款强大的PythonIDE,结合PyQt可以进行pythion高效开发桌面GUI应用程序,本文就来介绍一下PyCha... 目录1. 安装China编程PyQt1.PyQt 核心组件2. 基础 PyQt 应用程序结构3. 使用 Q

Python实现批量提取BLF文件时间戳

《Python实现批量提取BLF文件时间戳》BLF(BinaryLoggingFormat)作为Vector公司推出的CAN总线数据记录格式,被广泛用于存储车辆通信数据,本文将使用Python轻松提取... 目录一、为什么需要批量处理 BLF 文件二、核心代码解析:从文件遍历到数据导出1. 环境准备与依赖库

linux下shell脚本启动jar包实现过程

《linux下shell脚本启动jar包实现过程》确保APP_NAME和LOG_FILE位于目录内,首次启动前需手动创建log文件夹,否则报错,此为个人经验,供参考,欢迎支持脚本之家... 目录linux下shell脚本启动jar包样例1样例2总结linux下shell脚本启动jar包样例1#!/bin

go动态限制并发数量的实现示例

《go动态限制并发数量的实现示例》本文主要介绍了Go并发控制方法,通过带缓冲通道和第三方库实现并发数量限制,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面... 目录带有缓冲大小的通道使用第三方库其他控制并发的方法因为go从语言层面支持并发,所以面试百分百会问到

Go语言并发之通知退出机制的实现

《Go语言并发之通知退出机制的实现》本文主要介绍了Go语言并发之通知退出机制的实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧... 目录1、通知退出机制1.1 进程/main函数退出1.2 通过channel退出1.3 通过cont

Python实现PDF按页分割的技术指南

《Python实现PDF按页分割的技术指南》PDF文件处理是日常工作中的常见需求,特别是当我们需要将大型PDF文档拆分为多个部分时,下面我们就来看看如何使用Python创建一个灵活的PDF分割工具吧... 目录需求分析技术方案工具选择安装依赖完整代码实现使用说明基本用法示例命令输出示例技术亮点实际应用场景扩

java如何实现高并发场景下三级缓存的数据一致性

《java如何实现高并发场景下三级缓存的数据一致性》这篇文章主要为大家详细介绍了java如何实现高并发场景下三级缓存的数据一致性,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 下面代码是一个使用Java和Redisson实现的三级缓存服务,主要功能包括:1.缓存结构:本地缓存:使

如何在Java Spring实现异步执行(详细篇)

《如何在JavaSpring实现异步执行(详细篇)》Spring框架通过@Async、Executor等实现异步执行,提升系统性能与响应速度,支持自定义线程池管理并发,本文给大家介绍如何在Sprin... 目录前言1. 使用 @Async 实现异步执行1.1 启用异步执行支持1.2 创建异步方法1.3 调用

Spring Boot配置和使用两个数据源的实现步骤

《SpringBoot配置和使用两个数据源的实现步骤》本文详解SpringBoot配置双数据源方法,包含配置文件设置、Bean创建、事务管理器配置及@Qualifier注解使用,强调主数据源标记、代... 目录Spring Boot配置和使用两个数据源技术背景实现步骤1. 配置数据源信息2. 创建数据源Be