用TCC来解决多个第三方系统数据一致性问题

2024-09-01 22:04

本文主要是介绍用TCC来解决多个第三方系统数据一致性问题,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

对于做集成的公司来说,会集成各种第三方系统,要么是通过第三方系统的api,要么直接集成第三方系统的设备。如果是通过api集成,单次请求只调用一个三方系统没问题,同步调用就行,但如果同时要调用多个三方系统,并且需要三方系统都成功的时候才算该次请求成功调用,这种情况只要后面调用的系统发生报错,前面系统如果不删除产生的数据,就会遗留在三方系统中,产生脏数据。这种集成的三方系统,不是我方能够控制的,我们不能修改他们的代码。

下图是产生该问题的一个场景:
在这里插入图片描述

这里我尝试使用了TCC来处理多个三方系统的数据一致问题,以添加人脸为例来说明:
在这里插入图片描述

  • try阶段依次调用每个三方系统的新增人脸接口,每个三方系统调用成功后,把我方功能主键ID(比如人脸id)、三方返回数据(三方系统人脸id)、操作类型(比如新增),三方系统唯一标识(比如third1)存储到临时记录表里
  • confirm阶段暂时没用
  • cancel阶段,如果try阶段,某一个三方系统报错了,TCC就会执行到该阶段。该阶段要把try阶段已经执行成功的记录查询出来,调用三方系统的删除接口

经过以上步骤以此来完成脏数据的删除。

TCC我们要考虑以下的几种情况:

  1. 新增出错-删除回调:
    try阶段:每个三方系统调用成功后,将我方功能主键ID、三方系统主键、操作类型(ADD)、三方唯一标识(third1、third2)记下里
    在这里插入图片描述
    cancel阶段:根据我方功能主键ID,操作类型(ADD)查询出所有记录,再循环调用三方删除接口

  2. 修改出错-修改回调:
    try阶段:先从我方系统的映射表中查询出对应的三方系统主键,随后根据三方系统主键调用三方系统查询详情接口,存储到记录表,操作类型(UPDATE)
    cancel阶段:根据我方功能主键ID,操作类型(UPDATE),以THIRD字段分组,查询出最新记录,封装参数,循环调用三方更新接口,更新回原来的数据

  3. 删除出错-新增回调:
    try阶段:先从我方系统的映射表中查询出对应的三方系统主键,随后根据三方系统主键调用三方系统查询详情接口,存储到记录表,操作类型(DELETE)
    cancel阶段:根据我方功能主键ID,操作类型(DELETE),查询出最新记录,封装参数,循环调用三方新增接口,把删除的数据加回来,随后再更新我方系统映射表中三方主键id

这是使用TCC来解决的多个三方数据一致性问题,这种方案数据查询,参数封装都需要手动写代码处理,比较繁琐,我之前还提供过另外一种方案,通过注解进行声明,由框架解析注解来自动处理,代码量少很多,不过我的代码还有很多要优化完善的地方,但我想这种思想是好的,可以看看https://itsaysay.blog.csdn.net/article/details/126072080

贴出TCC部分的代码看一下,源码可以查看 https://github.com/jujunchen/tcc-third-transaction:

package csdn.itsaysay.we.service.handler;import java.util.List;
import java.util.Objects;import javax.annotation.Resource;import org.mengyun.tcctransaction.api.Compensable;
import org.mengyun.tcctransaction.api.UniqueIdentity;
import org.springframework.stereotype.Service;
import org.springframework.transaction.annotation.Transactional;import com.baomidou.mybatisplus.core.toolkit.Wrappers;import csdn.itsaysay.we.bean.Third;
import csdn.itsaysay.we.bean.model.FaceDO;
import csdn.itsaysay.we.bean.model.ThirdHistoryDO;
import csdn.itsaysay.we.mapper.ThirdHistoryMapper;
import csdn.itsaysay.we.third.feign.ThirdFeignClient;
import csdn.itsaysay.we.third.third1.T1FaceService;
import csdn.itsaysay.we.third.third2.T2FaceService;
import lombok.extern.slf4j.Slf4j;@Slf4j
@Service
public class FaceAdd {@Resourceprivate T1FaceService third1FaceService;@Resourceprivate T2FaceService third2FaceService;@Resourceprivate ThirdHistoryMapper thirdHistoryMapper;@Resourceprivate ThirdFeignClient thirdFeignClient;@Compensable(confirmMethod = "confirmFaceAdd", cancelMethod = "cancelFaceAdd")@Transactionalpublic void tryFaceAdd(@UniqueIdentity FaceDO face) {log.info("------->we try");//把第三方接口独立成服务,通过feign去调用
//		FaceAddReq req = BeanUtil.copyProperties(face, FaceAddReq.class);
//		thirdFeignClient.faceAdd(req);//直接写在当前服务里面String id1 = third1FaceService.faceAdd(face);thirdHistoryMapper.insert(buildModel(face.getId(), id1, Third.ADD, Third.THIRD1));String id2 = third2FaceService.faceAdd(face);thirdHistoryMapper.insert(buildModel(face.getId(), id2, Third.ADD, Third.THIRD2));}public void confirmFaceAdd(FaceDO face) {log.info("------->we confirm");}public void cancelFaceAdd(FaceDO face) {log.info("------->we cancel");List<ThirdHistoryDO> faceThirdDOs = thirdHistoryMapper.selectList(Wrappers.<ThirdHistoryDO>lambdaQuery().eq(ThirdHistoryDO::getWeData, face.getId()).eq(ThirdHistoryDO::getRtype, Third.ADD));for (ThirdHistoryDO thirdHistoryDO : faceThirdDOs) {//如果只有几个的话,可以单独指定,如果是不确定有几个的话,还要根据third字段唯一标识来获取应该调用哪个第三方if (Objects.equals(thirdHistoryDO.getThird(), Third.THIRD1)) {third1FaceService.faceDelete(thirdHistoryDO.getThirdData());}if (Objects.equals(thirdHistoryDO.getThird(), Third.THIRD2)) {third1FaceService.faceDelete(thirdHistoryDO.getThirdData());}}}private ThirdHistoryDO buildModel(Integer id, String thirdId, String rtype, String third) {ThirdHistoryDO thirdHistoryDO = new ThirdHistoryDO();thirdHistoryDO.setWeData(String.valueOf(id));thirdHistoryDO.setThirdData(thirdId);thirdHistoryDO.setRtype(rtype);thirdHistoryDO.setThird(third);return thirdHistoryDO;}}

这篇关于用TCC来解决多个第三方系统数据一致性问题的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1128171

相关文章

canal实现mysql数据同步的详细过程

《canal实现mysql数据同步的详细过程》:本文主要介绍canal实现mysql数据同步的详细过程,本文通过实例图文相结合给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的... 目录1、canal下载2、mysql同步用户创建和授权3、canal admin安装和启动4、canal

SpringBoot排查和解决JSON解析错误(400 Bad Request)的方法

《SpringBoot排查和解决JSON解析错误(400BadRequest)的方法》在开发SpringBootRESTfulAPI时,客户端与服务端的数据交互通常使用JSON格式,然而,JSON... 目录问题背景1. 问题描述2. 错误分析解决方案1. 手动重新输入jsON2. 使用工具清理JSON3.

使用jenv工具管理多个JDK版本的方法步骤

《使用jenv工具管理多个JDK版本的方法步骤》jenv是一个开源的Java环境管理工具,旨在帮助开发者在同一台机器上轻松管理和切换多个Java版本,:本文主要介绍使用jenv工具管理多个JD... 目录一、jenv到底是干啥的?二、jenv的核心功能(一)管理多个Java版本(二)支持插件扩展(三)环境隔

MySQL 设置AUTO_INCREMENT 无效的问题解决

《MySQL设置AUTO_INCREMENT无效的问题解决》本文主要介绍了MySQL设置AUTO_INCREMENT无效的问题解决,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参... 目录快速设置mysql的auto_increment参数一、修改 AUTO_INCREMENT 的值。

关于跨域无效的问题及解决(java后端方案)

《关于跨域无效的问题及解决(java后端方案)》:本文主要介绍关于跨域无效的问题及解决(java后端方案),具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录通用后端跨域方法1、@CrossOrigin 注解2、springboot2.0 实现WebMvcConfig

使用SpringBoot整合Sharding Sphere实现数据脱敏的示例

《使用SpringBoot整合ShardingSphere实现数据脱敏的示例》ApacheShardingSphere数据脱敏模块,通过SQL拦截与改写实现敏感信息加密存储,解决手动处理繁琐及系统改... 目录痛点一:痛点二:脱敏配置Quick Start——Spring 显示配置:1.引入依赖2.创建脱敏

基于Python实现一个简单的题库与在线考试系统

《基于Python实现一个简单的题库与在线考试系统》在当今信息化教育时代,在线学习与考试系统已成为教育技术领域的重要组成部分,本文就来介绍一下如何使用Python和PyQt5框架开发一个名为白泽题库系... 目录概述功能特点界面展示系统架构设计类结构图Excel题库填写格式模板题库题目填写格式表核心数据结构

Go语言中泄漏缓冲区的问题解决

《Go语言中泄漏缓冲区的问题解决》缓冲区是一种常见的数据结构,常被用于在不同的并发单元之间传递数据,然而,若缓冲区使用不当,就可能引发泄漏缓冲区问题,本文就来介绍一下问题的解决,感兴趣的可以了解一下... 目录引言泄漏缓冲区的基本概念代码示例:泄漏缓冲区的产生项目场景:Web 服务器中的请求缓冲场景描述代码

Java死锁问题解决方案及示例详解

《Java死锁问题解决方案及示例详解》死锁是指两个或多个线程因争夺资源而相互等待,导致所有线程都无法继续执行的一种状态,本文给大家详细介绍了Java死锁问题解决方案详解及实践样例,需要的朋友可以参考下... 目录1、简述死锁的四个必要条件:2、死锁示例代码3、如何检测死锁?3.1 使用 jstack3.2

解决JSONField、JsonProperty不生效的问题

《解决JSONField、JsonProperty不生效的问题》:本文主要介绍解决JSONField、JsonProperty不生效的问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑... 目录jsONField、JsonProperty不生效javascript问题排查总结JSONField