用TCC来解决多个第三方系统数据一致性问题

2024-09-01 22:04

本文主要是介绍用TCC来解决多个第三方系统数据一致性问题,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

对于做集成的公司来说,会集成各种第三方系统,要么是通过第三方系统的api,要么直接集成第三方系统的设备。如果是通过api集成,单次请求只调用一个三方系统没问题,同步调用就行,但如果同时要调用多个三方系统,并且需要三方系统都成功的时候才算该次请求成功调用,这种情况只要后面调用的系统发生报错,前面系统如果不删除产生的数据,就会遗留在三方系统中,产生脏数据。这种集成的三方系统,不是我方能够控制的,我们不能修改他们的代码。

下图是产生该问题的一个场景:
在这里插入图片描述

这里我尝试使用了TCC来处理多个三方系统的数据一致问题,以添加人脸为例来说明:
在这里插入图片描述

  • try阶段依次调用每个三方系统的新增人脸接口,每个三方系统调用成功后,把我方功能主键ID(比如人脸id)、三方返回数据(三方系统人脸id)、操作类型(比如新增),三方系统唯一标识(比如third1)存储到临时记录表里
  • confirm阶段暂时没用
  • cancel阶段,如果try阶段,某一个三方系统报错了,TCC就会执行到该阶段。该阶段要把try阶段已经执行成功的记录查询出来,调用三方系统的删除接口

经过以上步骤以此来完成脏数据的删除。

TCC我们要考虑以下的几种情况:

  1. 新增出错-删除回调:
    try阶段:每个三方系统调用成功后,将我方功能主键ID、三方系统主键、操作类型(ADD)、三方唯一标识(third1、third2)记下里
    在这里插入图片描述
    cancel阶段:根据我方功能主键ID,操作类型(ADD)查询出所有记录,再循环调用三方删除接口

  2. 修改出错-修改回调:
    try阶段:先从我方系统的映射表中查询出对应的三方系统主键,随后根据三方系统主键调用三方系统查询详情接口,存储到记录表,操作类型(UPDATE)
    cancel阶段:根据我方功能主键ID,操作类型(UPDATE),以THIRD字段分组,查询出最新记录,封装参数,循环调用三方更新接口,更新回原来的数据

  3. 删除出错-新增回调:
    try阶段:先从我方系统的映射表中查询出对应的三方系统主键,随后根据三方系统主键调用三方系统查询详情接口,存储到记录表,操作类型(DELETE)
    cancel阶段:根据我方功能主键ID,操作类型(DELETE),查询出最新记录,封装参数,循环调用三方新增接口,把删除的数据加回来,随后再更新我方系统映射表中三方主键id

这是使用TCC来解决的多个三方数据一致性问题,这种方案数据查询,参数封装都需要手动写代码处理,比较繁琐,我之前还提供过另外一种方案,通过注解进行声明,由框架解析注解来自动处理,代码量少很多,不过我的代码还有很多要优化完善的地方,但我想这种思想是好的,可以看看https://itsaysay.blog.csdn.net/article/details/126072080

贴出TCC部分的代码看一下,源码可以查看 https://github.com/jujunchen/tcc-third-transaction:

package csdn.itsaysay.we.service.handler;import java.util.List;
import java.util.Objects;import javax.annotation.Resource;import org.mengyun.tcctransaction.api.Compensable;
import org.mengyun.tcctransaction.api.UniqueIdentity;
import org.springframework.stereotype.Service;
import org.springframework.transaction.annotation.Transactional;import com.baomidou.mybatisplus.core.toolkit.Wrappers;import csdn.itsaysay.we.bean.Third;
import csdn.itsaysay.we.bean.model.FaceDO;
import csdn.itsaysay.we.bean.model.ThirdHistoryDO;
import csdn.itsaysay.we.mapper.ThirdHistoryMapper;
import csdn.itsaysay.we.third.feign.ThirdFeignClient;
import csdn.itsaysay.we.third.third1.T1FaceService;
import csdn.itsaysay.we.third.third2.T2FaceService;
import lombok.extern.slf4j.Slf4j;@Slf4j
@Service
public class FaceAdd {@Resourceprivate T1FaceService third1FaceService;@Resourceprivate T2FaceService third2FaceService;@Resourceprivate ThirdHistoryMapper thirdHistoryMapper;@Resourceprivate ThirdFeignClient thirdFeignClient;@Compensable(confirmMethod = "confirmFaceAdd", cancelMethod = "cancelFaceAdd")@Transactionalpublic void tryFaceAdd(@UniqueIdentity FaceDO face) {log.info("------->we try");//把第三方接口独立成服务,通过feign去调用
//		FaceAddReq req = BeanUtil.copyProperties(face, FaceAddReq.class);
//		thirdFeignClient.faceAdd(req);//直接写在当前服务里面String id1 = third1FaceService.faceAdd(face);thirdHistoryMapper.insert(buildModel(face.getId(), id1, Third.ADD, Third.THIRD1));String id2 = third2FaceService.faceAdd(face);thirdHistoryMapper.insert(buildModel(face.getId(), id2, Third.ADD, Third.THIRD2));}public void confirmFaceAdd(FaceDO face) {log.info("------->we confirm");}public void cancelFaceAdd(FaceDO face) {log.info("------->we cancel");List<ThirdHistoryDO> faceThirdDOs = thirdHistoryMapper.selectList(Wrappers.<ThirdHistoryDO>lambdaQuery().eq(ThirdHistoryDO::getWeData, face.getId()).eq(ThirdHistoryDO::getRtype, Third.ADD));for (ThirdHistoryDO thirdHistoryDO : faceThirdDOs) {//如果只有几个的话,可以单独指定,如果是不确定有几个的话,还要根据third字段唯一标识来获取应该调用哪个第三方if (Objects.equals(thirdHistoryDO.getThird(), Third.THIRD1)) {third1FaceService.faceDelete(thirdHistoryDO.getThirdData());}if (Objects.equals(thirdHistoryDO.getThird(), Third.THIRD2)) {third1FaceService.faceDelete(thirdHistoryDO.getThirdData());}}}private ThirdHistoryDO buildModel(Integer id, String thirdId, String rtype, String third) {ThirdHistoryDO thirdHistoryDO = new ThirdHistoryDO();thirdHistoryDO.setWeData(String.valueOf(id));thirdHistoryDO.setThirdData(thirdId);thirdHistoryDO.setRtype(rtype);thirdHistoryDO.setThird(third);return thirdHistoryDO;}}

这篇关于用TCC来解决多个第三方系统数据一致性问题的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1128171

相关文章

IDEA和GIT关于文件中LF和CRLF问题及解决

《IDEA和GIT关于文件中LF和CRLF问题及解决》文章总结:因IDEA默认使用CRLF换行符导致Shell脚本在Linux运行报错,需在编辑器和Git中统一为LF,通过调整Git的core.aut... 目录问题描述问题思考解决过程总结问题描述项目软件安装shell脚本上git仓库管理,但拉取后,上l

Linux下利用select实现串口数据读取过程

《Linux下利用select实现串口数据读取过程》文章介绍Linux中使用select、poll或epoll实现串口数据读取,通过I/O多路复用机制在数据到达时触发读取,避免持续轮询,示例代码展示设... 目录示例代码(使用select实现)代码解释总结在 linux 系统里,我们可以借助 select、

解决docker目录内存不足扩容处理方案

《解决docker目录内存不足扩容处理方案》文章介绍了Docker存储目录迁移方法:因系统盘空间不足,需将Docker数据迁移到更大磁盘(如/home/docker),通过修改daemon.json配... 目录1、查看服务器所有磁盘的使用情况2、查看docker镜像和容器存储目录的空间大小3、停止dock

idea npm install很慢问题及解决(nodejs)

《ideanpminstall很慢问题及解决(nodejs)》npm安装速度慢可通过配置国内镜像源(如淘宝)、清理缓存及切换工具解决,建议设置全局镜像(npmconfigsetregistryht... 目录idea npm install很慢(nodejs)配置国内镜像源清理缓存总结idea npm in

pycharm跑python项目易出错的问题总结

《pycharm跑python项目易出错的问题总结》:本文主要介绍pycharm跑python项目易出错问题的相关资料,当你在PyCharm中运行Python程序时遇到报错,可以按照以下步骤进行排... 1. 一定不要在pycharm终端里面创建环境安装别人的项目子模块等,有可能出现的问题就是你不报错都安装

idea突然报错Malformed \uxxxx encoding问题及解决

《idea突然报错Malformeduxxxxencoding问题及解决》Maven项目在切换Git分支时报错,提示project元素为描述符根元素,解决方法:删除Maven仓库中的resolv... 目www.chinasem.cn录问题解决方式总结问题idea 上的 maven China编程项目突然报错,是

在Ubuntu上打不开GitHub的完整解决方法

《在Ubuntu上打不开GitHub的完整解决方法》当你满心欢喜打开Ubuntu准备推送代码时,突然发现终端里的gitpush卡成狗,浏览器里的GitHub页面直接变成Whoathere!警告页面... 目录一、那些年我们遇到的"红色惊叹号"二、三大症状快速诊断症状1:浏览器直接无法访问症状2:终端操作异常

linux系统中java的cacerts的优先级详解

《linux系统中java的cacerts的优先级详解》文章讲解了Java信任库(cacerts)的优先级与管理方式,指出JDK自带的cacerts默认优先级更高,系统级cacerts需手动同步或显式... 目录Java 默认使用哪个?如何检查当前使用的信任库?简要了解Java的信任库总结了解 Java 信

mybatis直接执行完整sql及踩坑解决

《mybatis直接执行完整sql及踩坑解决》MyBatis可通过select标签执行动态SQL,DQL用ListLinkedHashMap接收结果,DML用int处理,注意防御SQL注入,优先使用#... 目录myBATiFBNZQs直接执行完整sql及踩坑select语句采用count、insert、u

Python爬虫HTTPS使用requests,httpx,aiohttp实战中的证书异步等问题

《Python爬虫HTTPS使用requests,httpx,aiohttp实战中的证书异步等问题》在爬虫工程里,“HTTPS”是绕不开的话题,HTTPS为传输加密提供保护,同时也给爬虫带来证书校验、... 目录一、核心问题与优先级检查(先问三件事)二、基础示例:requests 与证书处理三、高并发选型: