解决甩锅的一大难题,就是留个凭证

2024-05-24 14:18

本文主要是介绍解决甩锅的一大难题,就是留个凭证,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

原创:猿天地(微信公众号ID:cxytiandi),欢迎分享,转载请保留出处。

在多个团队之间的一些业务关联上,内部可以Rpc的方式进行交互。某些业务其实不需要强关联,这个时候就会用消息队列进行解耦操作。比如下单后加积分,发短信通知的这类操作。

在用消息队列的时候,我们最需要关注的一个问题就是消息会不会丢失?

这里的丢失指的就是要么你程序有问题,没有发送出去。要么发送出去了,但是在某个节点上消息丢掉了,导致消费方没有收到你发送的消息,从而引发业务问题。

对于消息丢失,有很多的解决方案。本文不聊怎么在技术层面去防止消息丢失,聊另一个话题:消息到底发没发送?

在多团队之间用消息解耦的场景下更容易出现这类问题,另一个团队的同学找你,说你们的消息是不是没发送啊,我这边这条数据的状态没流转,肯定没收到消息。

在这里插入图片描述

然后你屁颠屁颠的去消息队列的控制台进行消息的查询,发现确实查不到。主要问题在于这条数据是几个月之前的了,发送记录没有保存这么久,所以现在是有口难辩的这么一个状态。
在这里插入图片描述

别人说你没发,但你自己又拿不出来证据来证明自己发送过了消息。所以这个锅你只能自己背了。这就是今天要聊的话题,凡事要留个凭证,方便日后好追溯,特别是关键的业务场景。

存储发送记录到数据库

既然要留凭证,那么就需要将凭证存储起来。消息队列的消息量大,肯定不会全部永久存储,一般都是存储最近几天的量,所以直接利用消息队列去查有没有发送只适合最近的消息,时间比较久的就无从追溯了。

在消息发送后,可以直接存储到数据库中,方便后面查询发送记录。其实就跟短信记录一样的,短信也经常会遇到说这个短信我没收到,是不是没发送啊之类的问题。

存储需要考虑的就是量的问题,如果你们每天的消息量很大,还需要存储永久的数据,那么就得拆分了,或者采用外置其他数据库进行单独存储,比如MongoDB之类的NoSql。

存储发送记录到日志

另一种方案就是发送后直接输出一条日志即可,因为大部分公司都有统一的日志平台,去收集日志进行存储。这个方案就不用占用DB的存储或者说单独弄一套Nosql存储,比较省事。

但是需要注意的是日志的存储时间,像一些云厂商的日志服务是可以设置存储时间的,因为日志的量越大,成本越高。

在很久之前就遇到过发消息其实是打印了日志的,但是存储时间只有最近一个月。当别人来问你消息有没有发送的时候,你会发现当时的日志已经没有了,所以我们还是需要进行永久存储。

永久存储也就意味着成本的提高,其实我们可以将日志分类,普通的日志可以存储时间短一点,一些有用的日志可以单独进行输出收集和永久存储。这类日志的量相对少一点,成本可控。

直接用本地消息表发送

除了用开源的消息队列,很多公司也都会用本地消息表,单独的消息服务,基于数据库设计的消息队列这些形式来发送消息。这些形式的特点就是本身就基于DB做的持久化,所以对于查找有没有发送过消息是天然支持的。当然也有可能量大后即使分库分表了,后期还是要扩容或者定期归档,只要数据还在这个锅就背不了。

在这里插入图片描述

在这里插入图片描述

关于作者:尹吉欢,简单的技术爱好者,《Spring Cloud微服务-全栈技术与案例解析》, 《Spring Cloud微服务 入门 实战与进阶》作者, 公众号猿天地发起人。

这篇关于解决甩锅的一大难题,就是留个凭证的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/998641

相关文章

Springboot项目启动失败提示找不到dao类的解决

《Springboot项目启动失败提示找不到dao类的解决》SpringBoot启动失败,因ProductServiceImpl未正确注入ProductDao,原因:Dao未注册为Bean,解决:在启... 目录错误描述原因解决方法总结***************************APPLICA编

解决pandas无法读取csv文件数据的问题

《解决pandas无法读取csv文件数据的问题》本文讲述作者用Pandas读取CSV文件时因参数设置不当导致数据错位,通过调整delimiter和on_bad_lines参数最终解决问题,并强调正确参... 目录一、前言二、问题复现1. 问题2. 通过 on_bad_lines=‘warn’ 跳过异常数据3

解决RocketMQ的幂等性问题

《解决RocketMQ的幂等性问题》重复消费因调用链路长、消息发送超时或消费者故障导致,通过生产者消息查询、Redis缓存及消费者唯一主键可以确保幂等性,避免重复处理,本文主要介绍了解决RocketM... 目录造成重复消费的原因解决方法生产者端消费者端代码实现造成重复消费的原因当系统的调用链路比较长的时

深度解析Nginx日志分析与499状态码问题解决

《深度解析Nginx日志分析与499状态码问题解决》在Web服务器运维和性能优化过程中,Nginx日志是排查问题的重要依据,本文将围绕Nginx日志分析、499状态码的成因、排查方法及解决方案展开讨论... 目录前言1. Nginx日志基础1.1 Nginx日志存放位置1.2 Nginx日志格式2. 499

SpringBoot监控API请求耗时的6中解决解决方案

《SpringBoot监控API请求耗时的6中解决解决方案》本文介绍SpringBoot中记录API请求耗时的6种方案,包括手动埋点、AOP切面、拦截器、Filter、事件监听、Micrometer+... 目录1. 简介2.实战案例2.1 手动记录2.2 自定义AOP记录2.3 拦截器技术2.4 使用Fi

kkFileView启动报错:报错2003端口占用的问题及解决

《kkFileView启动报错:报错2003端口占用的问题及解决》kkFileView启动报错因office组件2003端口未关闭,解决:查杀占用端口的进程,终止Java进程,使用shutdown.s... 目录原因解决总结kkFileViewjavascript启动报错启动office组件失败,请检查of

SQL Server安装时候没有中文选项的解决方法

《SQLServer安装时候没有中文选项的解决方法》用户安装SQLServer时界面全英文,无中文选项,通过修改安装设置中的国家或地区为中文中国,重启安装程序后界面恢复中文,解决了问题,对SQLSe... 你是不是在安装SQL Server时候发现安装界面和别人不同,并且无论如何都没有中文选项?这个问题也

java内存泄漏排查过程及解决

《java内存泄漏排查过程及解决》公司某服务内存持续增长,疑似内存泄漏,未触发OOM,排查方法包括检查JVM配置、分析GC执行状态、导出堆内存快照并用IDEAProfiler工具定位大对象及代码... 目录内存泄漏内存问题排查1.查看JVM内存配置2.分析gc是否正常执行3.导出 dump 各种工具分析4.

Spring的RedisTemplate的json反序列泛型丢失问题解决

《Spring的RedisTemplate的json反序列泛型丢失问题解决》本文主要介绍了SpringRedisTemplate中使用JSON序列化时泛型信息丢失的问题及其提出三种解决方案,可以根据性... 目录背景解决方案方案一方案二方案三总结背景在使用RedisTemplate操作redis时我们针对

SpringBoot整合Dubbo+ZK注册失败的坑及解决

《SpringBoot整合Dubbo+ZK注册失败的坑及解决》使用Dubbo框架时,需在公共pom添加依赖,启动类加@EnableDubbo,实现类用@DubboService替代@Service,配... 目录1.先看下公共的pom(maven创建的pom工程)2.启动类上加@EnableDubbo3.实