[个人感悟] 缓存应该考察哪些问题?

2024-06-17 10:52

本文主要是介绍[个人感悟] 缓存应该考察哪些问题?,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在这里插入图片描述


前言

缓存, 根据冯诺依曼计算机模型, 无非是为了更高效的交互, 使用内存IO替换本地磁盘IO. 又因为内存的稀缺性, 其必然存储的是热点数据, 且较小的数据. [虽然直至今日, 已有使用缓存作为数据库的使用, 但是与磁盘IO相比, 其价格仍是数倍之多.]

当涉及缓存问题时, 又分为本地缓存和分布式缓存, 此2个方向. 且对于缓存而言, 除了询问其基本使用外, 还会寻味其中相关的经典问题, 缓存击穿&缓存穿透&缓存雪崩, 以及如何保证缓存一致性. 这2个经典问题.


问题

问题 - 缓存

  • 为什么需要缓存, 缓存的意义和底层原理是什么?
  • 讲一讲你常用的缓存工具? [单机 & 分布式]

问题 - 本地缓存

  • 常用的本地缓存是什么? Spring 默认提供的缓存实现是什么?

问题 - Redis(1)

  • 为什么要使用Redis缓存? (Redis 缓存的优势)
  • Redis是单线程还是多线程? 如何理解?
  • Redis 常见的数据类型有哪些? 各有哪些运行场景?
  • Redis 高级数据类型? 各有哪些运行场景?

问题 - Redis(2)

  • 如何使用Redis实现分布式锁?
  • 是否使用过Redis事务?生产过程中是否使用? [为什么不使用]
  • Reids持久化方式有哪些? 其有什么区别和优势?
  • 讲一讲Redis的渐进式Rehash过程?
  • Redis的过期策略有哪些?
  • Redis bgsave的同步策略有了解么?
  • Redis 是否使用keys命令? 其会导致什么影响?
  • Redis 如何计算key的大小, 并实施监控?
  • Redis 主从, 哨兵, 集群问题. 介绍下这3种架构的区别和优势?

问题 - 缓存经典问题

  • 什么是缓存穿透? 如何解决?
  • 什么是缓存击穿? 如何解决?
  • 什么是缓存雪崩? 如何解决?
  • 什么是缓存热点数据预热? 通常解决什么问题?
  • 多级缓存架构问题?
  • 如何保证Mysql和Redis缓存的双写一致性?
  • 什么是BigKey? 如何解决?
  • 什么是热点Key? 如何解决?

解答

Redis相关的问题个人认为不再赘述. 其基本都有现成的解决策略. 这里捡主要的问题进行回答.

问题 - 本地缓存

Spring 3.x使用Guava作为本地缓存默认实现, 4.x使用CaffeineCache.

解答-Redis

  • 如何使用Redis实现分布式锁?

问题一般是: “你们开发过程种如何使用Redis的?” 其中回答可以引申至Redis锁. 关于Redis锁, 其Redission包内有非常成功的实现. 其要点如下:

  1. 设置单一锁. 锁仅第一个申请线程才可以获取.
  2. 设置锁自动失效时间. 考虑如果申请线程失效, 无法自动释放锁, 导致死锁.
  3. 设置守护线程, 对锁进行续约. watchdog策略, 可以使用时间轮进行优化定时任务.
  4. 设置获取锁线程. 必须由当前线程对锁进行释放.
  5. 设置获取锁线程. 当前线程可以重入锁.

解答-缓存经典问题

缓存穿透, 缓存击穿, 缓存雪崩. 基本是缓存常见的3个实战问题. 笔者之前常常分不清穿透和击穿, 这里给出一个小技巧.
穿透, 强调的是大量无效Key, 导致缓存似乎无用.
击穿. 强调是大量请求访问数据库. 导致突然的流量异常.

  • 什么是缓存穿透? 如何解决?

根据上述描述. 缓存穿透, 某些用户经常查询不存在的key, 导致多次访问数据库. 好似缓存不存在, 请求透过缓存, 直接访问数据库. 其解决方式主要有2种:

  1. 如果无用键较少. 可以使用 unknow_key=null.的策略进行预防.
  2. 使用布隆过滤器. 已存在键进行写入时, 需要更新布隆过滤器的bitmap.
  3. 如果是黑客攻击等. 需要设置相关黑白名单进行防御.
  • 什么是缓存击穿? 如何解决?

根据上述描述. 缓存击穿, 指某一常用的key失效, 导致多个请求, 同时对于数据库进行访问. 导致数据库压力过大.
其主要解决方式主要有2种:

  1. 热点key设置永不过期.
  2. 热点数据请求时, 设置锁. 仅使用一个线程进行获取并更新缓存, 其余线程唤醒后, 优先请求缓存数据.
  • 什么是缓存雪崩? 如何解决?

缓存雪崩. 多个热点数据同时失效, 导致大量缓存失效. 其主要解决方式2种:

  1. 热点key设置永不过期.
  2. 缓存时间设置 当前时间+[1-5分钟随机数] 可以使用框架完成.
  • 什么是缓存热点数据预热? 通常解决什么问题?

这个问题一般不这么问. 一般可以作为项目优化点和亮点进行. 热点数据预热, 即项目启动时, 或者秒杀活动等开启前, 将需要秒杀或者使用的数据提前放置缓存, 放置进行备动添加. 优点是提升效率. 缺点是可能导致部分非核心数据写入缓存.

  • 多级缓存架构问题?

多级缓存通常指. Mysql - Java程序本地缓存 - Redis.

  1. 缓存访问. 本地 - Reids - Mysql顺序.
  2. 缓存更新. Mysql更新 - Reids失效 - 本地失效
  • 如何保证Mysql和Redis缓存的双写一致性?
    更新Mysql后, 使Redis内缓存失效. 用户再次命中时, 再次写入缓存.

这篇关于[个人感悟] 缓存应该考察哪些问题?的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1069236

相关文章

解决pandas无法读取csv文件数据的问题

《解决pandas无法读取csv文件数据的问题》本文讲述作者用Pandas读取CSV文件时因参数设置不当导致数据错位,通过调整delimiter和on_bad_lines参数最终解决问题,并强调正确参... 目录一、前言二、问题复现1. 问题2. 通过 on_bad_lines=‘warn’ 跳过异常数据3

解决RocketMQ的幂等性问题

《解决RocketMQ的幂等性问题》重复消费因调用链路长、消息发送超时或消费者故障导致,通过生产者消息查询、Redis缓存及消费者唯一主键可以确保幂等性,避免重复处理,本文主要介绍了解决RocketM... 目录造成重复消费的原因解决方法生产者端消费者端代码实现造成重复消费的原因当系统的调用链路比较长的时

深度解析Nginx日志分析与499状态码问题解决

《深度解析Nginx日志分析与499状态码问题解决》在Web服务器运维和性能优化过程中,Nginx日志是排查问题的重要依据,本文将围绕Nginx日志分析、499状态码的成因、排查方法及解决方案展开讨论... 目录前言1. Nginx日志基础1.1 Nginx日志存放位置1.2 Nginx日志格式2. 499

kkFileView启动报错:报错2003端口占用的问题及解决

《kkFileView启动报错:报错2003端口占用的问题及解决》kkFileView启动报错因office组件2003端口未关闭,解决:查杀占用端口的进程,终止Java进程,使用shutdown.s... 目录原因解决总结kkFileViewjavascript启动报错启动office组件失败,请检查of

java如何实现高并发场景下三级缓存的数据一致性

《java如何实现高并发场景下三级缓存的数据一致性》这篇文章主要为大家详细介绍了java如何实现高并发场景下三级缓存的数据一致性,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 下面代码是一个使用Java和Redisson实现的三级缓存服务,主要功能包括:1.缓存结构:本地缓存:使

SpringBoot 异常处理/自定义格式校验的问题实例详解

《SpringBoot异常处理/自定义格式校验的问题实例详解》文章探讨SpringBoot中自定义注解校验问题,区分参数级与类级约束触发的异常类型,建议通过@RestControllerAdvice... 目录1. 问题简要描述2. 异常触发1) 参数级别约束2) 类级别约束3. 异常处理1) 字段级别约束

Apache Ignite缓存基本操作实例详解

《ApacheIgnite缓存基本操作实例详解》文章介绍了ApacheIgnite中IgniteCache的基本操作,涵盖缓存获取、动态创建、销毁、原子及条件更新、异步执行,强调线程池注意事项,避免... 目录一、获取缓存实例(Getting an Instance of a Cache)示例代码:二、动态

Python错误AttributeError: 'NoneType' object has no attribute问题的彻底解决方法

《Python错误AttributeError:NoneTypeobjecthasnoattribute问题的彻底解决方法》在Python项目开发和调试过程中,经常会碰到这样一个异常信息... 目录问题背景与概述错误解读:AttributeError: 'NoneType' object has no at

Spring的RedisTemplate的json反序列泛型丢失问题解决

《Spring的RedisTemplate的json反序列泛型丢失问题解决》本文主要介绍了SpringRedisTemplate中使用JSON序列化时泛型信息丢失的问题及其提出三种解决方案,可以根据性... 目录背景解决方案方案一方案二方案三总结背景在使用RedisTemplate操作redis时我们针对

Kotlin Map映射转换问题小结

《KotlinMap映射转换问题小结》文章介绍了Kotlin集合转换的多种方法,包括map(一对一转换)、mapIndexed(带索引)、mapNotNull(过滤null)、mapKeys/map... 目录Kotlin 集合转换:map、mapIndexed、mapNotNull、mapKeys、map