[个人感悟] 缓存应该考察哪些问题?

2024-06-17 10:52

本文主要是介绍[个人感悟] 缓存应该考察哪些问题?,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在这里插入图片描述


前言

缓存, 根据冯诺依曼计算机模型, 无非是为了更高效的交互, 使用内存IO替换本地磁盘IO. 又因为内存的稀缺性, 其必然存储的是热点数据, 且较小的数据. [虽然直至今日, 已有使用缓存作为数据库的使用, 但是与磁盘IO相比, 其价格仍是数倍之多.]

当涉及缓存问题时, 又分为本地缓存和分布式缓存, 此2个方向. 且对于缓存而言, 除了询问其基本使用外, 还会寻味其中相关的经典问题, 缓存击穿&缓存穿透&缓存雪崩, 以及如何保证缓存一致性. 这2个经典问题.


问题

问题 - 缓存

  • 为什么需要缓存, 缓存的意义和底层原理是什么?
  • 讲一讲你常用的缓存工具? [单机 & 分布式]

问题 - 本地缓存

  • 常用的本地缓存是什么? Spring 默认提供的缓存实现是什么?

问题 - Redis(1)

  • 为什么要使用Redis缓存? (Redis 缓存的优势)
  • Redis是单线程还是多线程? 如何理解?
  • Redis 常见的数据类型有哪些? 各有哪些运行场景?
  • Redis 高级数据类型? 各有哪些运行场景?

问题 - Redis(2)

  • 如何使用Redis实现分布式锁?
  • 是否使用过Redis事务?生产过程中是否使用? [为什么不使用]
  • Reids持久化方式有哪些? 其有什么区别和优势?
  • 讲一讲Redis的渐进式Rehash过程?
  • Redis的过期策略有哪些?
  • Redis bgsave的同步策略有了解么?
  • Redis 是否使用keys命令? 其会导致什么影响?
  • Redis 如何计算key的大小, 并实施监控?
  • Redis 主从, 哨兵, 集群问题. 介绍下这3种架构的区别和优势?

问题 - 缓存经典问题

  • 什么是缓存穿透? 如何解决?
  • 什么是缓存击穿? 如何解决?
  • 什么是缓存雪崩? 如何解决?
  • 什么是缓存热点数据预热? 通常解决什么问题?
  • 多级缓存架构问题?
  • 如何保证Mysql和Redis缓存的双写一致性?
  • 什么是BigKey? 如何解决?
  • 什么是热点Key? 如何解决?

解答

Redis相关的问题个人认为不再赘述. 其基本都有现成的解决策略. 这里捡主要的问题进行回答.

问题 - 本地缓存

Spring 3.x使用Guava作为本地缓存默认实现, 4.x使用CaffeineCache.

解答-Redis

  • 如何使用Redis实现分布式锁?

问题一般是: “你们开发过程种如何使用Redis的?” 其中回答可以引申至Redis锁. 关于Redis锁, 其Redission包内有非常成功的实现. 其要点如下:

  1. 设置单一锁. 锁仅第一个申请线程才可以获取.
  2. 设置锁自动失效时间. 考虑如果申请线程失效, 无法自动释放锁, 导致死锁.
  3. 设置守护线程, 对锁进行续约. watchdog策略, 可以使用时间轮进行优化定时任务.
  4. 设置获取锁线程. 必须由当前线程对锁进行释放.
  5. 设置获取锁线程. 当前线程可以重入锁.

解答-缓存经典问题

缓存穿透, 缓存击穿, 缓存雪崩. 基本是缓存常见的3个实战问题. 笔者之前常常分不清穿透和击穿, 这里给出一个小技巧.
穿透, 强调的是大量无效Key, 导致缓存似乎无用.
击穿. 强调是大量请求访问数据库. 导致突然的流量异常.

  • 什么是缓存穿透? 如何解决?

根据上述描述. 缓存穿透, 某些用户经常查询不存在的key, 导致多次访问数据库. 好似缓存不存在, 请求透过缓存, 直接访问数据库. 其解决方式主要有2种:

  1. 如果无用键较少. 可以使用 unknow_key=null.的策略进行预防.
  2. 使用布隆过滤器. 已存在键进行写入时, 需要更新布隆过滤器的bitmap.
  3. 如果是黑客攻击等. 需要设置相关黑白名单进行防御.
  • 什么是缓存击穿? 如何解决?

根据上述描述. 缓存击穿, 指某一常用的key失效, 导致多个请求, 同时对于数据库进行访问. 导致数据库压力过大.
其主要解决方式主要有2种:

  1. 热点key设置永不过期.
  2. 热点数据请求时, 设置锁. 仅使用一个线程进行获取并更新缓存, 其余线程唤醒后, 优先请求缓存数据.
  • 什么是缓存雪崩? 如何解决?

缓存雪崩. 多个热点数据同时失效, 导致大量缓存失效. 其主要解决方式2种:

  1. 热点key设置永不过期.
  2. 缓存时间设置 当前时间+[1-5分钟随机数] 可以使用框架完成.
  • 什么是缓存热点数据预热? 通常解决什么问题?

这个问题一般不这么问. 一般可以作为项目优化点和亮点进行. 热点数据预热, 即项目启动时, 或者秒杀活动等开启前, 将需要秒杀或者使用的数据提前放置缓存, 放置进行备动添加. 优点是提升效率. 缺点是可能导致部分非核心数据写入缓存.

  • 多级缓存架构问题?

多级缓存通常指. Mysql - Java程序本地缓存 - Redis.

  1. 缓存访问. 本地 - Reids - Mysql顺序.
  2. 缓存更新. Mysql更新 - Reids失效 - 本地失效
  • 如何保证Mysql和Redis缓存的双写一致性?
    更新Mysql后, 使Redis内缓存失效. 用户再次命中时, 再次写入缓存.

这篇关于[个人感悟] 缓存应该考察哪些问题?的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1069236

相关文章

IDEA和GIT关于文件中LF和CRLF问题及解决

《IDEA和GIT关于文件中LF和CRLF问题及解决》文章总结:因IDEA默认使用CRLF换行符导致Shell脚本在Linux运行报错,需在编辑器和Git中统一为LF,通过调整Git的core.aut... 目录问题描述问题思考解决过程总结问题描述项目软件安装shell脚本上git仓库管理,但拉取后,上l

MyBatis延迟加载与多级缓存全解析

《MyBatis延迟加载与多级缓存全解析》文章介绍MyBatis的延迟加载与多级缓存机制,延迟加载按需加载关联数据提升性能,一级缓存会话级默认开启,二级缓存工厂级支持跨会话共享,增删改操作会清空对应缓... 目录MyBATis延迟加载策略一对多示例一对多示例MyBatis框架的缓存一级缓存二级缓存MyBat

前端缓存策略的自解方案全解析

《前端缓存策略的自解方案全解析》缓存从来都是前端的一个痛点,很多前端搞不清楚缓存到底是何物,:本文主要介绍前端缓存的自解方案,文中通过代码介绍的非常详细,需要的朋友可以参考下... 目录一、为什么“清缓存”成了技术圈的梗二、先给缓存“把个脉”:浏览器到底缓存了谁?三、设计思路:把“发版”做成“自愈”四、代码

idea npm install很慢问题及解决(nodejs)

《ideanpminstall很慢问题及解决(nodejs)》npm安装速度慢可通过配置国内镜像源(如淘宝)、清理缓存及切换工具解决,建议设置全局镜像(npmconfigsetregistryht... 目录idea npm install很慢(nodejs)配置国内镜像源清理缓存总结idea npm in

pycharm跑python项目易出错的问题总结

《pycharm跑python项目易出错的问题总结》:本文主要介绍pycharm跑python项目易出错问题的相关资料,当你在PyCharm中运行Python程序时遇到报错,可以按照以下步骤进行排... 1. 一定不要在pycharm终端里面创建环境安装别人的项目子模块等,有可能出现的问题就是你不报错都安装

idea突然报错Malformed \uxxxx encoding问题及解决

《idea突然报错Malformeduxxxxencoding问题及解决》Maven项目在切换Git分支时报错,提示project元素为描述符根元素,解决方法:删除Maven仓库中的resolv... 目www.chinasem.cn录问题解决方式总结问题idea 上的 maven China编程项目突然报错,是

Python爬虫HTTPS使用requests,httpx,aiohttp实战中的证书异步等问题

《Python爬虫HTTPS使用requests,httpx,aiohttp实战中的证书异步等问题》在爬虫工程里,“HTTPS”是绕不开的话题,HTTPS为传输加密提供保护,同时也给爬虫带来证书校验、... 目录一、核心问题与优先级检查(先问三件事)二、基础示例:requests 与证书处理三、高并发选型:

前端导出Excel文件出现乱码或文件损坏问题的解决办法

《前端导出Excel文件出现乱码或文件损坏问题的解决办法》在现代网页应用程序中,前端有时需要与后端进行数据交互,包括下载文件,:本文主要介绍前端导出Excel文件出现乱码或文件损坏问题的解决办法,... 目录1. 检查后端返回的数据格式2. 前端正确处理二进制数据方案 1:直接下载(推荐)方案 2:手动构造

Python绘制TSP、VRP问题求解结果图全过程

《Python绘制TSP、VRP问题求解结果图全过程》本文介绍用Python绘制TSP和VRP问题的静态与动态结果图,静态图展示路径,动态图通过matplotlib.animation模块实现动画效果... 目录一、静态图二、动态图总结【代码】python绘制TSP、VRP问题求解结果图(包含静态图与动态图

MyBatis/MyBatis-Plus同事务循环调用存储过程获取主键重复问题分析及解决

《MyBatis/MyBatis-Plus同事务循环调用存储过程获取主键重复问题分析及解决》MyBatis默认开启一级缓存,同一事务中循环调用查询方法时会重复使用缓存数据,导致获取的序列主键值均为1,... 目录问题原因解决办法如果是存储过程总结问题myBATis有如下代码获取序列作为主键IdMappe