redis穿透解决方案

2024-06-18 12:30
文章标签 解决方案 redis 穿透

本文主要是介绍redis穿透解决方案,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Redis缓存穿透是指查询一个不存在于数据库中的数据(通常是恶意用户发起的连续请求),由于缓存中没有,每次请求都会穿透到数据库,这可能会对数据库造成不必要的压力。解决缓存穿透问题的常见策略包括:
       1.  布隆过滤器:用于判断一个元素是否可能存在于集合中,即使它返回存在,也可能是个假阳性(误报),但不会出现假阴性(即如果布隆过滤器说不存在,则该元素一定不存在)。因此,可以在查询数据库之前先检查布隆过滤器。

       2.  空值缓存:即使数据库中没有找到对应记录,也将空值(如null)写入缓存,并设置一个较短的有效期。这样,后续相同请求在缓存有效期内可以直接从缓存中得到结果,而不需要再次访问数据库。

       3. 设置黑白名单:通过白名单使需要的请求访问,通过黑名单防止攻击。

首先,确保你的项目中包含了Spring Data Redis和Guava的依赖。

布隆过滤器配置

import com.google.common.hash.Funnel;
import com.google.common.hash.Hashing;
import com.google.common.math.LongMath;
import com.google.common.primitives.Chars;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;/*** 布隆过滤器配置类,用于初始化布隆过滤器的实例及其相关组件。*/
@Configuration
public class BloomFilterConfig {/*** 创建字符串处理的Funnel,用于将字符串转换为哈希输入。* * @return 字符串Funnel实例*/@Beanpublic Funnel<String> stringFunnel() {return (from, into) -> Chars.forEachUtf8(from, c -> into.putChar(c));}/*** 初始化布隆过滤器,基于预期插入数量和误报率进行配置。* * @param funnel 字符串处理的Funnel* @return 布隆过滤器实例*/@Beanpublic BloomFilter<String> bloomFilter(Funnel<String> funnel) {int expectedInsertions = 100000; // 预计需要插入过滤器的元素数量double fpp = 0.01; // 可接受的误报率,即预测为存在但实际上不存在的概率// 计算所需的哈希函数数量int numHashFunctions = LongMath.log2(LongMath.pow(2, Long.SIZE) / expectedInsertions * fpp);// 创建布隆过滤器实例return BloomFilter.create(funnel, expectedInsertions, fpp, Hashing.murmur3_128());}
}

缓存服务实现

import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.data.redis.core.StringRedisTemplate;
import org.springframework.stereotype.Service;/*** 缓存服务实现类,负责处理数据的缓存逻辑,包括使用布隆过滤器和空值缓存策略防止缓存穿透。*/
@Service
public class CacheService {private final StringRedisTemplate redisTemplate;private final BloomFilter<String> bloomFilter;/*** 构造函数注入Redis模板和布隆过滤器实例。** @param redisTemplate Redis操作模板* @param bloomFilter 布隆过滤器实例*/@Autowiredpublic CacheService(StringRedisTemplate redisTemplate, BloomFilter<String> bloomFilter) {this.redisTemplate = redisTemplate;this.bloomFilter = bloomFilter;}/*** 获取数据的方法,首先检查布隆过滤器,然后尝试从Redis缓存中获取,* 若缓存未命中且布隆过滤器认为可能存在,则查询数据库,并实施空值缓存策略。** @param key 数据的唯一标识* @return 查询到的数据或空值、提示信息*/public String getData(String key) {// 使用布隆过滤器快速判断key是否可能存在,减少不必要的数据库查询if (!bloomFilter.mightContain(key)) {return "This key is likely not in the database.";}// 尝试从Redis缓存中获取数据String value = redisTemplate.opsForValue().get(key);// 如果缓存未命中,且布隆过滤器判断可能在数据库中,则查询数据库if (value == null) {value = databaseFetch(key);// 数据库中也不存在,则将空值写入缓存,设置较短过期时间以避免长时间占用缓存if (value == null) {redisTemplate.opsForValue().set(key, "", 5, TimeUnit.MINUTES);} else {// 数据库中存在,则正常缓存该值redisTemplate.opsForValue().set(key, value);}}return value;}/*** 模拟从数据库获取数据的方法,实际应用中应替换为真实的数据库访问逻辑。** @param key 数据查询键* @return 从数据库查询到的数据或null*/private String databaseFetch(String key) {// 示例中始终返回null,表示数据库中也没有该数据return null;}
}

这篇关于redis穿透解决方案的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1072005

相关文章

线上Java OOM问题定位与解决方案超详细解析

《线上JavaOOM问题定位与解决方案超详细解析》OOM是JVM抛出的错误,表示内存分配失败,:本文主要介绍线上JavaOOM问题定位与解决方案的相关资料,文中通过代码介绍的非常详细,需要的朋... 目录一、OOM问题核心认知1.1 OOM定义与技术定位1.2 OOM常见类型及技术特征二、OOM问题定位工具

Python一次性将指定版本所有包上传PyPI镜像解决方案

《Python一次性将指定版本所有包上传PyPI镜像解决方案》本文主要介绍了一个安全、完整、可离线部署的解决方案,用于一次性准备指定Python版本的所有包,然后导出到内网环境,感兴趣的小伙伴可以跟随... 目录为什么需要这个方案完整解决方案1. 项目目录结构2. 创建智能下载脚本3. 创建包清单生成脚本4

java.sql.SQLTransientConnectionException连接超时异常原因及解决方案

《java.sql.SQLTransientConnectionException连接超时异常原因及解决方案》:本文主要介绍java.sql.SQLTransientConnectionExcep... 目录一、引言二、异常信息分析三、可能的原因3.1 连接池配置不合理3.2 数据库负载过高3.3 连接泄漏

Redis 的 SUBSCRIBE命令详解

《Redis的SUBSCRIBE命令详解》Redis的SUBSCRIBE命令用于订阅一个或多个频道,以便接收发送到这些频道的消息,本文给大家介绍Redis的SUBSCRIBE命令,感兴趣的朋友跟随... 目录基本语法工作原理示例消息格式相关命令python 示例Redis 的 SUBSCRIBE 命令用于订

sky-take-out项目中Redis的使用示例详解

《sky-take-out项目中Redis的使用示例详解》SpringCache是Spring的缓存抽象层,通过注解简化缓存管理,支持Redis等提供者,适用于方法结果缓存、更新和删除操作,但无法实现... 目录Spring Cache主要特性核心注解1.@Cacheable2.@CachePut3.@Ca

C#文件复制异常:"未能找到文件"的解决方案与预防措施

《C#文件复制异常:未能找到文件的解决方案与预防措施》在C#开发中,文件操作是基础中的基础,但有时最基础的File.Copy()方法也会抛出令人困惑的异常,当targetFilePath设置为D:2... 目录一个看似简单的文件操作问题问题重现与错误分析错误代码示例错误信息根本原因分析全面解决方案1. 确保

Redis实现高效内存管理的示例代码

《Redis实现高效内存管理的示例代码》Redis内存管理是其核心功能之一,为了高效地利用内存,Redis采用了多种技术和策略,如优化的数据结构、内存分配策略、内存回收、数据压缩等,下面就来详细的介绍... 目录1. 内存分配策略jemalloc 的使用2. 数据压缩和编码ziplist示例代码3. 优化的

redis-sentinel基础概念及部署流程

《redis-sentinel基础概念及部署流程》RedisSentinel是Redis的高可用解决方案,通过监控主从节点、自动故障转移、通知机制及配置提供,实现集群故障恢复与服务持续可用,核心组件包... 目录一. 引言二. 核心功能三. 核心组件四. 故障转移流程五. 服务部署六. sentinel部署

C# LiteDB处理时间序列数据的高性能解决方案

《C#LiteDB处理时间序列数据的高性能解决方案》LiteDB作为.NET生态下的轻量级嵌入式NoSQL数据库,一直是时间序列处理的优选方案,本文将为大家大家简单介绍一下LiteDB处理时间序列数... 目录为什么选择LiteDB处理时间序列数据第一章:LiteDB时间序列数据模型设计1.1 核心设计原则

基于Redis自动过期的流处理暂停机制

《基于Redis自动过期的流处理暂停机制》基于Redis自动过期的流处理暂停机制是一种高效、可靠且易于实现的解决方案,防止延时过大的数据影响实时处理自动恢复处理,以避免积压的数据影响实时性,下面就来详... 目录核心思路代码实现1. 初始化Redis连接和键前缀2. 接收数据时检查暂停状态3. 检测到延时过