python3连接redis sentinel集群

2024-08-21 04:32

本文主要是介绍python3连接redis sentinel集群,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

安装

pip install redis

示例代码

# import redis
from redis.sentinel import Sentinel"""
1、通过访问Sentinel服务的方式,获取redis的master、slave节点信息
2、向master redis写入数据
3、从slave redis读取数据
"""# 连接哨兵服务器(主机名也可以用域名)
sentinel = Sentinel([('192.168.196.129', 26379),('192.168.196.132', 26379)],socket_timeout=0.5)# 获取主服务器地址
master = sentinel.discover_master('mymaster')
print(master)
# 输出:('192.168.196.132', 6379)# 获取从服务器地址
slave = sentinel.discover_slaves('mymaster')
print(slave)
# 输出:[('192.168.196.129', 6379)]# 获取主服务器进行写入
master = sentinel.master_for('mymaster', socket_timeout=0.5, password='newpwd', db=0)
w_ret = master.set('foo', 'bar')
# 输出:True# 获取从服务器进行读取(默认是round-roubin,随机从多个slave服务中读取数据)
slave = sentinel.slave_for('mymaster', socket_timeout=0.5, password='newpwd', db=0)
r_ret = slave.get('foo')
print(r_ret)
# 输出:bar

封装工具类方法

from redis.sentinel import Sentinelclass redisSentinelHelper():def __init__(self,sentinel_list,service_name,password,db):self.sentinel = Sentinel(sentinel_list,socket_timeout=0.5)self.service_name = service_nameself.password = passwordself.db = dbdef get_master_redis(self):return self.sentinel.discover_master(self.service_name)def get_slave_redis(self):return self.sentinel.discover_slaves(self.service_name)def set_key(self,key,value):master = self.sentinel.master_for(service_name=self.service_name,socket_timeout=0.5,password=self.password,db=self.db)return master.set(key,value)def get_key(self,key):slave = self.sentinel.slave_for(service_name=self.service_name,socket_timeout=0.5,password=self.password,db=self.db)return slave.get(key)def _test():# redis infosentinel_list = [('192.168.196.129', 26379),('192.168.196.132', 26379)]password = 'newpwd'db = 0service_name = 'mymaster'# create redis linkrsh = redisSentinelHelper(sentinel_list=sentinel_list,password=password,service_name=service_name,db=db)# test set key : key1 test-insert-key1rsh.set_key('key1','test-insert-key1')# get key1print(rsh.get_key('key1'))if __name__ == '__main__':_test()

运行如下:

D:\Python37\python3.exe D:/pythonProject/redis-test/test7.py
b'test-insert-key1'

其中,我没有把设置master节点写在初始化,而是在set key操作的时候才创建连接,主要是后续想要测试master节点变化的情况下,写入能够继续。

当然这样的话性能肯定不会很好,有很多可以根据实际情况修改的地方。

测试:当master节点切换,能否自动连续写入

当然,在sentinel执行master切点切换的过程,肯定会有些丢失,但是主要是要看切换之后,是否可以自动继续写入数据。

首先编写一个循环写入的示例

from redis.sentinel import Sentinelclass redisSentinelHelper():def __init__(self,sentinel_list,service_name,password,db):self.sentinel = Sentinel(sentinel_list,socket_timeout=0.5)self.service_name = service_nameself.password = passwordself.db = dbdef get_master_redis(self):return self.sentinel.discover_master(self.service_name)def get_slave_redis(self):return self.sentinel.discover_slaves(self.service_name)def set_key(self,key,value):master = self.sentinel.master_for(service_name=self.service_name,socket_timeout=0.5,password=self.password,db=self.db)return master.set(key,value)def get_key(self,key):slave = self.sentinel.slave_for(service_name=self.service_name,socket_timeout=0.5,password=self.password,db=self.db)return slave.get(key)def _test():# redis infosentinel_list = [('192.168.196.129', 26379),('192.168.196.132', 26379)]password = 'newpwd'db = 0service_name = 'mymaster'# create redis linkrsh = redisSentinelHelper(sentinel_list=sentinel_list,password=password,service_name=service_name,db=db)# test set key : key1 test-insert-key1# rsh.set_key('key1','test-insert-key1')# get key1# print(rsh.get_key('key1'))# loop set keyfor i in range(0,1000000):rsh.set_key('key' + str(i), i)print(rsh.get_key('key' + str(i)))if __name__ == '__main__':_test()

运行如下:

13423234-be354f9fc300530f.png

在写入的过程停止master服务

13423234-f6083e868c5bd704.png

脚本由于socket连接异常,直接报终止了。

13423234-0364afd6ef7f5232.png

查看sentinel的日志如下:

1825:X 17 Apr 17:44:51.101 # +sdown master mymaster 192.168.196.132 6379
1825:X 17 Apr 17:44:51.194 # +new-epoch 3
1825:X 17 Apr 17:44:51.195 # +vote-for-leader 3607cde178c7ac4255d5f862e8f3892f5599100f 3
1825:X 17 Apr 17:44:52.230 # +odown master mymaster 192.168.196.132 6379 #quorum 2/2
1825:X 17 Apr 17:44:52.230 # Next failover delay: I will not start a failover before Wed Apr 17 17:50:52 2019
1825:X 17 Apr 17:44:52.274 # +config-update-from sentinel 3607cde178c7ac4255d5f862e8f3892f5599100f 192.168.196.129 26379 @ mymaster 192.168.196.132 6379
1825:X 17 Apr 17:44:52.274 # +switch-master mymaster 192.168.196.132 6379 192.168.196.129 6379
1825:X 17 Apr 17:44:52.274 * +slave slave 192.168.196.131:6379 192.168.196.131 6379 @ mymaster 192.168.196.129 6379
1825:X 17 Apr 17:44:52.274 * +slave slave 192.168.196.132:6379 192.168.196.132 6379 @ mymaster 192.168.196.129 6379
1825:X 17 Apr 17:45:22.298 # +sdown slave 192.168.196.132:6379 192.168.196.132 6379 @ mymaster 192.168.196.129 6379
1825:X 17 Apr 17:45:22.298 # +sdown slave 192.168.196.131:6379 192.168.196.131 6379 @ mymaster 192.168.196.129 6379
[root@centos7-server02 redis]# 

可以看到已经切换了master节点,这时候抛开刚才的异常问题,再执行一下脚本看看。

在master节点切换之后,再次运行脚本

13423234-f0b4500cd04702bc.png

直接就可以访问处理了。
这里就体现了通过sentinel集群来获取master节点的优势。

13423234-0e3934319aa622f6.png

这篇关于python3连接redis sentinel集群的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1092124

相关文章

Redis 基本数据类型和使用详解

《Redis基本数据类型和使用详解》String是Redis最基本的数据类型,一个键对应一个值,它的功能十分强大,可以存储字符串、整数、浮点数等多种数据格式,本文给大家介绍Redis基本数据类型和... 目录一、Redis 入门介绍二、Redis 的五大基本数据类型2.1 String 类型2.2 Hash

Redis中Hash从使用过程到原理说明

《Redis中Hash从使用过程到原理说明》RedisHash结构用于存储字段-值对,适合对象数据,支持HSET、HGET等命令,采用ziplist或hashtable编码,通过渐进式rehash优化... 目录一、开篇:Hash就像超市的货架二、Hash的基本使用1. 常用命令示例2. Java操作示例三

Redis中Set结构使用过程与原理说明

《Redis中Set结构使用过程与原理说明》本文解析了RedisSet数据结构,涵盖其基本操作(如添加、查找)、集合运算(交并差)、底层实现(intset与hashtable自动切换机制)、典型应用场... 目录开篇:从购物车到Redis Set一、Redis Set的基本操作1.1 编程常用命令1.2 集

Redis中的有序集合zset从使用到原理分析

《Redis中的有序集合zset从使用到原理分析》Redis有序集合(zset)是字符串与分值的有序映射,通过跳跃表和哈希表结合实现高效有序性管理,适用于排行榜、延迟队列等场景,其时间复杂度低,内存占... 目录开篇:排行榜背后的秘密一、zset的基本使用1.1 常用命令1.2 Java客户端示例二、zse

Redis中的AOF原理及分析

《Redis中的AOF原理及分析》Redis的AOF通过记录所有写操作命令实现持久化,支持always/everysec/no三种同步策略,重写机制优化文件体积,与RDB结合可平衡数据安全与恢复效率... 目录开篇:从日记本到AOF一、AOF的基本执行流程1. 命令执行与记录2. AOF重写机制二、AOF的

Redis高性能Key-Value存储与缓存利器常见解决方案

《Redis高性能Key-Value存储与缓存利器常见解决方案》Redis是高性能内存Key-Value存储系统,支持丰富数据类型与持久化方案(RDB/AOF),本文给大家介绍Redis高性能Key-... 目录Redis:高性能Key-Value存储与缓存利器什么是Redis?为什么选择Redis?Red

java.sql.SQLTransientConnectionException连接超时异常原因及解决方案

《java.sql.SQLTransientConnectionException连接超时异常原因及解决方案》:本文主要介绍java.sql.SQLTransientConnectionExcep... 目录一、引言二、异常信息分析三、可能的原因3.1 连接池配置不合理3.2 数据库负载过高3.3 连接泄漏

Redis 的 SUBSCRIBE命令详解

《Redis的SUBSCRIBE命令详解》Redis的SUBSCRIBE命令用于订阅一个或多个频道,以便接收发送到这些频道的消息,本文给大家介绍Redis的SUBSCRIBE命令,感兴趣的朋友跟随... 目录基本语法工作原理示例消息格式相关命令python 示例Redis 的 SUBSCRIBE 命令用于订

sky-take-out项目中Redis的使用示例详解

《sky-take-out项目中Redis的使用示例详解》SpringCache是Spring的缓存抽象层,通过注解简化缓存管理,支持Redis等提供者,适用于方法结果缓存、更新和删除操作,但无法实现... 目录Spring Cache主要特性核心注解1.@Cacheable2.@CachePut3.@Ca

Redis实现高效内存管理的示例代码

《Redis实现高效内存管理的示例代码》Redis内存管理是其核心功能之一,为了高效地利用内存,Redis采用了多种技术和策略,如优化的数据结构、内存分配策略、内存回收、数据压缩等,下面就来详细的介绍... 目录1. 内存分配策略jemalloc 的使用2. 数据压缩和编码ziplist示例代码3. 优化的