漫话Redis源码之一百零二

2024-02-06 09:32

本文主要是介绍漫话Redis源码之一百零二,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

本模块主要实现defrag回调机制,可以细看一下,还挺巧妙的:

/* A module that implements defrag callback mechanisms.*/#define REDISMODULE_EXPERIMENTAL_API
#include "redismodule.h"static RedisModuleType *FragType;struct FragObject {unsigned long len;void **values;int maxstep;
};/* Make sure we get the expected cursor */
unsigned long int last_set_cursor = 0;unsigned long int datatype_attempts = 0;
unsigned long int datatype_defragged = 0;
unsigned long int datatype_resumes = 0;
unsigned long int datatype_wrong_cursor = 0;
unsigned long int global_attempts = 0;
unsigned long int global_defragged = 0;int global_strings_len = 0;
RedisModuleString **global_strings = NULL;static void createGlobalStrings(RedisModuleCtx *ctx, int count)
{global_strings_len = count;global_strings = RedisModule_Alloc(sizeof(RedisModuleString *) * count);for (int i = 0; i < count; i++) {global_strings[i] = RedisModule_CreateStringFromLongLong(ctx, i);}
}static int defragGlobalStrings(RedisModuleDefragCtx *ctx)
{for (int i = 0; i < global_strings_len; i++) {RedisModuleString *new = RedisModule_DefragRedisModuleString(ctx, global_strings[i]);global_attempts++;if (new != NULL) {global_strings[i] = new;global_defragged++;}}return 0;
}static void FragInfo(RedisModuleInfoCtx *ctx, int for_crash_report) {REDISMODULE_NOT_USED(for_crash_report);RedisModule_InfoAddSection(ctx, "stats");RedisModule_InfoAddFieldLongLong(ctx, "datatype_attempts", datatype_attempts);RedisModule_InfoAddFieldLongLong(ctx, "datatype_defragged", datatype_defragged);RedisModule_InfoAddFieldLongLong(ctx, "datatype_resumes", datatype_resumes);RedisModule_InfoAddFieldLongLong(ctx, "datatype_wrong_cursor", datatype_wrong_cursor);RedisModule_InfoAddFieldLongLong(ctx, "global_attempts", global_attempts);RedisModule_InfoAddFieldLongLong(ctx, "global_defragged", global_defragged);
}struct FragObject *createFragObject(unsigned long len, unsigned long size, int maxstep) {struct FragObject *o = RedisModule_Alloc(sizeof(*o));o->len = len;o->values = RedisModule_Alloc(sizeof(RedisModuleString*) * len);o->maxstep = maxstep;for (unsigned long i = 0; i < len; i++) {o->values[i] = RedisModule_Calloc(1, size);}return o;
}/* FRAG.RESETSTATS */
static int fragResetStatsCommand(RedisModuleCtx *ctx, RedisModuleString **argv, int argc) {REDISMODULE_NOT_USED(argv);REDISMODULE_NOT_USED(argc);datatype_attempts = 0;datatype_defragged = 0;datatype_resumes = 0;datatype_wrong_cursor = 0;global_attempts = 0;global_defragged = 0;RedisModule_ReplyWithSimpleString(ctx, "OK");return REDISMODULE_OK;
}/* FRAG.CREATE key len size maxstep */
static int fragCreateCommand(RedisModuleCtx *ctx, RedisModuleString **argv, int argc) {if (argc != 5)return RedisModule_WrongArity(ctx);RedisModuleKey *key = RedisModule_OpenKey(ctx,argv[1],REDISMODULE_READ|REDISMODULE_WRITE);int type = RedisModule_KeyType(key);if (type != REDISMODULE_KEYTYPE_EMPTY){return RedisModule_ReplyWithError(ctx, "ERR key exists");}long long len;if ((RedisModule_StringToLongLong(argv[2], &len) != REDISMODULE_OK)) {return RedisModule_ReplyWithError(ctx, "ERR invalid len");}long long size;if ((RedisModule_StringToLongLong(argv[3], &size) != REDISMODULE_OK)) {return RedisModule_ReplyWithError(ctx, "ERR invalid size");}long long maxstep;if ((RedisModule_StringToLongLong(argv[4], &maxstep) != REDISMODULE_OK)) {return RedisModule_ReplyWithError(ctx, "ERR invalid maxstep");}struct FragObject *o = createFragObject(len, size, maxstep);RedisModule_ModuleTypeSetValue(key, FragType, o);RedisModule_ReplyWithSimpleString(ctx, "OK");RedisModule_CloseKey(key);return REDISMODULE_OK;
}void FragFree(void *value) {struct FragObject *o = value;for (unsigned long i = 0; i < o->len; i++)RedisModule_Free(o->values[i]);RedisModule_Free(o->values);RedisModule_Free(o);
}size_t FragFreeEffort(RedisModuleString *key, const void *value) {REDISMODULE_NOT_USED(key);const struct FragObject *o = value;return o->len;
}int FragDefrag(RedisModuleDefragCtx *ctx, RedisModuleString *key, void **value) {REDISMODULE_NOT_USED(key);unsigned long i = 0;int steps = 0;/* Attempt to get cursor, validate it's what we're exepcting */if (RedisModule_DefragCursorGet(ctx, &i) == REDISMODULE_OK) {if (i > 0) datatype_resumes++;/* Validate we're expecting this cursor */if (i != last_set_cursor) datatype_wrong_cursor++;} else {if (last_set_cursor != 0) datatype_wrong_cursor++;}/* Attempt to defrag the object itself */datatype_attempts++;struct FragObject *o = RedisModule_DefragAlloc(ctx, *value);if (o == NULL) {/* Not defragged */o = *value;} else {/* Defragged */*value = o;datatype_defragged++;}/* Deep defrag now */for (; i < o->len; i++) {datatype_attempts++;void *new = RedisModule_DefragAlloc(ctx, o->values[i]);if (new) {o->values[i] = new;datatype_defragged++;}if ((o->maxstep && ++steps > o->maxstep) ||((i % 64 == 0) && RedisModule_DefragShouldStop(ctx))){RedisModule_DefragCursorSet(ctx, i);last_set_cursor = i;return 1;}}last_set_cursor = 0;return 0;
}int RedisModule_OnLoad(RedisModuleCtx *ctx, RedisModuleString **argv, int argc) {REDISMODULE_NOT_USED(argv);REDISMODULE_NOT_USED(argc);if (RedisModule_Init(ctx, "defragtest", 1, REDISMODULE_APIVER_1)== REDISMODULE_ERR) return REDISMODULE_ERR;if (RedisModule_GetTypeMethodVersion() < REDISMODULE_TYPE_METHOD_VERSION) {return REDISMODULE_ERR;}long long glen;if (argc != 1 || RedisModule_StringToLongLong(argv[0], &glen) == REDISMODULE_ERR) {return REDISMODULE_ERR;}createGlobalStrings(ctx, glen);RedisModuleTypeMethods tm = {.version = REDISMODULE_TYPE_METHOD_VERSION,.free = FragFree,.free_effort = FragFreeEffort,.defrag = FragDefrag};FragType = RedisModule_CreateDataType(ctx, "frag_type", 0, &tm);if (FragType == NULL) return REDISMODULE_ERR;if (RedisModule_CreateCommand(ctx, "frag.create",fragCreateCommand, "write deny-oom", 1, 1, 1) == REDISMODULE_ERR)return REDISMODULE_ERR;if (RedisModule_CreateCommand(ctx, "frag.resetstats",fragResetStatsCommand, "write deny-oom", 1, 1, 1) == REDISMODULE_ERR)return REDISMODULE_ERR;RedisModule_RegisterInfoFunc(ctx, FragInfo);RedisModule_RegisterDefragFunc(ctx, defragGlobalStrings);return REDISMODULE_OK;
}

这篇关于漫话Redis源码之一百零二的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/683858

相关文章

Redis 基本数据类型和使用详解

《Redis基本数据类型和使用详解》String是Redis最基本的数据类型,一个键对应一个值,它的功能十分强大,可以存储字符串、整数、浮点数等多种数据格式,本文给大家介绍Redis基本数据类型和... 目录一、Redis 入门介绍二、Redis 的五大基本数据类型2.1 String 类型2.2 Hash

Redis中Hash从使用过程到原理说明

《Redis中Hash从使用过程到原理说明》RedisHash结构用于存储字段-值对,适合对象数据,支持HSET、HGET等命令,采用ziplist或hashtable编码,通过渐进式rehash优化... 目录一、开篇:Hash就像超市的货架二、Hash的基本使用1. 常用命令示例2. Java操作示例三

Redis中Set结构使用过程与原理说明

《Redis中Set结构使用过程与原理说明》本文解析了RedisSet数据结构,涵盖其基本操作(如添加、查找)、集合运算(交并差)、底层实现(intset与hashtable自动切换机制)、典型应用场... 目录开篇:从购物车到Redis Set一、Redis Set的基本操作1.1 编程常用命令1.2 集

Redis中的有序集合zset从使用到原理分析

《Redis中的有序集合zset从使用到原理分析》Redis有序集合(zset)是字符串与分值的有序映射,通过跳跃表和哈希表结合实现高效有序性管理,适用于排行榜、延迟队列等场景,其时间复杂度低,内存占... 目录开篇:排行榜背后的秘密一、zset的基本使用1.1 常用命令1.2 Java客户端示例二、zse

Redis中的AOF原理及分析

《Redis中的AOF原理及分析》Redis的AOF通过记录所有写操作命令实现持久化,支持always/everysec/no三种同步策略,重写机制优化文件体积,与RDB结合可平衡数据安全与恢复效率... 目录开篇:从日记本到AOF一、AOF的基本执行流程1. 命令执行与记录2. AOF重写机制二、AOF的

Redis高性能Key-Value存储与缓存利器常见解决方案

《Redis高性能Key-Value存储与缓存利器常见解决方案》Redis是高性能内存Key-Value存储系统,支持丰富数据类型与持久化方案(RDB/AOF),本文给大家介绍Redis高性能Key-... 目录Redis:高性能Key-Value存储与缓存利器什么是Redis?为什么选择Redis?Red

java 恺撒加密/解密实现原理(附带源码)

《java恺撒加密/解密实现原理(附带源码)》本文介绍Java实现恺撒加密与解密,通过固定位移量对字母进行循环替换,保留大小写及非字母字符,由于其实现简单、易于理解,恺撒加密常被用作学习加密算法的入... 目录Java 恺撒加密/解密实现1. 项目背景与介绍2. 相关知识2.1 恺撒加密算法原理2.2 Ja

Nginx屏蔽服务器名称与版本信息方式(源码级修改)

《Nginx屏蔽服务器名称与版本信息方式(源码级修改)》本文详解如何通过源码修改Nginx1.25.4,移除Server响应头中的服务类型和版本信息,以增强安全性,需重新配置、编译、安装,升级时需重复... 目录一、背景与目的二、适用版本三、操作步骤修改源码文件四、后续操作提示五、注意事项六、总结一、背景与

Android实现图片浏览功能的示例详解(附带源码)

《Android实现图片浏览功能的示例详解(附带源码)》在许多应用中,都需要展示图片并支持用户进行浏览,本文主要为大家介绍了如何通过Android实现图片浏览功能,感兴趣的小伙伴可以跟随小编一起学习一... 目录一、项目背景详细介绍二、项目需求详细介绍三、相关技术详细介绍四、实现思路详细介绍五、完整实现代码

Redis 的 SUBSCRIBE命令详解

《Redis的SUBSCRIBE命令详解》Redis的SUBSCRIBE命令用于订阅一个或多个频道,以便接收发送到这些频道的消息,本文给大家介绍Redis的SUBSCRIBE命令,感兴趣的朋友跟随... 目录基本语法工作原理示例消息格式相关命令python 示例Redis 的 SUBSCRIBE 命令用于订