文档章节

redis sds 实现的几个巧妙的想法

鼎铭
 鼎铭
发布于 06/13 16:59
字数 446
阅读 529
收藏 5

    翻redis 源码的时候,发现有些用法真是很巧妙的,一个是指针变换,一个是内存管理策略,当然后者是有利弊的。    

    sds.h 就这两个数据类型,这里,能够sds 和 sdshdr 相互转化。对外的接口,参数和返回只有char * 。redis 为每个char * 都维护了个数据结构 sdshdr ,防止溢出,又可以减少内存分配。这里char * 怎么跟 sdshdr 关联上?

typedef char *sds;

struct sdshdr {
    long len;
    long free;
    char buf[];
};

    这里 sdshdr 是16个字节,buf 是动态数组,计算偏移的时候size 为0。通过sdshdr 取 buf 地址,强制转成 char * ,也就是sds ,这个数组转字符串指针的操作很好理解。当我们获得sds 的时候,想知道预分配长度,直接向左偏移struct 大小,就是sdshdr的地址,强制转换类型后,就额可以取len。

    看源码 sdslen 函数就可以看出:

size_t sdslen(const sds s) {
    struct sdshdr *sh = (void*) (s-(sizeof(struct sdshdr))); //先偏移struct大小,强制转成sdshdr
    return sh->len;
}

    第二个有意思的是sds 的内存预分配,在对字符串拼接的时候,有个惰性预分配的操作,每次free 为0 ,触发重新拷贝,都将多分配一倍多余内存,备用。这里好处是减少内存分配,当然也浪费了内存。对应底层函数如下:

static sds sdsMakeRoomFor(sds s, size_t addlen) {
    struct sdshdr *sh, *newsh;
    size_t free = sdsavail(s);
    size_t len, newlen;

    if (free >= addlen) return s;
    len = sdslen(s);
    sh = (void*) (s-(sizeof(struct sdshdr)));
    newlen = (len+addlen)*2; //内存空间在要重新分配的情况下,直接加倍
    newsh = zrealloc(sh, sizeof(struct sdshdr)+newlen+1);
#ifdef SDS_ABORT_ON_OOM
    if (newsh == NULL) sdsOomAbort();
#else
    if (newsh == NULL) return NULL;
#endif

    newsh->free = newlen - len;
    return newsh->buf;
}

   

© 著作权归作者所有

共有 人打赏支持
鼎铭
粉丝 27
博文 67
码字总数 40583
作品 0
东城
程序员
Redis 数据结构-字符串源码分析

相关文章 Redis 初探-安装与使用 本文将从以下几个部分进行介绍 1.前言 2.常用命令 3.字符串结构 4.字符串实现 5.命令是如果操作字符串的 前言 平时在使用 Redis 的时候,只会使用简单的 se...

tsmyk0715
08/11
0
0
关于redis中SDS简单动态字符串

1、SDS 定义 在C语言中,字符串是以’0’字符结尾(NULL结束符)的字符数组来存储的,通常表达为字符指针的形式(char *)。它不允许字节0出现在字符串中间,因此,它不能用来存储任意的二进...

踏雪无痕SS
2017/08/06
0
0
Redis字符串类型实现内幕

摘要 Redis不仅仅是一个key-value存储,它更是一个数据结构服务,支持不同类型的值。这意味着在传统的key-value存储中,我们用string的key关联string的value。而在Redis中,我们可以存储的值...

Float_Luuu
2016/05/15
946
0
Redis 字符串类型实现内幕

本文作者:伯乐在线 -Float_Lu 。未经作者许可,禁止转载! 欢迎加入伯乐在线专栏作者。 摘要 Redis不仅仅是一个key-value存储,它更是一个数据结构服务,支持不同类型的值。这意味着在传统的...

伯乐在线
2016/06/10
0
0
Redis 2.8.9源码 - Redis中的字符串实现 sds

本文为作者原创,转载请注明出处:http://my.oschina.net/fuckphp/blog/269167 在C中子字符串的实现都是用 char *来实现的,用起来很不方便,而且容易出现内存泄露,并且效率不高,在Redis内...

logbird
2014/05/26
0
3

没有更多内容

加载失败,请刷新页面

加载更多

70.shell的函数 数组 告警系统需求分析

20.16/20.17 shell中的函数 20.18 shell中的数组 20.19 告警系统需求分析 20.16/20.17 shell中的函数: ~1. 函数就是把一段代码整理到了一个小单元中,并给这个小单元起一个名字,当用到这段...

王鑫linux
今天
0
0
分布式框架spring-session实现session一致性使用问题

前言:项目中使用到spring-session来缓存用户信息,保证服务之间session一致性,但是获取session信息为什么不能再服务层获取? 一、spring-session实现session一致性方式 用户每一次请求都会...

WALK_MAN
今天
5
0
C++ yield()与sleep_for()

C++11 标准库提供了yield()和sleep_for()两个方法。 (1)std::this_thread::yield(): 线程调用该方法时,主动让出CPU,并且不参与CPU的本次调度,从而让其他线程有机会运行。在后续的调度周...

yepanl
今天
4
0
Java并发编程实战(chapter_3)(线程池ThreadPoolExecutor源码分析)

这个系列一直没再写,很多原因,中间经历了换工作,熟悉项目,熟悉新团队等等一系列的事情。并发课题对于Java来说是一个又重要又难的一大块,除非气定神闲、精力满满,否则我本身是不敢随便写...

心中的理想乡
今天
31
0
shell学习之获取用户的输入命令read

在运行脚本的时候,命令行参数是可以传入参数,还有就是在脚本运行过程中需要用户输入参数,比如你想要在脚本运行时问个问题,并等待运行脚本的人来回答。bash shell为此提 供了read命令。 ...

woshixin
今天
4
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部