文档章节

Redis研究-1.简单动态字符串

会飞的杨先生
 会飞的杨先生
发布于 2015/08/24 11:15
字数 1044
阅读 10014
收藏 55

我们知道,在C字符串中,底层的实现是使用c字符数组来实现的,但是在高性能以及内存安全方面,使用底层的c字符串是满足不了的,举个简单的例子,如果你使用strcat(s,s1)函数,如果在操作之前不判断s的空间是否能够容纳s1的内容,那么就很有可能导致内存溢出,而导致操作失败,因此,为了满足性能及内存安全方面的要求,Redis实现了SDS。

SDS的定义是(位于sds.h):

struct sdshdr {
   
    // buf 中已占用空间的长度
    int len;

    // buf 中剩余可用空间的长度
    int free;

    // 数据空间,默认是使用C字符串的空字符结尾的
    char buf[];
};

其中每项的含义已经在注释中说明。

通过上面的定义,我们可以看到,sds与传统的c字符串做了几方面的优化:

  1. 在sds中,记录了“字符数组”的的长度len;

  2. 通过使用free可以实现预分配策略优化。

通过这两方面的优化,我们可以得到以下方面的提升:

  1. 在做需要设计到内存扩展方面的操作的时候,只要检查free属性,就可以很容易得到是否需要扩展内存,从而避免内存溢出;

  2. 在获取字符串长度方面,再也不用花费O(N)时间复杂度,只主要获得len属性就可以得到长度,时间复杂度变为O(1);

  3. 我们知道,C字符串和底层数组之间是有密切联系的,因此每次增加或者缩短一个C字符串,都会涉及到对内存的分配,但是使用sds的len属性和free属性,可以减少内存的重分配次数。

关于上面提到的减少内存重分配优化方面,Redis做了两方面的优化,一个是空间预分配和惰性空间释放。

  1. 空间预分配:这方面的优化主要是用于字符串的增长操作:当用SDS的API来修改一个SDS,且需要进行空间扩展的时候,程序首先会为SDS分配修改所必须的空间,其次,还会分配额外的使用空间,这里面有两个策略:

    1. 当对SDS的内存进行修改后,SDS的长度已经超过1M了,那么Redis会自动的为这个SDS分配1M的free看空间;

    2. 当对SDS的内存进行修改后,SDS的长度小于1M,那么,Redis会自动给这个SDS分配等同于len的free空间。

  2. 惰性空间释放:对于传统的C字符串,如果我们要缩短,那么就一定要释放对应的内存,否则会导致内存泄露,但是Redis中的SDS,会把这部分内存用free来记住,所以,可以不用马上释放,这部分内存可以供以后使用,当然,Redis也提供了相关释放的API。

     

此外,我们对于传统的C字符串,我们只能存储简单的文本字符串,为什么呢?因为在传统的字符串中,我们是使用空字符来判断这个字符串是不是结束了,因此在字符串的中间就不能使用特殊的字符。这给要在多场景应用下的Redis带来了弊端,因此,在Redis的SDS中,并不是用简单的空字符来判断一个buf是不是已经结束了,而是要使用len属性来判断是不是已经结束,因此,在Redis的SDS中的buf 是可以存储文本字符串之外的数据的,因此,在Redis的SDS中,buf更多的是称作一个字节数组。当然,SDS中的buf 也是使用空字符来作为这个串的结尾的,这是为了兼容一部分C字符串的操作函数。

© 著作权归作者所有

会飞的杨先生
粉丝 10
博文 14
码字总数 30689
作品 0
昆明
CTO(技术副总裁)
私信 提问
加载中

评论(7)

grandfa
grandfa
桑总
会飞的杨先生
会飞的杨先生 博主

引用来自“梁金堂”的评论

还是不够安全,毕竟可以任意修改任何字符

这个不是基于安全角度来考虑的呢,主要是基于性能来考虑的1
梁金堂
梁金堂
还是不够安全,毕竟可以任意修改任何字符
orangleliu
orangleliu
呵呵
会飞的杨先生
会飞的杨先生 博主
多拍
orangebook
orangebook
😃😆😆😆😆😆😆
韦龙舒
韦龙舒
‘哈哈哈
Redis设计思路学习与总结

版权声明:本文由宋增宽原创文章,转载请注明出处: 文章原文链接:https://www.qcloud.com/community/article/222 来源:腾云阁 https://www.qcloud.com/community 宋增宽,腾讯工程师,16年...

偶素浅小浅
2016/12/11
61
0
我的架构演化笔记 10:ElasticSearch的分词器之ansj研究

架构不变,为了学习方便,直接研究ElasticSearch-rtf版本。 ~~~ 关于redis---配置文件中指定

强子哥哥
2014/06/11
1K
7
Redis源码分析系列七:initServer下

这个函数快到尾声了,一鼓作气! if(aeCreateTimeEvent(server.el, 1, serverCron, NULL, NULL) == AE_ERR) { redisPanic("Can't create the serverCron time event."); exit(1); } 这个函数......

强子哥哥
2013/10/18
378
0
【开源】.net 分布式架构之分布式缓存中间件

开源git地址: http://git.oschina.net/chejiangyi/XXF.BaseService.DistributedCache 分布式缓存中间件 方便实现缓存的分布式,集群,负载均衡,故障自动转移,并兼容多种缓存存储的分布式缓...

车江毅
2015/12/31
1K
0
.NET 分布式缓存中间件--XXF.BaseService.DistributedCache

分布式缓存中间件 方便实现缓存的分布式,集群,负载均衡,故障自动转移,并兼容多种缓存存储的分布式缓存中间件。 用于解决分布式架构中的分布式缓存环节。 特点: 代码少,便于扩展。 兼容...

车江毅
2015/12/31
1K
1

没有更多内容

加载失败,请刷新页面

加载更多

redis 学习2

网站 启动 服务端 启动redis 服务端 在redis 安装目录下 src 里面 ./redis-server & 可以指定 配置文件或者端口 客户端 在 redis 的安装目录里面的 src 里面 ./redis-cli 可以指定 指定 连接...

之渊
昨天
2
0
Spring boot 静态资源访问

0. 两个配置 spring.mvc.static-path-patternspring.resources.static-locations 1. application中需要先行的两个配置项 1.1 spring.mvc.static-path-pattern 这个配置项是告诉springboo......

moon888
昨天
4
0
hash slot(虚拟桶)

在分布式集群中,如何保证相同请求落到相同的机器上,并且后面的集群机器可以尽可能的均分请求,并且当扩容或down机的情况下能对原有集群影响最小。 round robin算法:是把数据mod后直接映射...

李朝强
昨天
4
0
Kafka 原理和实战

本文首发于 vivo互联网技术 微信公众号 https://mp.weixin.qq.com/s/bV8AhqAjQp4a_iXRfobkCQ 作者简介:郑志彬,毕业于华南理工大学计算机科学与技术(双语班)。先后从事过电子商务、开放平...

vivo互联网技术
昨天
24
0
java数据类型

基本类型: 整型:Byte,short,int,long 浮点型:float,double 字符型:char 布尔型:boolean 引用类型: 类类型: 接口类型: 数组类型: Byte 1字节 八位 -128 -------- 127 short 2字节...

audience_1
昨天
11
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部