文档章节

Redis配置详解-客户端缓冲区 output buffer

 毛朱
发布于 2015/08/21 10:32
字数 1080
阅读 1836
收藏 9

Redis配置详解-客户端缓冲区  http://blog.csdn.net/jiangguilong2000/article/details/38436941


Redis异常及使用总结 http://blog.csdn.net/jiangguilong2000/article/details/45025355



客户端缓冲区 output buffer

大概已经知道Redis是一个内存数据库,这意味着所有的数据都由RAM直接管理和提供的。因此Redis有着卓越的交付性能,Redis可以以亚毫秒级的延迟处理几万、几十万的请求。
Redis,如同它的名字和设计,是一个移动服务器,客户端(通常)通过网络连接Redis。这种情况下,客户端请求返回客户端的时间将显著长于Redis CPU从RAM读取数据的时间。这意味着如果没有客户端缓冲区的话,Redis的主要差异与在该段时间对服务的响应有关。
客户端缓冲区组成了服务客户请求所需的内存空间,Redis的每个连接都配有自己的缓冲区空间。处理请求后,Redis把响应数据复制到客户端缓冲区,然后继续处理下一个请求,与此同时,请求客户端通过网络连接读取数据。Redis客户端缓冲区配置在redis.conf文件:

  1. config get client-output-buffer-limit  

  2. 1) "client-output-buffer-limit"  

  3. 2) "normal 0 0 0 slave 268435456 67108864 60 pubsub 33554432 8388608 60"</span>  

output buffer是Redis为client分配的缓冲区(这里的"client"可能是真正的client,也可能是slave或monitor),若为某个客户端分配的output buffer超过了预留大小,Redis可能会根据配置策略关闭与该端的连接。
例如,若Redis被用作message queue,订购消息的consumer处理速度跟不上发布消息的producer时,就会发生对应的output buffer超限的情况。
该配置项格式如下:
client-output-buffer-limit <class> <hard limit> <soft limit> <soft seconds>
<class>:目前支持3种客户端:
1) normal => normal clients; 
2) slave clients and MONITOR clients; 
3) pubsub => clients subcribed to at least one pubsub channel or pattern
<hard limit>:若output buffer大小超过该值,Redis会立即关闭与对应client的连接
<soft limit> <soft seconds>:若output buffer大小超过soft limit且这种情况的持续时间超过soft seconds,则Redis会关闭与对应client的连接。
默认的配置如下:
client-output-buffer-limit normal 0 0 0
client-output-buffer-limit slave 256mb 64mb 60
client-output-buffer-limit pubsub 32mb 8mb 60
这些数值分别代表缓冲区软限制,硬限制和以秒为单位的超时(类似于复制缓冲区)。当Redis终止连接时,这些值提供保护——不需要客户读取回复——当缓冲区尺寸达到a)软限制并且保持状态直到超时b)硬限制。将这些数值都设为0意味着关闭保护。
不过,和复制缓冲区不同的是客户端缓冲区来自Redis数据内存空间。可以通过maxmemory指令设置Redis的总内存值,达到极限后,Redis将应用其配置的驱逐策略(由maxmemory-policy 指令定义)。因此,低性能的客户或大量的同时连接可能会因为数据集尺寸和客户端缓冲区达到内存限制导致Redis实例过早的驱逐键或禁止更新。

由于生命周期的相对性,一个客户端不需要降低性能就可能导致这种现象。因为RAM读取和网络读取存在着很大的速度差异,过多的客户端缓冲区很可能耗尽Redis内存,即使是在高性能的客户端和网络连接中。例如,考虑下(万恶的)KEYS指令,这个指令触发后,Redis将会把整个键的名空间拷贝给客户端缓冲区。如果我们的数据库有很多键,这很可能导致驱逐。


Redis主从配置

主要是针对单点的,全局的redis进行主从配置,并用aof方式进行增量更新请求数据

在主的redis配置的最后,redis.conf 添加

include /data/redis/6379/instance.conf 

然后在平级的instance.conf 中的内容

appendonly yes   --默认会生成appendonly.aof 存储数据
maxclients 180000
save ""


在从的redis配置的最后,redis.conf 添加

include /data/redis/6379/instance.conf

然后在平级的instance.conf 中的内容

appendonly yes  --默认会生成appendonly.aof 存储数据
save ""
slaveof 10.104.5.98 6379   ---该地址就是主的地址



本文转载自:

共有 人打赏支持
粉丝 19
博文 150
码字总数 170550
作品 0
济南
私信 提问
codis-server/redis主从同步超时

  问题简介   今天在操作codis集群进行主从同步的时候,发现key加载到快完成的时候,就停下来了,不继续加载key到内存了,等一下又在重新全量同步了。排查日志看到如下内容:      主...

linux运维菜
2018/06/23
0
0
Redis配置文件详解

Redis配置文件详解 Redis是一款开源的、高性能的键-值存储(key-value store),和memcached类似,redis常被称作是一款key-value内存存储系统或者内存数据库,同时由于它支持丰富的数据结构,...

arvin_qin
2017/05/26
0
0
美团在Redis上踩过的一些坑-3.redis内存占用飙升

转载请注明出处哈:http://carlosfu.iteye.com/blog/2254154 于是理解想到服务端和客户端交互时,分别为每个客户端设置了输入缓冲区和输出缓冲区,这部分如果很大的话也会占用Redis服务器的内...

lovely可爱欧辰
2016/03/15
0
0
Redis(一)、安装与配置文件详解

Redis数据库安装与配置文件详解 第1章 redis简介 Redis 是一个开源(BSD许可)的,内存中的数据结构存储系统,它可以用作数据库、缓存和消息中间件。 它支持多种类型的数据结构,如 字符串(...

呀哈喽
2018/04/06
0
0
Redis丢失订阅消息和client-output-buffer-limit属性配置说明

最近使用Redis缓存行情数据,发现程序运行一段时间后,出现subscribe线程不再能够接收到订阅的行情数据,发现是由Redis的输出缓冲机制导致的。 Redis为了解决输出缓冲区消息大量堆积的隐患,...

xiaomin0322
2018/12/28
0
0

没有更多内容

加载失败,请刷新页面

加载更多

Navicat使用教程:使用Navicat Premium 12自动执行数据库复制(二)

下载Navicat Premium最新版本 Navicat Premium是一个可连接多种数据库的管理工具,它可以让你以单一程序同时连接到MySQL、Oracle及PostgreSQL数据库,让管理不同类型的数据库更加的方便。 与...

电池盒
22分钟前
1
0
简单聊聊Linux学习经历

学习,是我们一生中都规避不了的一个话题,人的一生中都是在不断的学习,无论是功成名就的人士,还是一无是处的小混混,始终都处在一个不断学习的环境中,只是学习的内容千差万别,有的人是为...

linux-tao
22分钟前
1
0
如何才能从程序员成长为实战型架构师?必掌握这7大实战技能经验

想成为一名架构师,但是架构师对应的技能,我应该掌握哪些啊?以及掌握的程度是什么样的?如何成为一名真正的实战性架构师? 我简要分为以下7点来谈谈,从技能的角度抛砖引玉,希望你对你架构...

mikechen优知
33分钟前
2
0
vue里实现echarts中国地图

echartsDemo.vue <template> <div> <div id="chart_example"></div> </div></template><script> // 首先要 cnpm install echarts import echarts from 'echarts' import ......

Danni3
45分钟前
2
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部