文档章节

redis(3):redis如何做队列

fzxu_05
 fzxu_05
发布于 2013/01/31 17:22
字数 461
阅读 752
收藏 9
点赞 0
评论 0


前言:缓存不仅可以减少数据库的查询读取压力,还可以减少db的写入io压力

方案:缓存实时更新数据,并将更新记录写入队列,db异步更新,

1.可以使用类似mq(如rabbitmq)队列软件

2.redis自行建队列

(注意要使用increment来维持队列序号:具体原因如下:使用 get 后处理数据再set的方式维护队列,会因为并发导致数据丢失。

示例说明:

ab测试下面的脚本,并发100,跑10000次

一.get& set脚本

ab -n 10000 -c 100 http://127.0.0.1/redis1.php

include_once 'redis.class.php';
$redis = new RedisCluster(false);
$redis->connect(array('host'=>'127.0.0.1','port'=>6379), true);// master

$var = $redis->get('var');
$var++;
$redis->set('var',$var);
$redis->close();


跑完脚本读取缓存数据(我的是在512M的虚拟机上跑的,不同的机器数据不同,不过肯定低于10000,其他的数字都在get & set中被覆盖掉了)

redis 127.0.0.1:6379> get var 
"628"


原因:

读写间隔中其他并发写入,导致数据丢失


二.incr


include_once 'redis.class.php';
$redis = new RedisCluster(false);
$redis->connect(array('host'=>'127.0.0.1','port'=>6379), true);// master
$redis->incr('var');
$redis->close();


会得到完整的10000条数据,不会丢失


redis 127.0.0.1:6379> get var 
"10000"


)

总结:用incr存储队列编号,用标记+编号作为key存储队列内容,比如商品竞拍功能

4.后台基于缓存队列读取更新数据并更新数据库

异步更新的风险:

(1).前后端同时写,有可能造成覆盖的风险

(2).缓存数据丢失或服务崩溃可能导致数据丢失风险

(3).异步更新如出现队列阻塞可能导致数据丢失风险,比如前台生成队列的速度>后台写数据库的速度



推荐一个不错的网站




© 著作权归作者所有

共有 人打赏支持
fzxu_05
粉丝 43
博文 165
码字总数 84201
作品 0
朝阳
程序员
第一次用Redis做消息队列,求解答

之前没用过消息队列系统,第一次接触,目前在做一个API接口系统,考虑到接口调用频繁的问题,想采用队列机制实现, 环境PHP+Mysql+Redis/MongoDB。 目的:不实时操作Mysql数据库,而是进入Red...

5D同学
2013/02/25
7.6K
6
redis list实现消息队列以及事件模块

@ganqing 你好,想跟你请教个问题: 您好,我是redis的初学者,想利用redis做消息队列,再看了您的文章后,我的理解还是不够透彻,所有想向您请教下。不知道您还有redis做消息队列这方面的资...

CrazyIllusion
2014/11/21
1K
3
redis——应用场景归纳,redis的用途

在“怎样让Redis在你的系统中发挥作用”一文中,Salvatore 'antirez’ Sanfilippo告诉我们如何利用Redis独有的数据结构处理能力来解决一些常见问题。一些Redis原语命令比如LPUSH、LTRIM和LRE...

_Mr_Computer_
06/26
0
0
phalapi-进阶篇7(使用缓存以及用redis拓展解决实际问题)

phalapi-进阶篇7(使用缓存以及用redis拓展解决实际问题) 先在这里感谢phalapi框架创始人@dogstar,为我们提供了这样一个优秀的开源框架. 当我们在开发一个项目时,我们可能会遇到很多问题,比如...

喵了_个咪
2015/12/12
114
0
备战一线互联网公司Java工程师面试题 (2)

JVM 1、请介绍一下JVM内存模型??用过什么垃圾回收器都说说呗 2、线上发送频繁full gc如何处理? CPU 使用率过高怎么办? 如何定位问题?如何解决说一下解决思路和处理方法 3、知道字节码吗?字节...

j4love
04/14
0
0
用redis实现消息队列(实时消费+ack机制)

消息队列 首先做简单的引入。 MQ主要是用来: 解耦应用、 异步化消息 流量削峰填谷 目前使用的较多的有ActiveMQ、RabbitMQ、ZeroMQ、Kafka、MetaMQ、RocketMQ等。 网上的资源对各种情况都有详...

美的让人心动
05/03
0
0
Redis能干啥?细看11种Web应用场景

Redis的一个很大好处就是可以不用整个转入到这个数据库,而是可以沿用之前的MySQL等数据库,而仅在一些特定的应用场景通过Redis的特性提高效率。本文列出了11个这样的Web应用场景,如显示最新...

mickelfeng
2013/02/03
0
0
也谈淘点点60s短信订单的架构设计

看到了这个 http://www.oschina.net/question/926166_2137672 然后有人写了博客还分析设计了一下 http://my.oschina.net/u/926166/blog/522227 本人最近对架构设计较感兴趣,下面是我的设计,...

xue777hua
2015/10/27
0
52
redis 快照部分,追加模式部分,复制部分配置

四,快照部分 1:“save ”:保存快照的频率,第一个表示多长时间,单位是秒,第二个“”表示至少执行写操作的次数; 在一定时间内至少执行一定数量的写操作时,就自动保存快照;可设置多个条...

daydayup08
2016/04/23
167
0
Redis的11种Web应用场景

在“怎样让Redis在你的系统中发挥作用”一文中,Salvatore'antirez’Sanfilippo告诉我们如何利用Redis独有的数据结构处理能力来解决一些常见问题。一些Redis原语命令比如LPUSH、LTRIM和LREM等...

eui988
2015/03/27
0
0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

SpringBoot | 第十章:Swagger2的集成和使用

前言 前一章节介绍了mybatisPlus的集成和简单使用,本章节开始接着上一章节的用户表,进行Swagger2的集成。现在都奉行前后端分离开发和微服务大行其道,分微服务及前后端分离后,前后端开发的...

oKong
今天
4
0
Python 最小二乘法 拟合 二次曲线

Python 二次拟合 随机生成数据,并且加上噪声干扰 构造需要拟合的函数形式,使用最小二乘法进行拟合 输出拟合后的参数 将拟合后的函数与原始数据绘图后进行对比 import numpy as npimport...

阿豪boy
今天
1
0
云拿 无人便利店

附近(上海市-航南路)开了家无人便利店.特意进去体验了一下.下面把自己看到的跟大家分享下. 经得现场工作人员同意后拍了几张照片.从外面看是这样.店门口的指导里强调:不要一次扫码多个人进入....

周翔
昨天
1
0
Java设计模式学习之工厂模式

在Java(或者叫做面向对象语言)的世界中,工厂模式被广泛应用于项目中,也许你并没有听说过,不过也许你已经在使用了。 简单来说,工厂模式的出现源于增加程序序的可扩展性,降低耦合度。之...

路小磊
昨天
165
1
npm profile 新功能介绍

转载地址 npm profile 新功能介绍 npm新版本新推来一个功能,npm profile,这个可以更改自己简介信息的命令,以后可以不用去登录网站来修改自己的简介了 具体的这个功能的支持大概是在6这个版...

durban
昨天
1
0
Serial2Ethernet Bi-redirection

Serial Tool Serial Tool is a utility for developing serial communications, custom protocols or device testing. You can set up bytes to send accordingly to your protocol and save......

zungyiu
昨天
1
0
python里求解物理学上的双弹簧质能系统

物理的模型如下: 在这个系统里有两个物体,它们的质量分别是m1和m2,被两个弹簧连接在一起,伸缩系统为k1和k2,左端固定。假定没有外力时,两个弹簧的长度为L1和L2。 由于两物体有重力,那么...

wangxuwei
昨天
0
0
apolloxlua 介绍

##项目介绍 apolloxlua 目前支持javascript到lua的翻译。可以在openresty和luajit里使用。这个工具分为两种模式, 一种是web模式,可以通过网页使用。另外一种是tool模式, 通常作为大规模翻...

钟元OSS
昨天
2
0
Mybatis入门

简介: 定义:Mybatis是一个支持普通SQL查询、存储过程和高级映射的持久层框架。 途径:MyBatis通过XML文件或者注解的形式配置映射,实现数据库查询。 特性:动态SQL语句。 文件结构:Mybat...

霍淇滨
昨天
2
0
开发技术瓶颈期,如何突破

前言 读书、学习的那些事情,以前我也陆续叨叨了不少,但总觉得 “学习方法” 就是一个永远在路上的话题。个人的能力、经验积累与习惯方法不尽相同,而且一篇文章甚至一本书都很难将学习方法...

_小迷糊
昨天
1
0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

返回顶部
顶部