文档章节

测试环境流量回放

lunar_stud
 lunar_stud
发布于 2017/02/13 18:47
字数 391
阅读 205
收藏 1

 

 

    最近新申请了一些数据库资源,代码也已经改动完毕,测了几个数据,感觉改动没有什么问题。不过,切换数据源如果只是简单测几条数据,貌似很不严谨的样子

,毕竟线上的流量比较大,说不准就被压垮了呢。所以,还是有必要做一下压力测试。拿线上的流量来做测试是最好的了,一方面可以看改动后的程序和数据库能否支撑目前的请求,另一方面,也可以和当前的性能进行比较。因为时间仓促,没有去调研现有的工具,而是自己写了一个。我的思路是这样的:线上的请求过来都会打日志(完整的日志),一个脚本一直在扫描这个日志,当出现了请求之后,就发往改动好的程序代码,这样就可以模拟两套数据源和代码在同一时刻的响应时间了(可能中间还是会差个几秒,但是可以忽略不计了)。

#coding:utf-8
#!/usr/bin/python
import json
import redis

import subprocess

def getData():
    popen = subprocess.Popen('tail -n 1 -f restlog.log',stdout=subprocess.PIPE, stderr=subprocess.PIPE, shell=True)
    while True:
        line = popen.stdout.readline()
        if "request" not in line:  #如果不是请求,直接跳出
            continue
        data = line.split("request body:")
        #下面一段封装具体的请求,因为涉及到公司的一些代码,暂且省略了

 代码运行了三四个小时,做了充分的数据对比,还不错。

© 著作权归作者所有

共有 人打赏支持
lunar_stud
粉丝 3
博文 13
码字总数 4489
作品 0
海淀
程序员
私信 提问
2.0 解析系列 | OceanBase的重要基础设施——DBReplay

OB君:9月21日,OceanBase 2.0 在云栖大会上重磅发布。我们将在接下来的时间里为大家持续推出 “OceanBase 2.0 技术解析系列” 文章,分别从 可运维性、分布式架构、数据可用性、性价比及兼容...

荔子liqi
2018/10/18
0
0
OceanBase的重要基础设施——DBReplay

OB君:9月21日,OceanBase 2.0 在云栖大会上重磅发布。我们将在接下来的时间里为大家持续推出 “OceanBase 2.0 技术解析系列” 文章,分别从 可运维性、分布式架构、数据可用性、性价比及兼容...

阿里云云栖社区
2018/10/19
0
0
记一次kafka数据丢失问题的排查

数据丢失为大事,针对数据丢失的问题我们排查结果如下。 第一:是否存在数据丢失的问题? 存在,且已重现。 第二:是在什么地方丢失的数据,是否是YDB的问题? 数据丢失是在导入阶段,数据并...

徐学良
2018/02/03
0
0
HTTP/HTTPS, Socks5代理服务器--wyproxy

HTTP/HTTPS, Socks5代理服务器, 并可以将网络请求记录保存到后台数据库. 帮助安全测试人员更加便捷的发现(客户端/APP/网页)中隐藏的接口或资源。 同时支持流量handle回放数据功能,在HTTP He...

匿名
2017/03/12
463
0
某虚拟化防火墙测试报告及厂家答疑

记录某虚拟防火墙功能测试 记录厂家对测试报告的解释 纯粹技术性测试,不涉及到生产和应用 公网地址已经失效 某厂家虚拟防火测试文档 1.概述 本次使用某厂家深度安全网关VSG-4(以下简称vFW...

羊草
2018/05/21
0
0

没有更多内容

加载失败,请刷新页面

加载更多

Linux Wireshark普通用户启动使用方案

当系统安装好Wireshark后请正常启动是否可以进行正常使用,如果不行请参考下列指导 向系统添加一个用户组 sudo groupadd wireshark //如提示此组存在可跳过 将指定用户添加到这个组中 sudo...

CHONGCHEN
今天
2
0
CSS 选择器参考手册

CSS 选择器参考手册 选择器 描述 [attribute] 用于选取带有指定属性的元素。 [attribute=value] 用于选取带有指定属性和值的元素。 [attribute~=value] 用于选取属性值中包含指定词汇的元素。...

Jack088
今天
2
0
数据库篇一

数据库篇 第1章 数据库介绍 1.1 数据库概述  什么是数据库(DB:DataBase) 数据库就是存储数据的仓库,其本质是一个文件系统,数据按照特定的格式将数据存储起来,用户可以对数据库中的数据...

stars永恒
今天
4
0
Intellij IDEA中设置了jsp页面,但是在访问页面时却提示404

在Intellij IDEA中设置了spring boot的jsp页面,但是在访问时,却出现404,Not Found,经过查找资料后解决,步骤如下: 在Run/Debug Configurations面板中设置该程序的Working Directory选项...

uknow8692
昨天
4
0
day24:文档第五行增内容|每月1号压缩/etc/目录|过滤文本重复次数多的10个单词|人员分组|

1、在文本文档1.txt里第五行下面增加如下内容;两个方法; # This is a test file.# Test insert line into this file. 分析:给文档后增加内容,可以用sed 来搞定;也可以用while do done...

芬野de博客
昨天
4
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部