ceph性能测试cosbecnch自动化
博客专区 > 惊浪 的博客 > 博客详情
ceph性能测试cosbecnch自动化
惊浪 发表于3年前
ceph性能测试cosbecnch自动化
  • 发表于 3年前
  • 阅读 708
  • 收藏 3
  • 点赞 1
  • 评论 0

腾讯云 技术升级10大核心产品年终让利>>>   

摘要: 如何在测试过程中自动完成数据收集,每日补充一点,我们使用的是CosBench 的Release 0.4.1.0.zip包。本文主要讲解一下处理思路

1、使用CosBench测试完成ceph的基准性能报告,手工收集ceph主机的IO/CPU/disk负载数据

通过看COSBenchUserGuide.pdf学习部署过程,完全参考该文档即可轻松部署。经过测试librados-config-sample.xml、s3-config-sample*.xml都可以正常使用。使用时一定要确认符合xml格式。

配置说明:

A. storage type="s3"指定了类型定义,对应访问ceph的RGW接口,通过apache、nginx服务器都可以正常访问

B. work type="init"创建s3的bucket;operation type="read"读s3接口对象;operation type="write"写s3接口对象;work type="cleanup"删除s3接口对象;work type="dispose"清除bucket

C.storage的config="accesskey=979OLL*;secretkey=nOM*;endpoint=http://*.*.0.1"为rados-admin创建的s3用户

D.config="cprefix=s3testqwer;containers=r(5,6);objects=r(1,2000);sizes=c(256)KB" 创建的两个bucket为s3testqwer5、s3testqwer6,每个bucket中的对象为1~2000总共两千个对象

注:对应的jar包为.\cos\osgi\plugins\cosbench-s3_0.4.1.0.jar

日志查看:

A. ./cos/conf/driver.conf文件中的log_level = DEBUG改为debug模式,开启错误信息

B. ./cos/conf/controller.conf文件中的log_level = INFO根据需要改成debug模式

C. 连接、加载jar包等错误日志在.cos/log/system.log中,log/mission目录为每次运行的workload日志

D. 一般我是通过http://192.168.1.105:19088/controller/index.html网页加载压测配置文件,如果有需要可以加载很多个,在正常情况下会顺序跑完所有workload

2、使用CosBench测试完成ceph的基准性能报告,在运行时手工使用shell脚本统计负载数据

在测试时需要观察系统资源使用情况,我们使用dstat命令查看CPU、网络负载,iostat命令查看磁盘负载

安装命令分别为yum install dstat;yum install sysstat

iostat -dx 3 5间隔3秒打印5次磁盘io情况,主要观察await/%util两项
dstat 每秒钟打印一次

开始时是通过命令打印crt上面,然后通过excell统计,每次压测完都要手工处理1个小时。后来通过命令把平均值统计好直接输出,运行完就可以直接生成报告

3、使用CosBench测试完成ceph的基准性能报告,把CEPH主机负载数据使用shell脚本输出日志,直接通过日志数据完成报告手工输出

4、开发CosBench测试相应的lib库完成DNS解析,同时连接多个RGW,测试负载情况。不再观察测试过程,测试完后直接完成报告

共有 人打赏支持
粉丝 17
博文 28
码字总数 17864
×
惊浪
如果觉得我的文章对您有用,请随意打赏。您的支持将鼓励我继续创作!
* 金额(元)
¥1 ¥5 ¥10 ¥20 其他金额
打赏人
留言
* 支付类型
微信扫码支付
打赏金额:
已支付成功
打赏金额: