文档章节

ceph性能测试cosbecnch自动化

 惊浪
发布于 2015/03/10 14:37
字数 688
阅读 901
收藏 3

1、使用CosBench测试完成ceph的基准性能报告,手工收集ceph主机的IO/CPU/disk负载数据

通过看COSBenchUserGuide.pdf学习部署过程,完全参考该文档即可轻松部署。经过测试librados-config-sample.xml、s3-config-sample*.xml都可以正常使用。使用时一定要确认符合xml格式。

配置说明:

A. storage type="s3"指定了类型定义,对应访问ceph的RGW接口,通过apache、nginx服务器都可以正常访问

B. work type="init"创建s3的bucket;operation type="read"读s3接口对象;operation type="write"写s3接口对象;work type="cleanup"删除s3接口对象;work type="dispose"清除bucket

C.storage的config="accesskey=979OLL*;secretkey=nOM*;endpoint=http://*.*.0.1"为rados-admin创建的s3用户

D.config="cprefix=s3testqwer;containers=r(5,6);objects=r(1,2000);sizes=c(256)KB" 创建的两个bucket为s3testqwer5、s3testqwer6,每个bucket中的对象为1~2000总共两千个对象

注:对应的jar包为.\cos\osgi\plugins\cosbench-s3_0.4.1.0.jar

日志查看:

A. ./cos/conf/driver.conf文件中的log_level = DEBUG改为debug模式,开启错误信息

B. ./cos/conf/controller.conf文件中的log_level = INFO根据需要改成debug模式

C. 连接、加载jar包等错误日志在.cos/log/system.log中,log/mission目录为每次运行的workload日志

D. 一般我是通过http://192.168.1.105:19088/controller/index.html网页加载压测配置文件,如果有需要可以加载很多个,在正常情况下会顺序跑完所有workload

2、使用CosBench测试完成ceph的基准性能报告,在运行时手工使用shell脚本统计负载数据

在测试时需要观察系统资源使用情况,我们使用dstat命令查看CPU、网络负载,iostat命令查看磁盘负载

安装命令分别为yum install dstat;yum install sysstat

iostat -dx 3 5间隔3秒打印5次磁盘io情况,主要观察await/%util两项
dstat 每秒钟打印一次

开始时是通过命令打印crt上面,然后通过excell统计,每次压测完都要手工处理1个小时。后来通过命令把平均值统计好直接输出,运行完就可以直接生成报告

3、使用CosBench测试完成ceph的基准性能报告,把CEPH主机负载数据使用shell脚本输出日志,直接通过日志数据完成报告手工输出

4、开发CosBench测试相应的lib库完成DNS解析,同时连接多个RGW,测试负载情况。不再观察测试过程,测试完后直接完成报告

© 著作权归作者所有

共有 人打赏支持
上一篇: Ceph 命令行说明
粉丝 15
博文 29
码字总数 17864
作品 0
福州
程序员
私信 提问
“Ceph浅析”系列之七——关于Ceph的若干想法

本篇文章的内容,主要是笔者在调研分析Ceph过程中产生的一些思考。因为其中的内容比较自由发散,且大多是笔者的个人见解,故此另启一文进行讨论。 7.1 关于Ceph的性能 目前为止,本系列的文章...

红薯
2014/04/01
1K
2
分部署云存储系统Ceph架构剖析

云硬盘是IaaS云平台的重要组成部分,云硬盘给虚拟机提供了持久的块存储设备。目前的AWS 的EBS(Elastic Block store)给Amazon的EC2实例提供了高可用高可靠的块级存储卷,EBS适合于一些需要访问...

English0523
2015/12/25
0
0
S3 协议兼容的分布式对象存储系统 - Yig

Yet another Index Gateway Yig 是 S3 协议兼容的分布式对象存储系统。它脱胎于开源软件 ceph ,在多年的商业化运维中, 针对运维中出现的问题和功能上的新需求,重新实现了一遍 radosgw 用于...

匿名
2018/05/23
0
0
ceph文件系统与原生磁盘读写性能的比较

一.测试目的 获取ceph文件系统的读写性能,并与原生磁盘进行比较 二.硬件及网络环境 1.硬盘信息 磁盘(型号,类型,容量) CPU 客户端 ST1000DM003-1CH162;SATA;1T Intel(R) Core(TM) i3-4...

北_木
2014/05/29
0
35
Ceph RGW bucket 自动分片介绍和存在的问题

工作中存储集群使用了 Ceph 技术,所用的是版本是 Luminous 12.2.4,因为刚刚上手 Ceph,不少概念和问题也都是头一次听说,比如这次的自动分片(auto resharding)。不得不说,Ceph 对象存储...

blackpiglet
2018/08/14
0
0

没有更多内容

加载失败,请刷新页面

加载更多

centos7安装RabbitMQ详细过程

由于RabbitMQ是基于Erlang语言开发,所以在安装RabbitMQ之前,需要先安装Erlang 1、环境: centos 7.1 内核版本3.10.0-229.el7.x86_64 Erlang 19.0.4版本 RabbitMQ 3.6.14版本 2、在线安装E...

秋至丶枫以落
4分钟前
0
0
6个使用KeePassX保护密码的技巧

虽然安全是个深奥的主题,但是你可以遵循几个简单的日常习惯来减小攻击面。本文将解释确保密码信息安全的重要性,并给出如何充分利用KeePassX的建议。 日益互联的数字世界使安全成为一个重要...

Linux就该这么学
6分钟前
0
0
2018最佳GAN论文回顾(下)

继上一篇《2018最佳GAN论文回顾(上)》,我又继续介绍了一个对于GAN的基于样式的生成器体系结构的新论文,提出了一个新的模型来应对这种挑战。 一种用于生成式对抗网络的基于生成器体系结构...

阿里云官方博客
8分钟前
0
0
UnsatisfiedLinkError sawindbg.dll

方法:搜索sawindbg.dll,然后将文件报错的目录下

洛水
44分钟前
4
0
说说不知道的Golang中参数传递

本文由云+社区发表 导言 几乎每一个C++开发人员,都被面试过有关于函数参数是值传递还是引用传递的问题,其实不止于C++,任何一个语言中,我们都需要关心函数在参数传递时的行为。在golang中...

腾讯云加社区
45分钟前
4
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部