SwiftStack-Swift容量管理-平滑添加/删除存储

2014/01/24 16:00
阅读数 3.6K


SwiftStack在OpenStack Swift基础上开发的一种产品,当然公司的名称也同样为SwiftStack。

博客:http://swiftstack.com/blog/

 

SwiftStack里面有篇文章比较好的是Swift Capacity Management  即Swift的容量管理,当在Swift服务器集群中

删除或者添加存储的时候,应该怎么做使得系统可以平滑过渡,而不会使得在执行删除或添加存储操作后服务

器的出现占用大量的I/O以及带宽,CPU资源的问题。

添加存储

一次性添加存储--傻瓜做法:

如果在运行Swift的时候添加3TB的硬盘存储,名称为d16,节点为192.168.12.104

那么需要在ring中添加存储

$ swift-ring-builder account.builder add z1-192.168.12.104:6002/d16 3000

$ swift-ring-builder container.builder add z1-192.168.12.104:6001/d16 3000

$ swift-ring-builder object.builder add z1-192.168.12.104:6000/d16 3000

3000为该存储在ring中的权重(weight),用存储的容量(GB作为单位)作为权重是比较方便的做法。

Rebalance ring,并且把所有新的ring.gz重新传送到其他的存储服务器上

$ swift-ring-builder account.builder rebalance

$ swift-ring-builder container.builder rebalance

$ swift-ring-builder object.builder rebalance

Swift执行了ring的修改,但是真的可以皆大欢喜了?

错!这样做集群的性能将会急剧下降。即时添加3TB的存储,将会造成大量的数据在集群中传输。

Rebalance ring意味着每个存储设备有相等的负载(根据权重)。如果集群中有1.5T的数据将会传送到新的设备中,

那么将导致10GB的以太网卡在接下的20分钟内达到100%使用率。整个系统的性能在数个小时内将惨不忍睹。

平滑添加存储--聪明的做法:

添加存储的时候把权重从小开始:3000-》25

$ swift-ring-builder account.builder add z1-192.168.12.104:6002/d16 25

$ swift-ring-builder container.builder add z1-192.168.12.104:6001/d16 25

$ swift-ring-builder object.builder add z1-192.168.12.104:6000/d16 25

$ scp account.ring.gz swift-node-1:/etc/swift/account.ring.gz

$ scp container.ring.gz swift-node-1:/etc/swift/container.ring.gz

$ scp account.ring.gz swift-node-1:/etc/swift/account.ring.gz

$ scp account.ring.gz swift-node-2:/etc/swift/account.ring.gz

$ scp container.ring.gz swift-node-2:/etc/swift/container.ring.gz

$ scp account.ring.gz swift-node-2:/etc/swift/account.ring.gz ...

Rebalance ring,并传送ring.gz文件到集群中的所有存储服务器

$ swift-ring-builder account.builder rebalance

$ swift-ring-builder container.builder rebalance

$ swift-ring-builder object.builder rebalance

$ scp account.ring.gz swift-node-1:/etc/swift/account.ring.gz

$ scp container.ring.gz swift-node-1:/etc/swift/container.ring.gz

$ scp account.ring.gz swift-node-1:/etc/swift/account.ring.gz

$ scp account.ring.gz swift-node-2:/etc/swift/account.ring.gz

$ scp container.ring.gz swift-node-2:/etc/swift/container.ring.gz

$ scp account.ring.gz swift-node-2:/etc/swift/account.ring.gz ...

等待一段时间后(比如说一个小时)重新设置该存储的权重(25->50),再reblance ring,再传送ring.gz到集群中的所有存储服务器

$ swift-ring-builder account.builder set_weight z1-192.168.12.104:6002/d16 50

$ swift-ring-builder container.builder set_weight z1-192.168.12.104:6001/d16 50

$ swift-ring-builder object.builder set_weight z1-192.168.12.104:6000/d16 50

$ swift-ring-builder account.builder rebalance

$ swift-ring-builder container.builder rebalance

$ swift-ring-builder object.builder rebalance

$ scp account.ring.gz ...

不断重复,直到120个小时之后,权重变为3000了,设备添加就算是成功了。

当然,可以写通过脚本的方式省略大量的重复步骤!

删除存储

      方式和添加存储是一样的,把存储的权重逐步减少,每个小时或者固定的时间内重复步骤,直到权重变为0。

这个时候要删除的存储就可以从服务器下架了。


展开阅读全文
打赏
0
1 收藏
分享
加载中
更多评论
打赏
0 评论
1 收藏
0
分享
返回顶部
顶部