文档章节

ceph集群配置注意事项

linuxhunter
 linuxhunter
发布于 2015/12/30 15:02
字数 395
阅读 367
收藏 1

ceph部署环境:

    硬件环境。4台4U的服务器,服务器配置信息如下:

    1)CPU是Intel Xeon E5-2650(32核心);

    2)内存大小是128GB;

    3)服务器内共有35块HDD,其中一块HDD用于安装操作系统,另外34块HDD用于ceph存储;

    4)网络采用public/cluster类型的网络;

    软件环境。

    1)操作系统:4台服务器都采用ubuntu-14.04.1;

    2)ceph软件版本:Firefly最新版(0.80.11);

出现的问题:

    当启动集群时,ceph集群中出现大量的非active+clean的PGs并且osdmap也不稳定,osd的状态在up和doan之间来回的切换。这样导致ceph集群迟迟不能处于可用状态。

问题原因:

    由于在一个host上启动的osd数量太多了(34个OSDs),导致在ceph集群启动时以及ceph集群在recovery和rebalance时,由于产生大量的线程,该线程数量已经远远超越了linux内核默认配置的系统最大线程数。

解决方案:

    linux内核默认的最大线程数是32768,可以通过命令#sysctl kernel.pid_max来查看。该最大线程数是针对桌面系统的,而对于服务器以及集群的系统来说,这个值是不够的。因此最好将该值设置成最大值,即:#sysctl -w kernel.pid_max=4194303。或者修改/etc/sysctl.conf文件,将kernel.pid_max = 4194303填写在/etc/sysctl.conf文件的末尾。

© 著作权归作者所有

linuxhunter
粉丝 69
博文 144
码字总数 93264
作品 0
沈阳
高级程序员
私信 提问
ceph monitor部署若干注意事项

关于monitor的部署,有下面几个需要注意的地方: 1. monitor节点的数量。 一般来说,在实际运行中,ceph monitor的个数是奇数个。初始最好至少配置3个。然后增加的时候,2个2个的增加。 2. m...

liupan1111
2016/11/22
245
0
Hardware Recommendations【硬件推荐】

硬件推荐(内容提要) 1.CPU 2.RAM 3.Data Storage(数据存储) 3.1 Hard Disk Drives(硬盘驱动器) 3.2 Solid State Drives(固态硬盘) 3.3 Controllers(控制器) 3.4 Additional Consi...

天空冰雨
2015/03/24
0
0
Ceph分布式存储学习笔记之jewel

本文介绍在Oracle Linux上创建配置ceph集群。Ceph软件代号为jewel。 一、操作系统设置 以下操作在每个ceph集群节点都要操作。 1、OS内核设置 2、软件仓库 3、禁用防火墙和Selinux 4、设置免密...

candon123
2018/06/26
0
0
简单介绍Ceph分布式存储集群

导读 在规划Ceph分布式存储集群环境的时候,对硬件的选择很重要,这关乎整个Ceph集群的性能,下面梳理到一些硬件的选择标准,可供参考: 1)CPU选择 Ceph metadata server会动态的重新分配负...

问题终结者
2018/10/10
0
0
基于redhat7.3 ceph对象存储集群搭建+owncloud S3接口整合生产实践

一、环境准备 安装redhat7.3虚拟机四台 在四台装好的虚拟机上分别加一块100G的硬盘。如图所示: 3.在每个节点上配置主机名 4.集群配置信息如下 5.各节点配置yum源 #需要在每个主机上执行以下...

盖世英雄iii
2018/06/27
0
0

没有更多内容

加载失败,请刷新页面

加载更多

Leetcode PHP题解--D88 696. Count Binary Substrings

D88 696. Count Binary Substrings 题目链接 696. Count Binary Substrings 题目分析 给定一个01字符串,返回仅用连续的0和1串所能组成的二进制字符串个数。 例如,00110011,就包含0011,0...

skys215
今天
2
0
基础工具类

package com.atguigu.util;import java.sql.Connection;import java.sql.SQLException;import java.util.Properties;import javax.sql.DataSource;import com.alibaba.druid......

architect刘源源
今天
52
0
P30 Pro劲敌!DxO官宣新机:排行榜又要变

5月26日晚间,DxOMark官方推特预告,将在5月27日公布一款新机型的DxOMark评分,猜猜是哪款? 网友猜想的机型有:红米K20、谷歌Pixel 3a、索尼Xperia 1、诺基亚9 PureView等。 DxOMark即将公布...

linux-tao
昨天
16
0
Ubuntu18.04.2窗口过小不能自适应(二次转载)

解决Ubuntu在虚拟机窗口不能自适应 2018年09月06日 16:20:08 起不了名儿 阅读数 855 此博文转载:https://blog.csdn.net/nuddlle/article/details/77994080(原地址) 试了很多办法这个好用 ...

tahiti_aa
昨天
2
0
死磕 java同步系列之CountDownLatch源码解析

问题 (1)CountDownLatch是什么? (2)CountDownLatch具有哪些特性? (3)CountDownLatch通常运用在什么场景中? (4)CountDownLatch的初始次数是否可以调整? 简介 CountDownLatch,可以...

彤哥读源码
昨天
8
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部