文档章节

ceph scrub处理流程介绍

linuxhunter
 linuxhunter
发布于 2016/05/25 15:18
字数 350
阅读 549
收藏 2

PG::sched_scrub()/PG::_finish_recovery()

|__PG::queue_scrub()

     |__state_set(PG_STATE_SCRUBBING)

     |__PG::requeue_scrub()

          |__OSD::queue_for_scrub()

               |__OSD::op_wq.queue()

 

PGQueueable::RunVis::operator()(PGScrub)

|__PG::scrub()

     |__PG::chunky_scrub()

          |__scrubber.state = INACTIVE               初始状态

          |__scrubber.epoch_start = info.history.same_interval_since

          |__scrubber.state = NEW_CHUNK

          |__初始化primary_scrubmap和received_maps数据结构(分别用来保存primary和replicas的scrubmap信息)

          |__PGBackend::objects_list_partial()          读取指定数量的objects

          |__遍历actingbackfill队列且调用PG::_request_scrub_map()

               |__创建MOSDRepScrub消息对象

               |__OSD::send_message_osd_cluster()将MOSDRepScrub消息对象发送给actingbackfill队列中的OSDs

          |__scrubber.state = WAIT_PUSHES

          |__等待所有replicas将scrub信息发送回primary,之后设置scrubber.state = WAIT_LAST_UPDATE

          |__对于last_update_applied >= scrubber.subset_last_update,则设置scrubber.state = BUILD_MAP

          |__PG::build_scrub_map_chunk()

               |__PGBackend::objects_list_range()

               |__PGBackend::be_scan_list()

                    |__读取对象的大小信息

                    |__读取对象的属性信息

                    |__对于需要deep scrub的则读取对象本身以及对象属性本身,之后计算对应的digest值

               |__PG::_scan_rollback_obs()

               |__PG::_scan_snaps()

               |__设置scrubber.state = WAIT_REPLICAS

               |__等待所有replicas都返回scrub信息后,设置scrubber.state = COMPARE_MAPS

               |__PG::scrub_compare_maps()

                    |__PGBackend::be_compare_scrubmaps()

                    |__PG::_scrub()

               |__设置scrubber.state = WAIT_DIGEST_UPDATE

               |__对于所有待scrub的PG都完成scrub操作后,设置scrubber.state = FINISH

               |__PG::scrub_finish()

                    |__ReplicatedPG::_scrub_finish()

 

Replicas接收到MOSDRepScrub消息后的处理流程

ReplicatePG::do_request()

|__PG::replicas_scrub()

     |__PG::build_scrub_map_chunk()

     |__创建MOSDSubOp消息对象且设置消息的op = CEPH_OSD_OP_SCRUB_MAP

     |__OSD::send_message_osd_cluster()

 

Primary接收到MOSDSubOp消息后的处理流程

ReplicatedPG::do_sub_op()

|__PG::sub_op_scrub_map()

     |__将收到的replicas的scrubmap写入到scrubber.received_maps中

     |__对于所有replicas都返回scrubmap,则调用PG::requeue_scrub()函数重新进入scrub操作

© 著作权归作者所有

linuxhunter
粉丝 69
博文 144
码字总数 93264
作品 0
沈阳
高级程序员
私信 提问
Ceph存储系统Scrub机制分析

版权声明:更多内容,请关注【架构师技术联盟】公众号 https://blog.csdn.net/BtB5e6Nsu1g511Eg5XEg/article/details/84452614 2018年11月12日,Linux基金会在德国柏林的“Ceph Day”上正式宣...

架构师技术联盟
2018/11/24
0
0
Ceph 命令行说明

一、Scrub流程设置 1、ceph pg dump命令中输出结果"scrub_stamp"列显示scrub的时间,显示PG的当前状态 2、ceph osd set noscrub、ceph osd unset noscrub集群是否进行常规定时scrub操作 3、c...

惊浪
2015/03/23
2.7K
0
ceph ( pgs inconsistent) pgs不一致 异常状态处理方式

问题描述: 在某些情况下,osd出现异常,导致pgs出现不一致状态 # ceph health detail HEALTH_ERR 1 pgs inconsistent; 1 scrub errors pg 6.89 is active+clean+inconsistent, acting [12,......

云中不知人
2018/06/27
0
0
Jewel OSD进程启动处理流程

OSD::main() __ObjectStore::create() __调用FileStore构造函数创建FileStore类对象 __MonClient::build_initial_monmap() 从配置文件中读取monitor map信息 __OSD::mkfs() __FileStore::mkf......

linuxhunter
2016/05/19
285
0
Ceph集群缩容及相关故障处理

引言 由于目前机器比较紧张,需要将我集群中的一批机器提供给其他业务使用,这时问题来了,集群机器的退出意味着数据要重新分布,数据迁移的过程中比较容易出故障。 处理过程 处理测试POOL对...

西昆仑
2016/09/23
122
0

没有更多内容

加载失败,请刷新页面

加载更多

在Javascript中Eval函数的使用

【eval()函数】 JavaScript有许多小窍门来使编程更加容易。 其中之一就是eval()函数,这个函数可以把一个字符串当作一个JavaScript表达式一样去执行它。 举个小例子: var the_unevaled_ans...

花漾年华
26分钟前
3
0
[日更-2019.5.22、23] Android 系统的分区和文件系统(二)--Android 文件系统中的文件

声明 Android系统中有很多分区,每个分区内的文件系统一般都不同的,使用ADB进入系统/目录下可发现挂载这很多的目录,不同的目录中可来自不同的分区及文件系统; 那么,就来分下这些目录里面...

小馬佩德罗
31分钟前
2
0
数组操作相关算法

/*数组的相关的算法操作:1、在数组中找最大值/最小值*/class Test11_FindMax{public static void main(String[] args){int[] array = {4,2,6,8,1};//在数组中找最大...

architect刘源源
今天
4
0
okhttp3 以上版本在安卓9.0无法请求数据的解决方案

应用官方的说明:在 Android 6.0 中,我们取消了对 Apache HTTP 客户端的支持。 从 Android 9 开始,默认情况下该内容库已从 bootclasspath 中移除且不可用于应用。且Android P 限制了明文流量...

chenhongjiang
今天
12
0
简单示例:NodeJs连接mysql数据库

开篇引用网上的说法: 简单的说 Node.js 就是运行在服务端的 JavaScript。Node.js 是一个基于Chrome JavaScript 运行时建立的一个平台。Node.js是一个事件驱动I/O服务端JavaScript环境,基于...

李朝强
今天
8
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部