Darren_Wen的博客_ceph研发

Ceph-Simple消息通信流程

本文主要介绍ceph下的simple消息通信。

ceph pipe通信

消息通信

pipe

Simple消息通信

原创 2021-06-05 18:50:57 1421 阅读

rocksdb机制介绍

本文主要介绍rocksdb的基本机构，以及读写流程。

rocksdb机制

leveldb

原创 2021-06-03 20:19:08 5842 阅读

ceph crush - PG至OSD源码分析（阶段二）

本文主要介绍Ceph的crush算法，第二个阶段： PG至OSD源码分析。

ceph crush算法

pg到osd的映射

转载 2021-06-02 17:26:14 1522 阅读

ceph crush-Object至PG映射源码分析（阶段一）

本文主要介绍Ceph的crush算法，第一个阶段：Object至PG映射源码分析。

ceph crush 算法

Object至PG映射源码分析

转载 2021-06-02 17:09:43 1698 阅读

ceph 的crush算法 straw

本文主要介绍ceph场景下straw/straw2算法及对应的影响测试。

straw

straw2

crush算法

ceph

转载 2021-06-02 16:19:25 1912 阅读

BlueStore checksum机制

BlueStore checksum机制保证数据可靠性，取消deep-scrub。

BlueStore checksum机

bluestore

deep-scrub

原创 2021-05-16 00:44:28 2593 阅读

ceph pg scrub 源码分析

本文主要介绍ceph scrub的原理、流程，源码解析。

deepscrub

scrub

ceph deep-scrub

scrub源码分析

原创 2020-09-09 22:49:22 5702 阅读

Ceph L版本-Paxos相关流程梳理

本文主要介绍ceph中paxos处理的不同阶段，以及关于paxos的问题在ceph中的贯穿角色。本文以paxos相关问题展开，本文重点为**Paxos决议流程**。本章节属于ceph中较为复杂的章节，需要不断的探索、分析。

paxos算法

paxos决议流程

原创 2020-08-23 12:39:58 1900 阅读

ceph mon选举流程

本章主要介绍mon选举的过程。

mon选举

原创 2020-08-11 22:31:26 3321 阅读 1收藏

ceph mon选举-lease机制

本章主要介绍ceph mon lease机制，一种mon间进行信息同步，心跳检测机制，也是mon 发起选举的开始端。

mon lease机制

lease超时机制

mon选举

原创 2020-08-05 21:55:48 5160 阅读

ceph peering机制-ceph数据修复

本文主要介绍ceph集群pg peering之后，数据恢复的过程，设计相对比较复杂。

ceph数据恢复

peering backfill

数据recover

转载 2020-07-30 19:19:30 5409 阅读 1评论

ceph peering机制-过程分析

本文主要介绍ceph pg peering过程中状态机转换的关键代码，主要涉及GetInfo状态、GetLog状态、GetMissing状态等

peering机制

GetInfo状态

GetLog状态

GetMissing状态

转载 2020-07-27 22:31:24 9056 阅读

ceph peering机制-状态机

本章先介绍boost库的statechart状态机基本知识，然后结合Ceph，介绍PG peeing触发时机和切入点。

PG状态机

peering机制

statechart状态机

转载 2020-07-24 15:07:30 3071 阅读

Ceph PG创建流程源码分析

本章节主要介绍pg创建的流程，主要包括两部分，第一部分是创建pg在mon上跳转的流程。第二部分是osd端的pg创建流程。

ceph pg创建流程

原创 2020-07-21 20:19:16 2430 阅读

Ceph 存储中OSDMap 和 PGMap介绍

本文主要介绍ceph分布式存储架构中OSDMap和PGMap的原理及相关重要信息。

OSDMap

PGMap

ceph osdmap

ceph pgmap

转载 2020-07-17 14:42:17 6664 阅读

ceph osd端处理回调相关流程

本文主要介绍on_applied、on_commit、on_applied_sync、on_all_commit、on_all_applied在数据IO处理流程中的回调代码梳理

on_applied

on_commit

on_applied_sync

on_all_commit

osd 回调

原创 2020-07-16 22:00:49 1949 阅读

BlueStore源码分析之对象IO

本文主要系统性的介绍bluestore的相关重要数据结构和它们之间的关系，以及IO 流程。

BlueStore源码分析

onode

bluestore_onode_t

bluestore_pextent_t

bluestore_blob_t

转载 2020-06-02 11:27:02 3538 阅读

Ceph 数据IO全栈流程-源码分析

本文主要介绍ceph IO的整体处理流程，主要涉及client端、消息通信处理、OSD端、PG端、filejournal端、filestore端以及各种回调处理。

osd数据存储

osd处理流程

osd侧数据处理

ceph

原创 2020-05-20 19:19:56 6217 阅读

Ceph levedb数据库too big处理

当ceph集群使用一段时间，有时会发现集群存在 `store is getting too big!` 告警，本章节主要针对该问题进行处理。

leveldb

ceph数据库

too big

数据压缩

原创 2020-05-18 12:30:34 2170 阅读 1点赞 1收藏

Ceph数据存储2-rbd client 端的数据请求处理

本节讲述数据写操作的生命开始，介绍写操作的流程处理

rbd client

IO流程

数据请求

转载 2020-05-15 18:14:10 1630 阅读

Ceph数据存储1-rbd到osd的映射

rbd到osd的数据映射

ceph数据存储

rbd读写

转载 2020-05-09 09:43:40 1331 阅读 1点赞 1收藏

ceph osd blacklist

Ceph 在遇到client异常，无法连接osd端，但相关的session无法释放时候，需要借助把该client加入blacklist中进行解决。

blacklist

ceph osd blacklist

黑名单

ceph

原创 2020-05-08 13:46:54 3810 阅读

Ceph PGLog 一致性存储问题

Ceph 使用 PGLog 来保证多副本之间的一致性

PGlog

last_complete

last_update

数据一致性

转载 2020-05-07 21:19:24 3071 阅读 2点赞 1收藏

Ceph osd故障总结

本文主要更新部分常见的Ceph OSD相关故障处理。

ceph

osd

故障总结

转载 2020-05-07 15:44:32 6662 阅读 2收藏

Ceph PG状态及故障模拟

本文主要介绍PG的各个状态，以及ceph故障过程中PG状态的转变

ceph pg

pg状态

pg故障修复

转载 2020-04-30 11:13:02 7078 阅读 1收藏

Ceph osd_op及pg锁分析

pg锁

线程池

osd_op_tp

ShardedOpWQ

转载 2020-04-29 20:05:58 3216 阅读

Ceph pgid 转换计算

本文主要介绍一个小知识点，对于集群存储池pg_num 对齐/不对齐 2的n次方幂，pgid的计算方法。

pgid计算 ceph

原创 2020-04-26 21:32:07 1244 阅读

Ceph 之ThreadPool和WorkQueue

本文是ceph 线程池工作队列处理逻辑

ceph 线程池工作队列

转载 2020-04-26 20:21:49 1500 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

Darren_Wen