Посібники й нотатки про Ceph: кластери, OSD, пули, RBD, CephFS та об’єктне сховище.
Ceph це програмне забезпечення з відкритим кодом, яке зберігає твої дані на багатьох звичайних серверах і тримає їхні копії, щоб дані пережили відмову сервера. Один кластер дає блокове, файлове й об’єктне сховище.
Ці дописи про щоденну роботу з ним: побудову кластерів, OSD і моніторів, пули й правила CRUSH, а також інтерфейси RBD, CephFS та об’єктного сховища.
FlashStore проти Crimson: два переписування того самого OSD
Crimson це власне переписування OSD від Ceph, на C++ у фреймворку Seastar, з новим рідним сховищем SeaStore; FlashStore це переписування від croit, на Rust, з власним сховищем. Обидва в стадії preview, і обидва націлені на NVMe та швидкі мережі. Тут вони порівнюються в тому вигляді, в якому Ceph 21.2.0 Umbrella постачає Crimson, за кодом і документацією Ceph та знімком ceph-rust від croit: звідки кожен походить і під якою ліцензією, чому Rust відповідає настановам Five Eyes щодо безпеки пам’яті, а C++ ні, чому Crimson потребує власних пулів і експериментального прапорця, а FlashStore стає в наявні пули, чому в Umbrella немає способу перетворити наявний пул на пул Crimson і дані доводиться копіювати, що кожен каже монітору під час завантаження, реактори Seastar проти закріплених ядер з опитуванням, те, що Crimson OSD за замовчуванням досі працює на BlueStore, дерева onode, OMAP і LBA у SeaStore проти одного дерева на шард у FlashStore, порядок, у якому кожен комітить запис, очищувач сегментів SeaStore і на якому обладнанні та з якими пулами кожен працюватиме.
FlashStore проти BlueStore з Umbrella: що croit змінив під OSD
ceph-rust від croit це переписаний з нуля на Rust OSD для Ceph із власним сховищем об’єктів FlashStore, у публічному прев’ю з 9 листопада 2026. Тут він стоїть поруч із BlueStore саме таким, яким його постачає Ceph 21.2.0 Umbrella, за вихідним кодом і документацією обох проєктів: що є в репозиторії і під якими ліцензіями, де кожне сховище тримає метадані, як запис 4 KiB і запис менше 4 KiB доходять до диска в кожному з них, пули потоків Umbrella проти одного потоку на ядро у FlashStore, чому FlashStore робить захист від втрати живлення жорсткою вимогою, на чому він не працює, чому він каже твоїм моніторам, що він BlueStore, які параметри BlueStore він виконує, а які ігнорує, і чому єдиний шлях між ними це backfill.
Хто насправді пише і використовує Ceph
Я порахував кожен коміт у головну гілку Ceph за останні десять років, 69 613 комітів від 1718 людей із 478 організацій, простежив усіх 38 членів Steering Committee до їхніх роботодавців і зібрав публічно заявлені розгортання. У результаті маємо проєкт, який пережив утрату свого засновника і другого за розміром контриб’ютора, не збившись із ритму, і досі випускає код у тому самому темпі.