Skip to content
Crimson, власне переписування OSD від Ceph на Seastar із SeaStore, проти croit FlashStore, переписування на Rust із власним сховищем

FlashStore проти Crimson: два переписування того самого OSD

Crimson це власне переписування OSD від Ceph, на C++ у фреймворку Seastar, з новим рідним сховищем SeaStore; FlashStore це переписування від croit, на Rust, з власним сховищем. Обидва в стадії preview, і обидва націлені на NVMe та швидкі мережі. Тут вони порівнюються в тому вигляді, в якому Ceph 21.2.0 Umbrella постачає Crimson, за кодом і документацією Ceph та знімком ceph-rust від croit: звідки кожен походить і під якою ліцензією, чому Rust відповідає настановам Five Eyes щодо безпеки пам’яті, а C++ ні, чому Crimson потребує власних пулів і експериментального прапорця, а FlashStore стає в наявні пули, чому в Umbrella немає способу перетворити наявний пул на пул Crimson і дані доводиться копіювати, що кожен каже монітору під час завантаження, реактори Seastar проти закріплених ядер з опитуванням, те, що Crimson OSD за замовчуванням досі працює на BlueStore, дерева onode, OMAP і LBA у SeaStore проти одного дерева на шард у FlashStore, порядок, у якому кожен комітить запис, очищувач сегментів SeaStore і на якому обладнанні та з якими пулами кожен працюватиме.

11 листопада 2026 · 18 хвилин · 4395 words · Damien Dye
BlueStore з Umbrella, RocksDB на BlueFS на будь-якому диску, проти FlashStore від croit, B+дерева з копіюванням під час запису і WAL на кожне ядро на NVMe із захистом від втрати живлення

FlashStore проти BlueStore з Umbrella: що croit змінив під OSD

ceph-rust від croit це переписаний з нуля на Rust OSD для Ceph із власним сховищем об’єктів FlashStore, у публічному прев’ю з 9 листопада 2026. Тут він стоїть поруч із BlueStore саме таким, яким його постачає Ceph 21.2.0 Umbrella, за вихідним кодом і документацією обох проєктів: що є в репозиторії і під якими ліцензіями, де кожне сховище тримає метадані, як запис 4 KiB і запис менше 4 KiB доходять до диска в кожному з них, пули потоків Umbrella проти одного потоку на ядро у FlashStore, чому FlashStore робить захист від втрати живлення жорсткою вимогою, на чому він не працює, чому він каже твоїм моніторам, що він BlueStore, які параметри BlueStore він виконує, а які ігнорує, і чому єдиний шлях між ними це backfill.

11 листопада 2026 · 18 хвилин · 4389 words · Damien Dye
Вузол Proxmox VE з власними монітором і менеджером Ceph від Proxmox поруч з OSD croit FlashStore на восьми дисках Optane

FlashStore OSD на Proxmox VE: чого це коштувало на одному вузлі

FlashStore OSD від croit це заміна ceph-osd і BlueStore, написана на Rust, у публічному прев’ю з 9 листопада 2026 року. Тут її розгорнуто гіперконвергентно на одному вузлі Proxmox VE 9.2: Ceph Umbrella 21.2.0 з майстра PVE для монітора й менеджера, OSD FlashStore на дисках Intel Optane P4800X. Тут є те, чому Umbrella єдиний реліз Proxmox, що збігається, форматування дисків у 4 КіБ і скидання контролера, що перериває форматування, що повідомляє croit-flashstore-osd –check, чому постачений юніт не може прочитати ceph.conf від Proxmox і drop-in, що це виправляє, passthrough NVMe, який відкидає ядро Proxmox, і прямий бекенд, що працює, підготовка OSD за адресою PCI, що з них робить панель OSD у PVE, пул, сховище RBD і ВМ на Fisher-Price OS (Windows), встановлена на нього, CrystalDiskMark зсередини цієї ВМ, звірений із власними лічильниками дисків, пам’ять Ceph з усіма вісьмома активними OSD, три ВМ одночасно з ціллю пам’яті 1 ГіБ і скрипт, що робить усе це, перевірений перебудовою OSD з нуля.

11 листопада 2026 · 32 хвилини · 7007 words · Damien Dye
Два типові налаштування Proxmox: Hyper-V enlightenments вмикає тип ОС у VM, а мікрокод CPU вмикає спосіб, яким встановлено хост

Два типові налаштування Proxmox VE 9, яких у тебе може не бути: Hyper-V enlightenments і мікрокод CPU

Proxmox VE 9 вмикає Hyper-V enlightenments для гостей Fisher-Price OS (Windows) і встановлює мікрокод CPU на нових хостах, але лише якщо VM отримала тип ОС Microsoft Windows, а хост поставлено з інсталятора 9.x. Тут розібрано, що роблять enlightenments, точні правила, за якими qemu-server їх обирає (виміряні на живому хості 9.2), чому закріплення версії машини тримає старіші VM осторонь липневого виправлення hv-evmcs 2026 року, яка збірка pve-qemu-kvm потрібна цьому виправленню і що кожен випуск QEMU від 10.0 виправив для цих гостей, чому їхнє місце на q35 і ніколи на i440fx (а майстер досі дає i440fx більшості з них), два прапорці, які можна задати вручну, як довести, з чим VM справді працює, звідки береться мікрокод (прошивка плати, Debian і власний репозиторій Proxmox), чому в оновленого хоста його немає (з вузлом Intel, що відстає на чотири випуски Intel, як прикладом), перебудова initramfs, яку запускає встановлення, і старіші ядра, які ця перебудова пропускає, збій RDSEED на Zen 5, що з цього випливає, як усе ввімкнути, поетапне перезавантаження кластера Ceph і відкат невдалого оновлення.

27 жовтня 2026 · 22 хвилини · 5471 words · Damien Dye

Хто насправді пише і використовує Ceph

Я порахував кожен коміт у головну гілку Ceph за останні десять років, 69 613 комітів від 1718 людей із 478 організацій, простежив усіх 38 членів Steering Committee до їхніх роботодавців і зібрав публічно заявлені розгортання. У результаті маємо проєкт, який пережив утрату свого засновника і другого за розміром контриб’ютора, не збившись із ритму, і досі випускає код у тому самому темпі.

27 серпня 2026 · 33 хвилини · 6920 words · Damien Dye
Диск NVMe заходить у трирежимний адаптер і виходить із нього як SCSI-диск з глибиною черги 128

Трирежимні адаптери купують гнучкість ціною твоїх черг NVMe

Трирежимний адаптер дає кожному відсіку SAS, SATA чи NVMe: це справжня гнучкість і причина, чому існують бекплейни U.3. Чого він не рекламує, так це того, що твої диски NVMe перестають бути дисками NVMe: вони приходять у Linux як SCSI-диски на mpt3sas, з глибиною черги 128, одним спільним пулом тегів і одним аплінком x8. Два диски Gen4 насичують карту. Один диск Gen5 уже за її межею. Чи має цей обмін сенс у 2026 році і чому універсальні відсіки належать бекплейну, а не контролеру.

13 серпня 2026 · 22 хвилини · 4578 words · Damien Dye
Три рівні зберігання: Optane поглинає записи, NVMe тримає метадані Ceph, а HDD дають основну місткість

Як зробити швидкими кластери Proxmox Ceph на HDD: метадані на NVMe, один Optane на шпиндель і чого це тобі коштує

Ціни на флеш зробили all-NVMe важким для виправдання, і корпоративні HDD знову варті уваги. Щоб отримати від них прийнятну затримку на гіперконвергентному Proxmox Ceph, треба забрати RocksDB зі шпинделя, дати кожному диску власний Optane через bcache (саме Optane, бо витривалість NAND для цієї роботи не годиться) і чесно оцінити режими відмов, які ти за це купуєш.

7 серпня 2026 · 32 хвилини · 6617 words · Damien Dye
Три вузли Proxmox, з’єднані трикутною сіткою прямими кабелями, без комутатора

Безкомутаторна сітка Proxmox на SDN OpenFabric: мережі Ceph і клієнтів без комутатора на 100G

Три вузли Proxmox, з’єднані напряму трикутником, з маршрутизацією OpenFabric у сітці та з Ceph і клієнтськими мережами VXLAN поверх неї. Усе зроблено у вебінтерфейсі, з чесною розмовою про те, де ця схема перестає масштабуватися.

7 серпня 2026 · 12 хвилин · 2450 words · Damien Dye
Годинник гостя, що відпливає від годинника хоста, і гіпервиклик, який повертає його назад

Годиннику VM не можна довіряти, а ptp_kvm виправляє це на QEMU/KVM

Годинник віртуальної машини стоїть на припущенні, яке віртуалізація ламає: що процесор весь час рахує. Чому час гостя дрейфує на кожному гіпервізорі, що насправді ламає розбіжність (Kerberos, TLS, Ceph, Windows) і як ptp_kvm виправляє це як слід на QEMU/KVM.

7 серпня 2026 · 12 хвилин · 2526 words · Damien Dye
Вісім 512-байтових логічних блоків, відображених на один фізичний сектор 4K, поруч із відображенням 4K один до одного

4Kn, 512e і 512n: чому нативний 4K перемагає і чого коштує емуляція

Диски 512e показують 512-байтові сектори, яких у них немає, а прошивка покриває різницю на кожному невирівняному записі. Чого це коштує на носії, у хості та в підсиленні запису, чому прямі синхронні записи це найгірший випадок і як перевести парк дисків на 4Kn.

7 серпня 2026 · 23 хвилини · 4888 words · Damien Dye