Skip to content
Crimson, Ceph's eigen Seastar-herschrijving van de OSD met SeaStore, tegenover croit FlashStore, een herschrijving in Rust met een eigen store

FlashStore Tegenover Crimson: Twee Herschrijvingen Van Dezelfde OSD

Crimson is Ceph’s eigen herschrijving van de OSD, in C++ op het Seastar-framework, met een nieuwe native store genaamd SeaStore; FlashStore is de herschrijving van croit, in Rust, met een eigen store. Allebei zitten ze in preview en allebei mikken ze op NVMe en snelle netwerken. Deze post vergelijkt ze zoals Ceph 21.2.0 Umbrella Crimson levert, op basis van de broncode en documentatie van Ceph en de ceph-rust-snapshot van croit: waar elk vandaan komt en onder welke licentie, waarom Rust voldoet aan de Five Eyes-richtlijnen voor geheugenveiligheid en C++ niet, waarom Crimson eigen pools en een experimentele vlag nodig heeft terwijl FlashStore in bestaande pools instapt, waarom Umbrella geen manier heeft om een bestaande pool in een Crimson-pool te veranderen zodat de data gekopieerd moet worden, wat elk bij het opstarten aan de monitor meldt, Seastar-reactors tegenover vastgepinde pollende cores, het feit dat een standaard Crimson-OSD nog steeds BlueStore draait, de onode-, OMAP- en LBA-bomen van SeaStore tegenover de ene boom per shard van FlashStore, de volgorde waarin elk een write commit, de segment cleaner van SeaStore, en welke hardware en pools elk accepteert.

11 november 2026 · 20 min · 4754 woorden · Damien Dye
Umbrella BlueStore, RocksDB op BlueFS op elke schijf, tegenover croit FlashStore, een copy-on-write-B+tree en WAL per core op NVMe met power-loss protection

FlashStore Tegenover Umbrella BlueStore: Wat croit Veranderde Onder De OSD

ceph-rust van croit is een clean-room herschrijving in Rust van de Ceph-OSD met een eigen object store, FlashStore, in public preview sinds 9 november 2026. Deze post zet hem naast BlueStore precies zoals Ceph 21.2.0 Umbrella het levert, gelezen uit de broncode en documentatie van beide projecten: wat er in de repository zit en onder welke licenties, waar elke store zijn metadata bewaart, hoe een write van 4 KiB en een write onder 4 KiB bij de schijf komen, de threadpools van Umbrella tegenover één thread per core bij FlashStore, waarom FlashStore power-loss protection een harde eis maakt, waar hij niet op draait, waarom hij je monitors vertelt dat hij BlueStore is, welke BlueStore-opties hij volgt en welke hij negeert, en waarom backfill de enige weg tussen de twee is.

11 november 2026 · 19 min · 4639 woorden · Damien Dye
Een Proxmox VE-node met de eigen Ceph-monitor en -manager van Proxmox naast croit FlashStore-OSD's op acht Optane-schijven

FlashStore OSD op Proxmox VE: Wat Het Vergde op Eén Node

FlashStore OSD van croit is een Rust-vervanger voor ceph-osd en BlueStore, in public preview sinds 9 november 2026. Hier draait hij hyperconverged op één Proxmox VE 9.2-node: Ceph Umbrella 21.2.0 uit de PVE-wizard voor monitor en manager, FlashStore-OSD’s op Intel Optane P4800X-schijven. Het behandelt waarom Umbrella de enige Proxmox-release is die past, het formatteren van de schijven naar 4 KiB en de controllerreset die een format afbreekt, wat croit-flashstore-osd –check meldt, waarom de meegeleverde unit de ceph.conf van Proxmox niet kan lezen en de drop-in die dat oplost, de NVMe-passthrough die de kernel van Proxmox weigert en de directe backend die wel werkt, OSD’s voorbereiden op PCI-adres, wat het OSD-paneel van PVE ervan maakt, en een pool, RBD-storage en een VM met Fisher-Price OS (Windows) die erop geïnstalleerd is, CrystalDiskMark in die VM, gelezen naast de tellers van de disks zelf, het geheugen van Ceph met alle acht OSD’s actief, drie VM’s tegelijk met een geheugendoel van 1 GiB, en een installatiescript dat dat allemaal doet, getest door een OSD vanaf niets opnieuw op te bouwen.

11 november 2026 · 36 min · 7805 woorden · Damien Dye
Een NVMe-schijf die een tri-mode-adapter binnengaat en er als SCSI-schijf met wachtrijdiepte 128 uitkomt

Tri-mode-adapters kopen flexibiliteit met je NVMe-queues

Een tri-mode-adapter laat elke bay SAS, SATA of NVMe aannemen — echte flexibiliteit, en de reden dat U.3-backplanes bestaan. Wat er niet bij wordt geadverteerd is dat je NVMe-schijven ophouden NVMe-schijven te zijn: ze komen in Linux binnen als SCSI-schijven op mpt3sas, wachtrijdiepte 128, met één gedeelde tagreserve en één x8-uplink. Twee Gen4-schijven verzadigen de kaart. Eén Gen5-schijf zit er al voorbij. Of die ruil in 2026 nog goed is, en waarom de universele bays van de backplane zijn en niet van de controller.

13 augustus 2026 · 25 min · 5114 woorden · Damien Dye
Drie storage-tiers: Optane die schrijfacties absorbeert, NVMe die Ceph-metadata houdt, en HDD's die bulkcapaciteit leveren

HDD-Gebaseerde Proxmox-Ceph-Clusters Snel Maken — NVMe-Metadata, Eén Optane Per Spindel, en Wat Het Je Kost

Flash-prijzen hebben all-NVMe moeilijk te rechtvaardigen gemaakt, en enterprise-HDD’s zijn een tweede blik waard. Acceptabele latency eruit halen op hyper-converged Proxmox-Ceph betekent RocksDB van de spindel verplaatsen, elke schijf koppelen aan zijn eigen Optane via bcache — specifiek Optane, want NAND-endurance is verkeerd voor die klus — en eerlijk zijn over de faalmodi die het je koopt.

7 augustus 2026 · 34 min · 7207 woorden · Damien Dye
Een geëmuleerde NVMe-controller naast een VirtIO SCSI-pad, met Proxmox niet in staat de eerste te zien

Een Virtueel NVMe-Apparaat in Proxmox — en de Drie Dingen Die Je Opgeeft

QEMU kan een echte NVMe-controller emuleren, zodat de gast zijn eigen ingebouwde NVMe-driver gebruikt zonder dat er VirtIO-media nodig zijn. Het is ook per ontwerp niet-migreerbaar, onzichtbaar voor Proxmox-backups, en niet sneller dan VirtIO SCSI. Hier is hoe je er een toevoegt en wanneer het de moeite waard is.

7 augustus 2026 · 10 min · 1953 woorden · Damien Dye
Acht logische blokken van 512 byte gemapt op één fysieke sector van 4K, naast een één-op-één 4K-mapping

4Kn, 512e en 512n — Waarom Native 4K Wint, en Wat De Emulatie Kost

512e-schijven presenteren 512-byte-sectoren die ze niet hebben, en de firmware maakt het verschil goed bij elke niet-uitgelijnde schrijfactie. Wat dat kost op het medium, in de host en in write amplification — waarom directe synchrone schrijfacties het slechtste geval zijn — en hoe je een vloot naar 4Kn omzet.

7 augustus 2026 · 26 min · 5443 woorden · Damien Dye
Een curve die stijgt van 36 procent van bare metal bij queue depth 1 tot binnen een paar procent bij queue depth 32

PCIe-Passthrough-Prestaties op Proxmox VE — De IOMMU-Tax en Hoe Je Die Minimaliseert

Waarom PCIe-apparaten doorvoer verliezen wanneer ze via VFIO aan een VM worden doorgegeven, en de praktische afstelstappen die het meeste ervan terugwinnen.

7 augustus 2026 · 19 min · 3922 woorden · Damien Dye