Skip to content
Crimson, la riscrittura dell'OSD fatta da Ceph su Seastar con SeaStore, contro FlashStore di croit, una riscrittura in Rust con uno store suo

FlashStore contro Crimson: due riscritture dello stesso OSD

Crimson è la riscrittura dell’OSD fatta da Ceph stesso, in C++ sul framework Seastar, con un nuovo store nativo chiamato SeaStore; FlashStore è la riscrittura di croit, in Rust, con uno store tutto suo. Sono entrambi in anteprima ed entrambi puntano a NVMe e a reti veloci. Qui li confronto così come Ceph 21.2.0 Umbrella distribuisce Crimson, partendo dal codice sorgente e dalla documentazione di Ceph e dallo snapshot ceph-rust di croit: da dove viene ciascuno e con quale licenza, perché Rust rispetta le linee guida dei Five Eyes sulla sicurezza della memoria e C++ no, perché Crimson ha bisogno di pool suoi e di un flag sperimentale mentre FlashStore entra nei pool esistenti, perché Umbrella non ha modo di trasformare un pool esistente in un pool Crimson e quindi i dati vanno copiati, cosa dice ciascuno al monitor all’avvio, i reactor di Seastar contro i core fissati in polling, il fatto che un OSD Crimson predefinito esegue ancora BlueStore, gli alberi onode, OMAP e LBA di SeaStore contro l’unico albero per shard di FlashStore, l’ordine in cui ciascuno fa il commit di una scrittura, il segment cleaner di SeaStore, e quale hardware e quali pool accetta ciascuno.

11 novembre 2026 · 21 minuti · 4915 parole · Damien Dye
BlueStore di Umbrella, RocksDB su BlueFS su qualsiasi disco, contro FlashStore di croit, un B+tree copy-on-write e un WAL per core su NVMe con protezione da perdita di alimentazione

FlashStore contro BlueStore di Umbrella: cosa ha cambiato croit sotto l'OSD

ceph-rust di croit è una riscrittura clean-room in Rust dell’OSD di Ceph con un object store suo, FlashStore, in anteprima pubblica dal 9 novembre 2026. Qui lo metto accanto a BlueStore esattamente come lo distribuisce Ceph 21.2.0 Umbrella, leggendo il codice sorgente e la documentazione di entrambi i progetti: cosa c’è nel repository e sotto quali licenze, dove ciascuno store tiene i metadati, come arrivano al disco una scrittura da 4 KiB e una sotto i 4 KiB, i pool di thread di Umbrella contro il singolo thread per core di FlashStore, perché FlashStore fa della protezione da perdita di alimentazione un requisito rigido, su cosa non gira, perché dice ai tuoi monitor di essere BlueStore, quali opzioni di BlueStore rispetta e quali ignora, e perché l’unica strada tra i due è il backfill.

11 novembre 2026 · 21 minuti · 4944 parole · Damien Dye
Un nodo Proxmox VE con il monitor e il manager Ceph di Proxmox accanto agli OSD croit FlashStore su otto dischi Optane

OSD FlashStore su Proxmox VE: cosa è servito su un nodo

FlashStore OSD di croit è un sostituto in Rust di ceph-osd e BlueStore, in anteprima pubblica dal 9 novembre 2026. Qui lo installo in modo iperconvergente su un singolo nodo Proxmox VE 9.2: Ceph Umbrella 21.2.0 dalla procedura guidata di PVE per monitor e manager, OSD FlashStore su dischi Intel Optane P4800X. Spiega perché Umbrella è l’unica release di Proxmox compatibile, la formattazione dei dischi a 4 KiB e il reset del controller che interrompe la formattazione, cosa riporta croit-flashstore-osd –check, perché l’unit fornita non riesce a leggere il ceph.conf di Proxmox e il drop-in che lo risolve, il passthrough NVMe che il kernel di Proxmox rifiuta e il backend diretto che funziona, la preparazione degli OSD per indirizzo PCI, cosa ne fa il pannello OSD di PVE, un pool, uno storage RBD e una VM Fisher-Price OS (Windows) installata sopra, CrystalDiskMark dentro quella VM confrontato con i contatori dei dischi stessi, la memoria di Ceph con tutti e otto gli OSD attivi, tre VM insieme con un target di memoria di 1 GiB, e uno script che fa tutto, testato ricostruendo un OSD da zero.

11 novembre 2026 · 37 minuti · 8085 parole · Damien Dye
Un drive NVMe che entra in un adattatore tri-mode e ne esce come disco SCSI con una queue depth di 128

Gli adattatori tri-mode comprano flessibilità con le tue code NVMe

Un adattatore tri-mode fa accettare a ogni slot SAS, SATA o NVMe: una flessibilità vera, e il motivo per cui esistono i backplane U.3. Quello che non pubblicizza è che i tuoi drive NVMe smettono di essere drive NVMe: arrivano in Linux come dischi SCSI su mpt3sas, queue depth 128, con un solo pool di tag e un solo uplink x8 in comune. Due drive Gen4 saturano la scheda. Un solo drive Gen5 la supera già. Se quello scambio ha ancora senso nel 2026, e perché gli slot universali appartengono al backplane e non al controller.

13 agosto 2026 · 26 minuti · 5415 parole · Damien Dye
Tre livelli di storage: Optane che assorbe le scritture, NVMe che tiene i metadati di Ceph, e HDD che forniscono la capacità grezza

Rendere veloci i cluster Ceph di Proxmox su HDD: metadati su NVMe, una Optane per disco, e quanto ti costa

Il prezzo del flash ha reso difficile giustificare il tutto NVMe, e gli HDD enterprise meritano un’altra occhiata. Ottenere una latenza accettabile da loro su Ceph iperconvergente in Proxmox significa togliere RocksDB dal disco rotante, abbinare ogni disco alla sua Optane tramite bcache, proprio Optane, perché l’endurance della NAND è sbagliata per quel lavoro, ed essere onesti sui modi di guasto che ti compra.

7 agosto 2026 · 37 minuti · 7819 parole · Damien Dye
Un controller NVMe emulato accanto a un percorso VirtIO SCSI, con Proxmox che non riesce a vedere il primo

Un dispositivo NVMe virtuale in Proxmox, e le tre cose a cui rinunci

QEMU sa emulare un vero controller NVMe, così il guest usa il proprio driver NVMe di serie senza bisogno di supporti VirtIO. Ma è non migrabile per progetto, invisibile ai backup di Proxmox e non più veloce di VirtIO SCSI. Ecco come aggiungerne uno e quando ne vale la pena.

7 agosto 2026 · 10 minuti · 2088 parole · Damien Dye
Otto blocchi logici da 512 byte mappati su un unico settore fisico da 4K, accanto a una mappatura 4K uno a uno

4Kn, 512e e 512n: perché il 4K nativo vince, e quanto costa l'emulazione

I dischi 512e presentano settori da 512 byte che non hanno, e il firmware compensa la differenza a ogni scrittura non allineata. Quanto costa tutto questo sul supporto, nell’host e in write amplification, perché le scritture dirette e sincrone sono il caso peggiore, e come convertire un intero parco dischi a 4Kn.

7 agosto 2026 · 28 minuti · 5801 parole · Damien Dye
Una curva che sale dal 36 per cento del bare metal a queue depth 1 fino a pochi punti percentuali di distanza a queue depth 32

Prestazioni del passthrough PCIe su Proxmox VE: la tassa IOMMU e come ridurla al minimo

Perché i dispositivi PCIe perdono throughput quando passano a una VM tramite VFIO, e i passi pratici di tuning che ne recuperano la maggior parte.

7 agosto 2026 · 20 minuti · 4255 parole · Damien Dye