Skip to content
Ein Proxmox-VE-Node mit Proxmox' eigenem Ceph-Monitor und -Manager neben croit-FlashStore-OSDs auf acht Optane-Laufwerken

FlashStore-OSD auf Proxmox VE: Was es auf einem Node gebraucht hat

croits FlashStore-OSD ist ein Ersatz für ceph-osd und BlueStore, geschrieben in Rust, seit 9. November 2026 in Public Preview. Hier läuft es hyperkonvergent auf einem einzelnen Node mit Proxmox VE 9.2: Ceph Umbrella 21.2.0 aus dem PVE-Assistenten für Monitor und Manager, FlashStore-OSDs auf Intel Optane P4800X. Es geht darum, warum Umbrella das einzige Proxmox-Release ist, das passt, um das Formatieren der Laufwerke auf 4 KiB und den Controller-Reset, der ein Format abbricht, um das, was croit-flashstore-osd –check meldet, warum die mitgelieferte Unit Proxmox’ ceph.conf nicht lesen kann und welches Drop-in das behebt, um das NVMe-Passthrough, das der Proxmox-Kernel verweigert, und das Direct-Backend, das funktioniert, um das Vorbereiten der OSDs per PCI-Adresse, was das PVE-OSD-Panel daraus macht, und um einen Pool, einen RBD-Storage und eine VM mit Fisher-Price OS (Windows), die darauf installiert wird, um CrystalDiskMark in dieser VM, gelesen gegen die Zähler der Disks selbst, um Cephs Speicher mit allen acht aktiven OSDs, um drei VMs gleichzeitig mit 1 GiB Speicherziel, und um ein Setup-Skript, das all das erledigt, getestet durch den Neuaufbau eines OSD aus dem Nichts.

11. November 2026 · 34 Minuten · 7429 Wörter · Damien Dye
Links die Schreibzugriffe des Gasts, in der Mitte VDO, und rechts kommt nur etwa ein Viertel der Bytes beim Laufwerk an

VDO unter lokalem Proxmox-LVM: Weniger Bytes erreichen das Laufwerk

VDO ist die Deduplizierungs- und Kompressionsschicht des Kernels. Unter einer thick LVM-Volume-Group gibt es Proxmox VE lokale Disks, die jeden Block, den die VMs gemeinsam haben, nur einmal schreiben, sodass weit weniger Bytes überhaupt beim Laufwerk ankommen. Das hier baut es thick auf thick auf einem Proxmox-VE-9-Host, mit VDO auf den Platz bemessen, den es wirklich hat, damit nichts darüber überbuchen kann, mit der lvm.conf-Einstellung scan_lvs und ihrem Filter, und mit den Threads von VDO passend zur CPU-Zahl. Es misst, was die Deduplizierung bei einem Template und sechs Full Clones, zwei ISOs, Nullen und Zufallsdaten gespart hat, wie viele Bytes das Laufwerk im Verhältnis zu dem, was der Gast geschrieben hat, tatsächlich erhalten hat, und was VDO gegenüber derselben Intel Optane ganz ohne VDO kostet. Dann baut es den Pool mit dem Index und den Journalen von VDO auf NVMe und den Daten auf einem zweiten Gerät, weist das Layout mit vdolistmetadata nach, misst, wie sich die I/O aufteilt, setzt dann VDO auf bcache, mit einer NVMe, die zwischen dem bcache-Cache und den Metadaten von VDO partitioniert ist, und misst, wie viele Bytes mit und ohne VDO beim Cache ankommen. Es denkt durch, was das alles auf HDD-Hardware-RAID6 bedeutet, und behandelt Discard beim Löschen.

27. Oktober 2026 · 27 Minuten · 5962 Wörter · Damien Dye
Drei Speicherebenen: Optane nimmt Schreibvorgänge auf, NVMe hält die Ceph-Metadaten, und HDDs liefern die Massenkapazität

Proxmox-Ceph-Cluster auf HDDs schnell machen — Metadaten auf NVMe, eine Optane pro Spindel, und was es dich kostet

Die Preise für Flash machen alles auf NVMe schwer zu rechtfertigen, und HDDs für Unternehmen sind einen zweiten Blick wert. Erträgliche Latenz aus ihnen auf hyperkonvergentem Proxmox-Ceph zu holen heißt, RocksDB von der Spindel wegzuholen, jede Platte über bcache mit ihrer eigenen Optane zu paaren — Optane ausdrücklich, weil die Haltbarkeit von NAND für diese Aufgabe falsch ist — und ehrlich über die Fehlerfälle zu sein, die das einkauft.

7. August 2026 · 36 Minuten · 7457 Wörter · Damien Dye