Skip to content
Un nƓud Proxmox VE qui fait tourner le moniteur et le gestionnaire Ceph de Proxmox Ă  cĂŽtĂ© d'OSD croit FlashStore sur huit disques Optane

FlashStore OSD sur Proxmox VE : ce qu'il a fallu sur un seul nƓud

FlashStore OSD de croit remplace ceph-osd et BlueStore par du Rust, en prĂ©version publique depuis le 9 novembre 2026. Cet article le dĂ©ploie en hyperconvergĂ© sur un seul nƓud Proxmox VE 9.2 : Ceph Umbrella 21.2.0 depuis l’assistant de PVE pour le moniteur et le gestionnaire, des OSD FlashStore sur des Intel Optane P4800X. Il explique pourquoi Umbrella est la seule version Proxmox qui correspond, le formatage des disques en 4 Kio et la rĂ©initialisation du contrĂŽleur qui interrompt un formatage, ce que rapporte croit-flashstore-osd –check, pourquoi l’unitĂ© livrĂ©e ne peut pas lire le ceph.conf de Proxmox et le drop-in qui corrige cela, le passthrough NVMe que refuse le noyau de Proxmox et le backend direct qui fonctionne, la prĂ©paration des OSD par adresse PCI, ce qu’en fait le panneau OSD de PVE, et enfin un pool, un stockage RBD et une VM Fisher-Price OS (Windows) installĂ©e dessus, CrystalDiskMark dans cette VM confrontĂ© aux compteurs des disques eux-mĂȘmes, la mĂ©moire de Ceph avec les huit OSD actifs, trois VM Ă  la fois avec une cible mĂ©moire de 1 Gio, et un script d’installation qui fait tout cela, testĂ© en reconstruisant un OSD Ă  partir de rien.

11 novembre 2026 Â· 39 min Â· 8559 mots Â· Damien Dye
Les écritures de l'invité à gauche, VDO au milieu, et seulement un quart environ des octets qui atteignent le disque à droite

VDO sous le LVM local de Proxmox : moins d'octets atteignent le disque

VDO est la couche de dĂ©duplication et de compression du noyau. Sous un groupe de volumes LVM Ă©pais, il donne aux disques locaux de Proxmox VE un stockage qui n’écrit qu’une copie de chaque bloc partagĂ© par les VM, si bien que beaucoup moins d’octets atteignent le disque. Ce billet le monte Ă©pais sur Ă©pais sur un hĂŽte Proxmox VE 9, avec VDO dimensionnĂ© Ă  l’espace qu’il a vraiment pour que rien au-dessus ne puisse surallouer, le rĂ©glage scan_lvs de lvm.conf et son filtre, et les threads de VDO calĂ©s sur le nombre de CPU. Il mesure ce que la dĂ©duplication a Ă©conomisĂ© sur un modĂšle et six clones complets, deux ISO, des zĂ©ros et des donnĂ©es alĂ©atoires, combien d’octets le disque a rĂ©ellement reçus face Ă  ce que l’invitĂ© a Ă©crit, et ce que coĂ»te VDO face Ă  la mĂȘme Intel Optane sans VDO du tout. Il monte ensuite le pool avec l’index et les journaux de VDO sur NVMe et les donnĂ©es sur un second pĂ©riphĂ©rique, prouve la disposition avec vdolistmetadata, mesure la rĂ©partition des I/O, puis place VDO au-dessus de bcache avec un seul NVMe partitionnĂ© entre le cache bcache et les mĂ©tadonnĂ©es de VDO, et mesure combien d’octets atteignent le cache avec et sans VDO. Il raisonne sur ce que tout cela veut dire sur du RAID6 matĂ©riel Ă  disques durs, et couvre le discard Ă  la suppression.

27 octobre 2026 Â· 32 min Â· 7029 mots Â· Damien Dye
Trois paliers de stockage : Optane absorbant les écritures, NVMe tenant les métadonnées Ceph, et HDD fournissant la capacité en vrac

Rendre rapides les clusters Ceph Proxmox sur HDD — mĂ©tadonnĂ©es sur NVMe, une Optane par plateau, et ce que ça vous coĂ»te

Le prix de la flash a rendu le tout-NVMe difficile Ă  justifier, et les HDD d’entreprise mĂ©ritent un nouveau regard. En tirer une latence acceptable sur du Ceph Proxmox hyper-convergĂ© veut dire sortir RocksDB du plateau, apparier chaque disque avec sa propre Optane par bcache — Optane prĂ©cisĂ©ment, parce que l’endurance de la NAND est mauvaise pour ce travail — et ĂȘtre honnĂȘte sur les modes de dĂ©faillance que ça achĂšte.

7 aoĂ»t 2026 Â· 41 min Â· 8526 mots Â· Damien Dye