Skip to content
Crimson, la réécriture de l'OSD par Ceph sur Seastar avec SeaStore, face à FlashStore de croit, une réécriture en Rust avec son propre magasin

FlashStore contre Crimson : deux réécritures du mĂȘme OSD

Crimson est la réécriture de l’OSD par Ceph lui-mĂȘme, en C++ sur le framework Seastar, avec un nouveau magasin natif appelĂ© SeaStore ; FlashStore est la réécriture de croit, en Rust, avec un magasin Ă  lui. Les deux sont en prĂ©version et les deux visent le NVMe et les rĂ©seaux rapides. Cet article les compare tels que Ceph 21.2.0 Umbrella livre Crimson, Ă  partir du code source et de la documentation de Ceph et du snapshot ceph-rust de croit : d’oĂč vient chacun et sous quelle licence, pourquoi Rust satisfait les recommandations des Five Eyes sur la sĂ»retĂ© mĂ©moire et pas le C++, pourquoi Crimson exige ses propres pools et une option expĂ©rimentale alors que FlashStore entre dans les pools existants, pourquoi Umbrella n’offre aucun moyen de transformer un pool existant en pool Crimson, si bien que les donnĂ©es doivent ĂȘtre copiĂ©es, ce que chacun dit au moniteur au dĂ©marrage, les rĂ©acteurs Seastar contre les cƓurs Ă©pinglĂ©s en polling, le fait qu’un OSD Crimson par dĂ©faut fait encore tourner BlueStore, les arbres onode, OMAP et LBA de SeaStore contre l’arbre unique par shard de FlashStore, l’ordre dans lequel chacun valide une Ă©criture, le nettoyeur de segments de SeaStore, et le matĂ©riel et les pools que chacun accepte.

11 novembre 2026 Â· 22 min Â· 5369 mots Â· Damien Dye
BlueStore d'Umbrella, RocksDB sur BlueFS sur n'importe quel disque, face Ă  FlashStore de croit, un arbre B+ en copie sur Ă©criture et un WAL par cƓur sur NVMe avec protection contre les coupures de courant

FlashStore contre BlueStore d'Umbrella : ce que croit a changé sous l'OSD

ceph-rust de croit est une réécriture en Rust, en salle blanche, de l’OSD Ceph, avec son propre magasin d’objets, FlashStore, en prĂ©version publique depuis le 9 novembre 2026. Cet article le place Ă  cĂŽtĂ© de BlueStore exactement tel que le livre Ceph 21.2.0 Umbrella, lu dans le code source et la documentation des deux projets : ce que contient le dĂ©pĂŽt et sous quelles licences, oĂč chaque magasin garde ses mĂ©tadonnĂ©es, comment une Ă©criture de 4 Kio et une Ă©criture de moins de 4 Kio atteignent le disque dans chacun, les pools de threads d’Umbrella contre le thread unique par cƓur de FlashStore, pourquoi FlashStore fait de la protection contre les coupures de courant une exigence absolue, ce sur quoi il ne tourne pas, pourquoi il dit Ă  vos moniteurs qu’il est BlueStore, quelles options de BlueStore il respecte et lesquelles il ignore, et pourquoi le seul passage de l’un Ă  l’autre est le backfill.

11 novembre 2026 Â· 22 min Â· 5359 mots Â· Damien Dye
Un nƓud Proxmox VE qui fait tourner le moniteur et le gestionnaire Ceph de Proxmox Ă  cĂŽtĂ© d'OSD croit FlashStore sur huit disques Optane

FlashStore OSD sur Proxmox VE : ce qu'il a fallu sur un seul nƓud

FlashStore OSD de croit remplace ceph-osd et BlueStore par du Rust, en prĂ©version publique depuis le 9 novembre 2026. Cet article le dĂ©ploie en hyperconvergĂ© sur un seul nƓud Proxmox VE 9.2 : Ceph Umbrella 21.2.0 depuis l’assistant de PVE pour le moniteur et le gestionnaire, des OSD FlashStore sur des Intel Optane P4800X. Il explique pourquoi Umbrella est la seule version Proxmox qui correspond, le formatage des disques en 4 Kio et la rĂ©initialisation du contrĂŽleur qui interrompt un formatage, ce que rapporte croit-flashstore-osd –check, pourquoi l’unitĂ© livrĂ©e ne peut pas lire le ceph.conf de Proxmox et le drop-in qui corrige cela, le passthrough NVMe que refuse le noyau de Proxmox et le backend direct qui fonctionne, la prĂ©paration des OSD par adresse PCI, ce qu’en fait le panneau OSD de PVE, et enfin un pool, un stockage RBD et une VM Fisher-Price OS (Windows) installĂ©e dessus, CrystalDiskMark dans cette VM confrontĂ© aux compteurs des disques eux-mĂȘmes, la mĂ©moire de Ceph avec les huit OSD actifs, trois VM Ă  la fois avec une cible mĂ©moire de 1 Gio, et un script d’installation qui fait tout cela, testĂ© en reconstruisant un OSD Ă  partir de rien.

11 novembre 2026 Â· 39 min Â· 8559 mots Â· Damien Dye
Deux réglages par défaut de Proxmox : les enlightenments Hyper-V activés par l'OS Type de la VM, et le microcode CPU activé par la façon dont l'hÎte a été installé

Deux rĂ©glages par dĂ©faut de Proxmox VE 9 que vous n'avez peut-ĂȘtre pas : enlightenments Hyper-V et microcode CPU

Proxmox VE 9 active les enlightenments Hyper-V pour les invitĂ©s Fisher-Price OS (Windows) et installe le microcode CPU sur les nouveaux hĂŽtes, mais seulement si la VM a reçu un type d’OS Microsoft Windows et si l’hĂŽte vient de l’installateur 9.x. Ce billet couvre ce que font les enlightenments, les rĂšgles exactes que qemu-server applique pour les choisir (mesurĂ©es sur un hĂŽte 9.2 en production), pourquoi l’épinglage de la version de machine prive les anciennes VM du correctif hv-evmcs de juillet 2026, le build de pve-qemu-kvm qu’exige ce correctif et ce que chaque version de QEMU depuis la 10.0 a corrigĂ© pour ces invitĂ©s, pourquoi ils ont leur place sur q35 et jamais sur i440fx (que l’assistant donne pourtant Ă  la plupart d’entre eux), les deux flags que vous pouvez poser Ă  la main, comment prouver ce qu’une VM exĂ©cute, d’oĂč vient le microcode (firmware de la carte, Debian et le dĂ©pĂŽt de Proxmox), pourquoi un hĂŽte mis Ă  niveau n’en a pas (avec comme exemple un nƓud Intel en retard de quatre versions Intel), la reconstruction de l’initramfs que dĂ©clenche son installation et les noyaux plus anciens que cette reconstruction oublie, la panne RDSEED de Zen 5 qui s’ensuit, son activation, un redĂ©marrage tournant sur un cluster Ceph, et le retour arriĂšre aprĂšs une mauvaise mise Ă  jour.

27 octobre 2026 Â· 28 min Â· 6737 mots Â· Damien Dye

Qui écrit et qui utilise vraiment Ceph

J’ai comptĂ© chaque commit de la branche main de Ceph sur dix ans — 69 613 commits de 1 718 personnes rĂ©parties sur 478 organisations — remontĂ© les 38 membres du Steering Committee jusqu’à leur employeur, et rassemblĂ© les dĂ©ploiements dĂ©clarĂ©s publiquement. Le rĂ©sultat est un projet qui a absorbĂ© la perte de son fondateur et de son deuxiĂšme contributeur sans manquer un pas, et qui livre encore au mĂȘme rythme aujourd’hui.

27 aoĂ»t 2026 Â· 41 min Â· 8567 mots Â· Damien Dye
Un disque NVMe qui entre dans un adaptateur tri-mode et ressort en disque SCSI avec une profondeur de file de 128

Les adaptateurs tri-mode achĂštent de la souplesse avec vos files NVMe

Un adaptateur tri-mode permet Ă  n’importe quelle baie d’accueillir du SAS, du SATA ou du NVMe — une vraie souplesse, et la raison d’ĂȘtre des fonds de panier U.3. Ce qu’il n’annonce pas, c’est que vos disques NVMe cessent d’ĂȘtre des disques NVMe : ils arrivent dans Linux comme des disques SCSI sur mpt3sas, profondeur de file 128, partageant une seule rĂ©serve de tags et un seul lien montant x8. Deux disques Gen4 saturent la carte. Un seul disque Gen5 la dĂ©passe dĂ©jĂ . Si ce marchĂ© tient encore en 2026, et pourquoi les baies universelles appartiennent au fond de panier plutĂŽt qu’au contrĂŽleur.

13 aoĂ»t 2026 Â· 28 min Â· 5883 mots Â· Damien Dye
Trois paliers de stockage : Optane absorbant les écritures, NVMe tenant les métadonnées Ceph, et HDD fournissant la capacité en vrac

Rendre rapides les clusters Ceph Proxmox sur HDD — mĂ©tadonnĂ©es sur NVMe, une Optane par plateau, et ce que ça vous coĂ»te

Le prix de la flash a rendu le tout-NVMe difficile Ă  justifier, et les HDD d’entreprise mĂ©ritent un nouveau regard. En tirer une latence acceptable sur du Ceph Proxmox hyper-convergĂ© veut dire sortir RocksDB du plateau, apparier chaque disque avec sa propre Optane par bcache — Optane prĂ©cisĂ©ment, parce que l’endurance de la NAND est mauvaise pour ce travail — et ĂȘtre honnĂȘte sur les modes de dĂ©faillance que ça achĂšte.

7 aoĂ»t 2026 Â· 41 min Â· 8526 mots Â· Damien Dye
Trois nƓuds Proxmox cĂąblĂ©s en triangle par des cĂąbles directs, sans switch

Un maillage Proxmox sans switch avec SDN OpenFabric — Ceph et rĂ©seaux clients sans commutateur 100G

Trois nƓuds Proxmox cĂąblĂ©s directement entre eux en triangle, avec OpenFabric qui route sur le maillage et Ceph plus des rĂ©seaux clients VXLAN par-dessus. Construit entiĂšrement dans l’interface web, et franc sur l’endroit oĂč le montage cesse de passer Ă  l’échelle.

7 aoĂ»t 2026 Â· 15 min Â· 3132 mots Â· Damien Dye
Une horloge invitée qui s'éloigne de l'horloge de l'hÎte, et un hypercall qui la ramÚne

L'horloge d'une VM n'est pas fiable — et le correctif ptp_kvm pour QEMU/KVM

L’horloge d’une machine virtuelle repose sur une hypothĂšse que la virtualisation casse : que le CPU continue de compter. Pourquoi l’heure des invitĂ©s dĂ©rive sur tous les hyperviseurs, ce que le dĂ©calage casse vraiment — Kerberos, TLS, Ceph, Windows — et comment ptp_kvm corrige ça proprement sur QEMU/KVM.

7 aoĂ»t 2026 Â· 17 min Â· 3444 mots Â· Damien Dye
Huit blocs logiques de 512 octets mappés sur un secteur physique de 4K, à cÎté d'un mappage 4K un-pour-un

4Kn, 512e et 512n — pourquoi le 4K natif l'emporte, et ce que coĂ»te l'Ă©mulation

Les disques 512e prĂ©sentent des secteurs de 512 octets qu’ils n’ont pas, et le micrologiciel comble la diffĂ©rence Ă  chaque Ă©criture non alignĂ©e. Ce que cela coĂ»te sur le support, dans l’hĂŽte et en amplification d’écriture — pourquoi les Ă©critures directes synchrones sont le pire cas — et comment convertir un parc en 4Kn.

7 aoĂ»t 2026 Â· 30 min Â· 6208 mots Â· Damien Dye