Skip to content
O Crimson, a reescrita Seastar do OSD feita pelo próprio Ceph com SeaStore, contra o croit FlashStore, uma reescrita em Rust com store próprio

FlashStore contra Crimson: duas reescritas do mesmo OSD

O Crimson é a reescrita do OSD feita pelo próprio Ceph, em C++ sobre o framework Seastar, com um novo store nativo chamado SeaStore; o FlashStore é a reescrita da croit, em Rust, com um store próprio. Ambos estão em preview e ambos apontam para NVMe e redes rápidas. Este artigo compara-os no momento em que o Ceph 21.2.0 Umbrella traz o Crimson, a partir do código-fonte e da documentação do Ceph e do snapshot ceph-rust da croit: de onde vem cada um e sob que licença, porque é que o Rust cumpre as orientações de segurança de memória dos Five Eyes e o C++ não, porque é que o Crimson precisa de pools próprios e de uma flag experimental enquanto o FlashStore entra nos pools existentes, porque é que o Umbrella não tem maneira de transformar um pool existente num pool Crimson e os dados têm de ser copiados, o que cada um diz ao monitor no arranque, reactors Seastar contra núcleos de polling fixos, o facto de um OSD Crimson por omissão ainda correr BlueStore, as árvores de onode, OMAP e LBA do SeaStore contra a árvore única por shard do FlashStore, a ordem em que cada um faz o commit de uma escrita, o segment cleaner do SeaStore, e que hardware e pools cada um aceita.

11 de novembro de 2026 · 21 minutos · 5081 palavras · Damien Dye
O BlueStore do Umbrella, RocksDB sobre BlueFS em qualquer disco, contra o FlashStore da croit, uma B+tree copy-on-write e um WAL por núcleo em NVMe com proteção contra perda de energia

FlashStore contra o BlueStore do Umbrella: o que a croit mudou debaixo do OSD

O ceph-rust da croit é uma reescrita de raiz em Rust do OSD do Ceph, com o seu próprio object store, o FlashStore, em pré-visualização pública desde 9 de novembro de 2026. Isto põe-no lado a lado com o BlueStore exatamente como o Ceph 21.2.0 Umbrella o traz, lido a partir do código-fonte e da documentação dos dois projetos: o que está no repositório e com que licenças, onde cada store guarda os seus metadados, como uma escrita de 4 KiB e uma escrita de menos de 4 KiB chegam ao disco em cada um, os pools de threads do Umbrella contra uma thread por núcleo no FlashStore, porque é que o FlashStore faz da proteção contra perda de energia um requisito obrigatório, em que é que não corre, porque é que diz aos teus monitores que é BlueStore, que opções do BlueStore respeita e quais ignora, e porque é que o único caminho entre os dois é o backfill.

11 de novembro de 2026 · 22 minutos · 5220 palavras · Damien Dye
Um nó Proxmox VE com o monitor e o manager de Ceph do próprio Proxmox ao lado de OSD FlashStore da croit em oito discos Optane

OSD FlashStore no Proxmox VE: o que foi preciso num só nó

O OSD FlashStore da croit é um substituto em Rust para o ceph-osd e o BlueStore, em preview pública desde 9 de novembro de 2026. Aqui é instalado de forma hiperconvergida num único nó Proxmox VE 9.2: Ceph Umbrella 21.2.0 pelo assistente do PVE para o monitor e o manager, OSD FlashStore em discos Intel Optane P4800X. Cobre porque é que o Umbrella é a única versão do Proxmox que bate certo, a formatação dos discos para 4 KiB e o reset do controlador que aborta uma formatação, o que o croit-flashstore-osd –check reporta, porque é que a unit fornecida não consegue ler o ceph.conf do Proxmox e o drop-in que resolve isso, o passthrough NVMe que o kernel do Proxmox recusa e o backend direto que funciona, a preparação dos OSD por endereço PCI, o que o painel de OSD do PVE faz deles, uma pool, armazenamento RBD e uma VM Fisher-Price OS (Windows) instalada nela, o CrystalDiskMark dentro dessa VM lido contra os contadores dos próprios discos, a memória do Ceph com os oito OSD ativos, três VM ao mesmo tempo com um alvo de memória de 1 GiB, e um script que faz tudo isto, testado ao reconstruir um OSD do zero.

11 de novembro de 2026 · 38 minutos · 8344 palavras · Damien Dye
Um disco NVMe a entrar num adaptador tri-mode e a sair como disco SCSI com profundidade de fila 128

Os adaptadores tri-mode compram flexibilidade com as tuas filas NVMe

Um adaptador tri-mode deixa qualquer baia aceitar SAS, SATA ou NVMe, flexibilidade real e a razão de existirem backplanes U.3. O que não anuncia é que os teus discos NVMe deixam de ser discos NVMe: chegam ao Linux como discos SCSI no mpt3sas, profundidade de fila 128, a partilhar um pool de tags e um uplink x8. Dois discos Gen4 saturam a placa. Um único disco Gen5 já a ultrapassa. Se essa troca ainda faz sentido em 2026, e porque é que as baias universais pertencem ao backplane e não ao controlador.

13 de agosto de 2026 · 27 minutos · 5679 palavras · Damien Dye
Três camadas de armazenamento: o Optane a absorver escritas, o NVMe com os metadados do Ceph e os HDD a dar a capacidade bruta

Tornar rápidos os clusters Ceph do Proxmox sobre HDD: metadados em NVMe, um Optane por disco, e quanto te custa

O preço do flash tornou difícil justificar o tudo NVMe, e os HDD enterprise merecem nova atenção. Tirar deles uma latência aceitável em Ceph hiperconvergente no Proxmox significa tirar o RocksDB do disco rotativo, juntar cada disco ao seu próprio Optane através do bcache, Optane mesmo, porque a resistência da NAND é errada para esse trabalho, e ser honesto sobre os modos de falha que isso te compra.

7 de agosto de 2026 · 39 minutos · 8162 palavras · Damien Dye
Um controlador NVMe emulado ao lado de um caminho VirtIO SCSI, com o Proxmox incapaz de ver o primeiro

Um dispositivo NVMe virtual no Proxmox — e as três coisas de que abdicas

O QEMU consegue emular um controlador NVMe real, por isso o convidado usa o seu próprio driver NVMe incluído, sem precisar de suportes VirtIO. Também não é migrável por desenho, é invisível para as cópias de segurança do Proxmox e não é mais rápido do que o VirtIO SCSI. Eis como acrescentar um e quando vale a pena.

7 de agosto de 2026 · 11 minutos · 2191 palavras · Damien Dye
Oito blocos lógicos de 512 bytes mapeados num único setor físico de 4K, ao lado de um mapeamento 4K um para um

4Kn, 512e e 512n — Porque é que o 4K nativo ganha, e quanto custa a emulação

Os discos 512e apresentam setores de 512 bytes que não têm, e o firmware compensa a diferença em cada escrita desalinhada. O que isso custa no suporte físico, no host e em amplificação de escrita — porque é que as escritas diretas síncronas são o pior caso — e como converter uma frota para 4Kn.

7 de agosto de 2026 · 29 minutos · 6094 palavras · Damien Dye
Uma curva que sobe de 36 por cento do bare metal com profundidade de fila 1 até ficar a poucos por cento dele com profundidade de fila 32

Desempenho do passthrough PCIe no Proxmox VE — o imposto do IOMMU e como o minimizar

Porque é que os dispositivos PCIe perdem débito quando são passados a uma VM através de VFIO, e os passos práticos de afinação que recuperam a maior parte dele.

7 de agosto de 2026 · 22 minutos · 4566 palavras · Damien Dye