Skip to content
O Crimson, a reescrita Seastar do OSD feita pelo próprio Ceph com SeaStore, contra o croit FlashStore, uma reescrita em Rust com store próprio

FlashStore contra Crimson: duas reescritas do mesmo OSD

O Crimson é a reescrita do OSD feita pelo próprio Ceph, em C++ sobre o framework Seastar, com um novo store nativo chamado SeaStore; o FlashStore é a reescrita da croit, em Rust, com um store próprio. Ambos estão em preview e ambos apontam para NVMe e redes rápidas. Este artigo compara-os no momento em que o Ceph 21.2.0 Umbrella traz o Crimson, a partir do código-fonte e da documentação do Ceph e do snapshot ceph-rust da croit: de onde vem cada um e sob que licença, porque é que o Rust cumpre as orientações de segurança de memória dos Five Eyes e o C++ não, porque é que o Crimson precisa de pools próprios e de uma flag experimental enquanto o FlashStore entra nos pools existentes, porque é que o Umbrella não tem maneira de transformar um pool existente num pool Crimson e os dados têm de ser copiados, o que cada um diz ao monitor no arranque, reactors Seastar contra núcleos de polling fixos, o facto de um OSD Crimson por omissão ainda correr BlueStore, as árvores de onode, OMAP e LBA do SeaStore contra a árvore única por shard do FlashStore, a ordem em que cada um faz o commit de uma escrita, o segment cleaner do SeaStore, e que hardware e pools cada um aceita.

11 de novembro de 2026 · 21 minutos · 5081 palavras · Damien Dye
O BlueStore do Umbrella, RocksDB sobre BlueFS em qualquer disco, contra o FlashStore da croit, uma B+tree copy-on-write e um WAL por núcleo em NVMe com proteção contra perda de energia

FlashStore contra o BlueStore do Umbrella: o que a croit mudou debaixo do OSD

O ceph-rust da croit é uma reescrita de raiz em Rust do OSD do Ceph, com o seu próprio object store, o FlashStore, em pré-visualização pública desde 9 de novembro de 2026. Isto põe-no lado a lado com o BlueStore exatamente como o Ceph 21.2.0 Umbrella o traz, lido a partir do código-fonte e da documentação dos dois projetos: o que está no repositório e com que licenças, onde cada store guarda os seus metadados, como uma escrita de 4 KiB e uma escrita de menos de 4 KiB chegam ao disco em cada um, os pools de threads do Umbrella contra uma thread por núcleo no FlashStore, porque é que o FlashStore faz da proteção contra perda de energia um requisito obrigatório, em que é que não corre, porque é que diz aos teus monitores que é BlueStore, que opções do BlueStore respeita e quais ignora, e porque é que o único caminho entre os dois é o backfill.

11 de novembro de 2026 · 22 minutos · 5220 palavras · Damien Dye
Um nó Proxmox VE com o monitor e o manager de Ceph do próprio Proxmox ao lado de OSD FlashStore da croit em oito discos Optane

OSD FlashStore no Proxmox VE: o que foi preciso num só nó

O OSD FlashStore da croit é um substituto em Rust para o ceph-osd e o BlueStore, em preview pública desde 9 de novembro de 2026. Aqui é instalado de forma hiperconvergida num único nó Proxmox VE 9.2: Ceph Umbrella 21.2.0 pelo assistente do PVE para o monitor e o manager, OSD FlashStore em discos Intel Optane P4800X. Cobre porque é que o Umbrella é a única versão do Proxmox que bate certo, a formatação dos discos para 4 KiB e o reset do controlador que aborta uma formatação, o que o croit-flashstore-osd –check reporta, porque é que a unit fornecida não consegue ler o ceph.conf do Proxmox e o drop-in que resolve isso, o passthrough NVMe que o kernel do Proxmox recusa e o backend direto que funciona, a preparação dos OSD por endereço PCI, o que o painel de OSD do PVE faz deles, uma pool, armazenamento RBD e uma VM Fisher-Price OS (Windows) instalada nela, o CrystalDiskMark dentro dessa VM lido contra os contadores dos próprios discos, a memória do Ceph com os oito OSD ativos, três VM ao mesmo tempo com um alvo de memória de 1 GiB, e um script que faz tudo isto, testado ao reconstruir um OSD do zero.

11 de novembro de 2026 · 38 minutos · 8344 palavras · Damien Dye
Duas predefinições do Proxmox: os enlightenments Hyper-V, ligados pelo OS Type da VM, e o microcódigo de CPU, ligado pela forma como o host foi instalado

Duas predefinições do Proxmox VE 9 que talvez não tenhas: enlightenments Hyper-V e microcódigo de CPU

O Proxmox VE 9 liga os enlightenments Hyper-V para convidados Fisher-Price OS (Windows) e instala microcódigo de CPU nos hosts novos, mas só se a VM recebeu um tipo de SO Microsoft Windows e o host veio do instalador 9.x. Aqui está o que os enlightenments fazem, as regras exatas com que o qemu-server os escolhe (medidas num host 9.2 em funcionamento), porque é que a fixação da versão de máquina deixa as VMs mais antigas sem a correção hv-evmcs de julho de 2026, a compilação do pve-qemu-kvm de que essa correção precisa e o que cada versão do QEMU desde a 10.0 corrigiu para esses convidados, porque é que pertencem ao q35 e nunca ao i440fx (onde o assistente ainda deixa a maioria deles), as duas flags que podes definir à mão, como provar o que uma VM está a correr, de onde vem o microcódigo (firmware da placa, Debian e o repositório próprio do Proxmox), porque é que um host atualizado não tem nenhum (com um nó Intel quatro versões da Intel atrás como exemplo), a reconstrução do initramfs que a instalação desencadeia e os kernels mais antigos que essa reconstrução ignora, a falha de RDSEED no Zen 5 que vem a seguir, como ativá-lo, um reinício faseado num cluster Ceph e como reverter uma atualização má.

27 de outubro de 2026 · 27 minutos · 6482 palavras · Damien Dye

Quem escreve e usa realmente o Ceph

Contei todos os commits no ramo principal do Ceph dos últimos dez anos, 69 613 deles, de 1718 pessoas em 478 organizações, segui os 38 membros do Steering Committee até aos seus empregadores, e reuni as implementações declaradas publicamente. O resultado é um projeto que absorveu a perda do seu fundador e do seu segundo maior contribuidor sem perder o passo, e que continua hoje a entregar ao mesmo ritmo.

27 de agosto de 2026 · 39 minutos · 8161 palavras · Damien Dye
Um disco NVMe a entrar num adaptador tri-mode e a sair como disco SCSI com profundidade de fila 128

Os adaptadores tri-mode compram flexibilidade com as tuas filas NVMe

Um adaptador tri-mode deixa qualquer baia aceitar SAS, SATA ou NVMe, flexibilidade real e a razão de existirem backplanes U.3. O que não anuncia é que os teus discos NVMe deixam de ser discos NVMe: chegam ao Linux como discos SCSI no mpt3sas, profundidade de fila 128, a partilhar um pool de tags e um uplink x8. Dois discos Gen4 saturam a placa. Um único disco Gen5 já a ultrapassa. Se essa troca ainda faz sentido em 2026, e porque é que as baias universais pertencem ao backplane e não ao controlador.

13 de agosto de 2026 · 27 minutos · 5679 palavras · Damien Dye
Três camadas de armazenamento: o Optane a absorver escritas, o NVMe com os metadados do Ceph e os HDD a dar a capacidade bruta

Tornar rápidos os clusters Ceph do Proxmox sobre HDD: metadados em NVMe, um Optane por disco, e quanto te custa

O preço do flash tornou difícil justificar o tudo NVMe, e os HDD enterprise merecem nova atenção. Tirar deles uma latência aceitável em Ceph hiperconvergente no Proxmox significa tirar o RocksDB do disco rotativo, juntar cada disco ao seu próprio Optane através do bcache, Optane mesmo, porque a resistência da NAND é errada para esse trabalho, e ser honesto sobre os modos de falha que isso te compra.

7 de agosto de 2026 · 39 minutos · 8162 palavras · Damien Dye
Três nós Proxmox ligados numa mesh em triângulo com cabos diretos e sem switch

Uma mesh Proxmox sem switch com SDN OpenFabric — redes Ceph e de clientes sem um switch de 100G

Três nós Proxmox ligados diretamente entre si em triângulo, com o OpenFabric a encaminhar pela mesh e o Ceph mais as redes de clientes VXLAN por cima. Construída inteiramente na interface web, e honesta sobre onde o desenho deixa de escalar.

7 de agosto de 2026 · 15 minutos · 3051 palavras · Damien Dye
O relógio de um guest a afastar-se do relógio do host, e uma hypercall a trazê-lo de volta

Não se pode confiar no relógio de uma VM, e a solução ptp_kvm para QEMU/KVM

O relógio de uma máquina virtual assenta num pressuposto que a virtualização quebra: que o CPU continua a contar. Porque é que o tempo do guest deriva em todos os hypervisors, o que o desvio parte de facto (Kerberos, TLS, Ceph, Windows) e como o ptp_kvm o resolve como deve ser em QEMU/KVM.

7 de agosto de 2026 · 15 minutos · 3180 palavras · Damien Dye
Oito blocos lógicos de 512 bytes mapeados num único setor físico de 4K, ao lado de um mapeamento 4K um para um

4Kn, 512e e 512n — Porque é que o 4K nativo ganha, e quanto custa a emulação

Os discos 512e apresentam setores de 512 bytes que não têm, e o firmware compensa a diferença em cada escrita desalinhada. O que isso custa no suporte físico, no host e em amplificação de escrita — porque é que as escritas diretas síncronas são o pior caso — e como converter uma frota para 4Kn.

7 de agosto de 2026 · 29 minutos · 6094 palavras · Damien Dye