Skip to content
左边是客户机的写入,中间是 VDO,右边只有大约四分之一的字节到达硬盘

Proxmox 本地 LVM 下的 VDO:到达硬盘的字节更少

VDO 是内核里的去重和压缩层。放在厚置备的 LVM 卷组下面,它让 Proxmox VE 的本地磁盘对虚拟机之间共享的每个块只写一份,所以真正到达硬盘的字节少得多。本文在一台 Proxmox VE 9 主机上把它搭成厚上加厚:VDO 的大小按它真正拥有的空间来定,上面的任何一层都没法超配;讲 lvm.conf 的 scan_lvs 设置和它的过滤器,以及让 VDO 的线程匹配 CPU 数。它测量了在一个模板和六个完整克隆、两个 ISO、全零数据和随机数据上去重省下了多少,硬盘实际收到的字节和客户机写入的字节之比,以及和同一块完全不带 VDO 的 Intel Optane 相比 VDO 的代价。然后把存储池搭成 VDO 的索引和日志在 NVMe 上、数据在第二个设备上,用 vdolistmetadata 证明布局,测量 I/O 怎么分流;再把 VDO 叠在 bcache 上,一块 NVMe 分区给 bcache 缓存和 VDO 的元数据,测量有无 VDO 时到达缓存的字节数。最后推演这一切在 HDD 硬件 RAID6 上意味着什么,并讲删除时的 discard。

2026年10月27日 · 21 分钟 · 2778 字 · Damien Dye
三个存储层:Optane 吸收写入,NVMe 存放 Ceph 元数据,HDD 提供大容量

让 HDD 承载的 Proxmox Ceph 集群跑得快:NVMe 放元数据,每块盘配一块 Optane,以及你要付出的代价

闪存价格让全 NVMe 越来越难自圆其说,企业级 HDD 值得再看一眼。要在超融合 Proxmox Ceph 上让它们给出可以接受的延迟,就得把 RocksDB 搬离机械盘,通过 bcache 给每块盘配一块专属 Optane(专门是 Optane,因为 NAND 的耐久度不适合这份活),并且老老实实面对这样做给你带来的故障模式。

2026年8月7日 · 27 分钟 · 1776 字 · Damien Dye