Azure Virtual Desktop 实际要花多少钱
Azure Virtual Desktop 在浏览器里提供一个 Windows 桌面。它确实就是干这个的,而且能用。问题是让它一直能用要花多少钱。
标价不是价格。微软给 AVD 配的授权堆栈大致是这样的1:
- 一份包含 Windows Enterprise 权利的 Microsoft 365 授权:E3 或 E5,或者对等的 Business Premium
- 桌面底下的 Azure 计算资源:按小时计费的虚拟机,或者按月计费的预留实例
- 用于系统盘和用户配置文件的 Azure 存储
- 用于桌面与外界之间流量的 Azure 网络
- 可选:用于条件访问策略的 Microsoft Entra ID P1 或 P2
Windows 365 Cloud PC 把账单简化成每用户每月一个固定数字,但这个数字并不小。2 vCPU / 8 GB / 128 GB 的配置,也就是一台普普通通的办公桌面,每用户每月 £35.602。加一块 GPU,GPU Standard 档就跳到 £269.40。乘上人头数,这就是实打实的一行支出,每个月都有,永远都有。
本文要取代的就是这个产品。
替代方案的堆栈长什么样
三层,彼此独立,没有一层按席位收费:
GPU 层就是上一篇里的 Intel Arc Pro SR-IOV 搭建。一块 Arc Pro 卡通过标准的 PCIe SR-IOV 拆分成多个硬件虚拟功能:不要 vGPU 授权,不要 NVIDIA 订阅。每台 Windows 虚拟机拿到自己的 VF,有自己的 GPU 加速桌面。席位数由卡决定,而不是由授权服务器决定。
访问层是带浏览器渲染 RDP 的 Cloudflare Access。用户在任意浏览器里打开一个 URL,向你的身份提供者认证,Cloudflare 直接在浏览器标签页里渲染 RDP 会话。不用装 RDP 客户端。没有 VPN。没有端口暴露在互联网上。Access 可以与任何 OAuth 或 OIDC 提供者联合,这包括架在你现有 Active Directory 之上的本地提供者,比如 Keycloak 或 Authentik,不管那是 Samba 4 AD 还是 Windows 域控制器。目录照旧干它已经在干的事:用户账号、组策略、加入域的虚拟机。Keycloak 或 Authentik 与它联合,补上 Cloudflare Access 需要的 OAuth/OIDC 和 MFA 层。身份平面留在你自己的硬件上。不需要 Entra ID 订阅。之后的事由 Cloudflare Access 处理:它控制通过认证的用户能在你的网络上访问什么,哪些应用、哪些协议、哪些主机。桌面藏在 Cloudflare 隧道后面,除了通过 Access 策略之外从任何地方都到不了,而策略同时决定身份和范围。
隧道层是一个跑在 Proxmox 上 LXC 容器里的 cloudflared 进程,独占一个 VLAN:IPv4 是一个 /30,外加专属的 IPv6 前缀,广播域里没有任何别的东西。Proxmox 防火墙控制这个 LXC 能访问什么,答案很短:到桌面虚拟机的 TCP 3389,别的啥也没有。如果隧道端点被攻破,影响范围是一个在空荡荡的 VLAN 上的容器,它唯一能说上话的,就是防火墙本来就允许的东西。这比一个发放可路由子网的 VPN 集中器暴露的面小得多。
Cloudflare Zero Trust 在 50 个用户以内免费3。从第 51 个用户开始付费。Azure Virtual Desktop 从第一个席位就开始收钱。
架构
一个桌面会话走的路径:
- 用户在任意设备、任意浏览器里打开
https://vdi.example.com - Cloudflare Access 拦截请求,重定向到你的身份提供者:与你的 Active Directory 联合的 Keycloak 或 Authentik
- OAuth 提供者对照 AD 验证用户身份,并处理 MFA
- Access 评估策略:提供者确认了用户是谁,Access 决定他们能在你的网络上访问什么
- Cloudflare 通过隧道与目标虚拟机建立一个 RDP 会话
- RDP 会话在浏览器里渲染:没有客户端,没有插件,没有下载
- 隧道终止在 Proxmox 主机上的一个 LXC 容器里,位于一个被锁死的 VLAN 上
- LXC 把 RDP 转发给 Windows 虚拟机,这台虚拟机有一个来自 Arc Pro 卡的 GPU 虚拟功能
Windows 虚拟机在任何环节都没有公网 IP。3389 端口在任何环节都没有对互联网开放。公网上唯一在监听的是 Cloudflare,唯一能过 Cloudflare 这一关的,是通过了 Access 策略的用户。
隧道端点:独占一个 VLAN 的 LXC
cloudflared 进程总得跑在某个地方,而放在哪儿是一个安全决定。
直接跑在 Proxmox 主机上是最简单的选项,也是最糟的选项。一个和主机共享网络命名空间的隧道端点,能访问主机能访问的一切,而在一台虚拟化主机上,那就是一切。一个被攻破的隧道就成了跳进管理平面的跳板。
跑在一台完整的虚拟机里很干净,但太重。隧道中继就是一个 Go 二进制文件,几乎不占 CPU,内存几百兆。给它一整个内核和一块虚拟磁盘,是杀鸡用牛刀。
LXC 容器正合适。它有自己的网络命名空间,有自己的 VLAN(一个 /30 的 IPv4 和一个专属 IPv6 前缀,广播域里没有别人),在 Proxmox 防火墙里还有自己的规则。它共享主机的内核,但不共享主机的网络栈。防火墙允许到桌面虚拟机的 TCP 3389、用来解析它们的 DNS,以及出站到 Cloudflare 边缘的 HTTPS。因此,即便隧道端点被攻破,它也只能跟它本来就该说话的那些东西说话,而它所在的 VLAN 上没有别的住户可以够得着。
LXC 配置、这个 VLAN 的 Proxmox 防火墙规则以及 cloudflared 隧道的搭建,都在下一篇里。
Cloudflare Access 是怎么拼起来的
这件事分两半。OAuth 提供者,也就是与你的 Active Directory(Samba 4 或 Windows)联合的 Keycloak 或 Authentik,负责身份验证和 MFA。它证明用户就是他声称的那个人,用的正是虚拟机所加入的那个目录。之后的一切由 Cloudflare Access 处理:通过认证的用户被允许访问什么、经由哪种协议,以及会话如何渲染。
Cloudflare Access 直接在浏览器里渲染 RDP 会话。这不是下载,也不是插件:Cloudflare 的边缘运行一个无头 RDP 客户端,把结果作为 canvas 推流到浏览器标签页里。用户看到的是一个 Windows 桌面。浏览器看到的是到 Cloudflare 的 HTTPS。Windows 虚拟机看到的是一个来自 cloudflared 隧道的 RDP 连接。
Access 应用是一个指向隧道 RDP 入口的自托管应用。Access 策略是两半会合的地方。OAuth 提供者已经确认了身份,也通过了 MFA 挑战。Access 拿着这个令牌决定怎么处理:用户能访问哪个应用、设备状态是否合格、所在位置是否被允许。提供者说是谁。Access 说能干什么。
隧道的创建、入口规则、LXC 配置、Proxmox 防火墙规则以及 Access 策略本身,都在下一篇里:这一篇讲清楚这个堆栈是什么、为什么存在。下一篇把它搭起来。
用户看到的是什么
Cloudflare Access 带一个 App Launcher,这是一个资源门户,列出通过认证的用户被允许访问的每一个应用。用户经由 OAuth 提供者登录后,门户会把他们可用的桌面、内部 Web 应用以及其他所有通过隧道提供的资源集中展示在一个地方。一个 URL,一次登录,他们有权访问的每样东西各占一个图块。它是整个堆栈的落地页,而不只是 RDP 的。
用户点一下桌面图块,就在浏览器标签页里得到一个 Windows 桌面。没有客户端,没有插件,没有下载。它在用户手头已有的任何设备上都能用:公司笔记本、个人电脑、Chromebook、平板。这正是重点。这个系统是为允许员工用自己设备的企业打造的。
剪贴板、音频和多显示器在浏览器渲染的会话里不受支持。这是有意设计的,不是意外。这些通道每一个都是数据外泄的路径。跨越边界的剪贴板能把文件带出去。音频采集能把对话带出去。多显示器把本地桌面摆在远程桌面旁边,拖放就变得轻而易举。切断这些通道,意味着用户可以在桌面里干活,却没法通过旁路把工作成果带出来。Access 策略控制谁能进来。浏览器渲染控制什么能出去。
如果企业的某个特定工作流程需要剪贴板或音频,Cloudflare Access 也支持通过隧道使用原生 RDP 客户端:同一条隧道,同一套策略,同一次身份检查。原生路径给需要的用户完整的 RDP 功能,而对其他所有人,浏览器路径依旧锁死。两种访问方式,一个策略引擎,一条隧道。
成本对比
一个具体例子。一台服务器,42 个 GPU 加速的桌面:
- 一颗带超线程的 64 核 CPU 给你 128 个线程。每台虚拟机分 8 个 vCPU,这是正经的桌面配置,不是瘦客户端。42 × 8 = 336 个 vCPU,纸面上远远超过 128 个线程。但这是 VDI。办公桌面大部分时间是空闲的。一个在看文档或写邮件的用户,不会把 8 个核跑满。超额分配在这里不是风险,而是设计本身。Proxmox 允许你分配比物理线程更多的 vCPU,因为调度器知道它们大多在睡觉。CPU 是按峰值选的,而峰值是寥寥几个用户同时编译或渲染,不是 42 个全上。这也不是偷工减料:云计算巨头也是这么超额分配的。你租的每一台 Azure 虚拟机,都和同一台主机上的其他租户共享物理核。性能模型完全一样。区别在于主机归谁。
- 每台虚拟机 12 GB 内存,是一台扎实的办公桌面。42 × 12 GB = 504 GB,加上 Proxmox 自己用的 4 GB,纸面上是 508 GB。实际上 KSM 会把这 42 个 Windows 镜像之间相同的页合并掉,所以需要的物理内存要少得多,但还是按 512 GB 内存条做预算,让 KSM 把余量交给你。
- 三块双 GPU 的 Intel Arc Pro B60 卡,装在类似 Supermicro H13SSL-NT 这样的主板上。每块物理卡向操作系统呈现两个 GPU,所以三块卡给你 6 个 GPU。每个 GPU 支持 7 个 SR-IOV 虚拟功能4。三条 PCIe 插槽,42 个 GPU 加速桌面。B60 的标价大约每块 $599–799。B70 是更大的选项,首发价 $949,32 GB,每个 GPU 4 个虚拟功能5:席位更少,但每个席位的显存更多。
42 个用户的 Windows 365 Cloud PC2:
即使不带 GPU,数字也不小。Basic 档(2 vCPU、4 GB、128 GB)是每用户每月 £26.90。Standard 档(2 vCPU、8 GB、128 GB,一台普普通通的办公桌面)是每用户每月 £35.60。42 个用户用 Standard,就是每月 £1,495.20、每年 £17,942.40,这还没算下面那些额外费用。
带 GPU 就更糟。GPU Standard 档是每用户每月 £269.40。42 个用户,就是每月 £11,314.80、每年 £135,777.60。
两档还都要另外加上:
- Microsoft 365 授权,如果你还没有的话
- Azure 网络:入站和出站分开计费,而一个推流到浏览器的桌面,出站流量可不轻
- Azure Backup 或第三方备份方案:虚拟机快照和配置文件存储不会免费备份
- 公网 IPv4 地址:Azure 对挂在资源上的每一个公网 IP 收费,而且价格只涨不跌
- Azure 的底层定价是美元,所以英镑成本随汇率波动:英镑一走弱,每一行支出都更贵,而这两头你一样也控制不了
- 账单永不停止。第五年和第一年花的一样多。
这个堆栈用于 42 个用户:构建成本:
- Supermicro H13SSL-NT 主板:约 £700
- AMD EPYC 64 核 CPU:约 £1,500
- 512 GB DDR5 ECC RDIMM(8 × 64 GB):约 £5,200
- 三块双 GPU 的 B60 卡:约 £1,800
- 机箱、电源、启动 SSD:约 £800
- 硬件合计:大约 £10,000
按五年寿命摊销,就是每年 £2,000 的资本成本。再加上:
- Cloudflare Zero Trust:50 个用户以内免费
- Windows 11 Enterprise 的 VDI 权利:Pro 加上 Software Assurance 可升级到 Enterprise,其中包含每用户最多四台虚拟机的 VDI 访问权,或者通过 Microsoft 365 E3/E5 授权6
- 电费:这一项值得算出个数
峰值功耗预算:一颗 TDP 360W 的 64 核 EPYC,三块双 GPU 的 B60 卡每块 400W(共 1,200W),512 GB 内存大约 80W,再加上存储、风扇和电源损耗大约 150W。满载时墙上插座处大约 1,800W。VDI 桌面并不是满载运行的:办公用途大多是 CPU 空闲、GPU 轻载,所以现实的平均值更接近 1,000–1,200W。就算 1,100W。
按每千瓦时 35p 计算,1.1 kW 全天候运行就是:
- 1.1 × 24 × 365 = 每年 9,636 kWh
- 9,636 × £0.35 = 每年 £3,373 电费
所以这个堆栈的年度总成本大约是每年 £5,400:摊销硬件 £2,000,电费 £3,400,未计 Windows 授权和互联网接入。把它放在 Azure 账单旁边:£5,400 对 GPU 档的 £135,778,或者不带 GPU 的基础桌面的 £17,942。即便对比最便宜的 Azure 档,这个堆栈的成本也不到三分之一。对比 GPU 档,它只是 Azure 账单的 4%。
为什么 VDI 适合 Proxmox
VDI 是 Proxmox 不声不响却非常擅长的负载之一,原因有两个,都跟虚拟化主机本身没啥关系。
KSM。 Proxmox 开箱即启用 KSMd,也就是内核同页合并守护进程。用同一个镜像构建的二十台 Windows 虚拟机,共享大量完全相同的内存页:操作系统、基础库、用户配置文件里没改动的部分。KSMd 找出这些重复页,把它们合并成一个物理页,写时复制。结果是,二十个桌面装进了原本只够八到十个桌面用的内存里。在一台每台虚拟机都跑同一个镜像的 VDI 主机上,KSM 不是锦上添花的优化。正是它让这种密度变得负担得起。
bcache。 如果你的存储是用 Optane 做 bcache 的 HDD Ceph,VDI 就是它的最佳负载。启动风暴和登录风暴以读为主、高度重复,正是缓存最能吸收的模式。工作集一旦热起来,桌面就以 NVMe 的延迟从 Optane 读取,机械盘几乎不动。写入是用户配置文件的改动和临时文件,小而且足够顺序,bcache 的回写处理起来从不会让 HDD 成为瓶颈。
配置文件:两种选项,都在 Ceph 上。 用户配置文件是 VDI 存储的另一半,有两种干净的处理方式,都不用离开集群。
FSLogix 配置文件容器是漫游 Windows 桌面配置文件的标准方式,它可以用在兼容 S3 的对象存储上。Proxmox Ceph 通过 RADOS Gateway 提供 S3 网关,所以配置文件存储和虚拟机磁盘住在同一个集群上。不需要单独的文件服务器,没有 Azure Files 账单,没有外部依赖。
另一个选项是完全跳过 FSLogix,用 Windows 文件夹重定向,指向 CephFS 上集群化 Samba 提供的 SMB 共享。桌面把 Documents、Desktop、AppData 等目录重定向到一个由 CephFS 支撑的 Samba 共享,由 Samba 集群处理故障切换。根本没有配置文件容器:文件就是文件系统上的普通文件,复制由 CephFS 负责。这样管理更简单,备份更简单,还彻底绕开了 FSLogix 授权:如果授权费用是个问题,或者你就是想少几个活动部件,这很有用。无论哪种方式,配置文件都放在你自己的存储上,由同一个 Ceph 池支撑,成本就是你已经买了的磁盘。
KSM 省回内存,bcache 省回存储延迟,配置文件落在 Ceph 上(不管是 S3 上的 FSLogix 还是 CephFS 上的文件夹重定向),三者加起来,一台带 HDD、内存不算多的 Proxmox 主机,能服务的桌面比规格表上暗示的更多。这三样 Azure 每一 GB 都收钱。在这里,基础设施免费把活干了。
备份、韧性与合规
把一切都留在 VDI 里,不只是一个成本决定。它也是一个合规和韧性的决定。
桌面在服务器上,数据就在服务器上。没有任何东西落到用户的设备上。笔记本被偷了,丢的是一块屏幕,而不是一份数据集。没有本地磁盘要加密,没有本地副本可外泄,出了安全事件后也没有终端要做取证镜像。数据从没离开过你控制的基础设施。
这让备份变得直截了当。虚拟机磁盘和配置文件存储都在 Ceph 上,Ceph 快照是原子的、即时的。一套快照策略覆盖每一个桌面和每一份配置文件。把一个桌面恢复到昨天的状态,是一次快照回滚,而不是重建。恢复一份配置文件是在另一个池上做同样的操作。备份目标是集群,而不是二十个散落各处的终端。
它也简化了合规。数据在你自己拥有的硬件上、在你指得出来的机柜里、在你自己选的司法管辖区内,数据驻留就很容易证明。审计记录在你自己的日志里。访问由你写的 Cloudflare 策略把关,由你运行的 IdP 认证,由你控制的系统记录。在你和审计员要的证据之间,没有第三方云服务商。
韧性也是同样的道理。一台坏掉的桌面虚拟机,就是从黄金镜像起一台新虚拟机,再把配置文件挂回去。用户重新登录,桌面就回来了。没有终端要重建,没有操作系统要重装,没有硬件要寄送。恢复的单位是虚拟机,起一台只要几分钟。
你放弃了什么
这并非在所有意义上都是免费的。Azure Virtual Desktop 包办而这个堆栈不包办的事:
- 微软管补丁和更新。 在这里,你自己管。
- Intune 和 Endpoint Manager 与 AVD 原生集成。 在这里,你要自己管 Windows 虚拟机,或者用你选的任何工具来管。
- Azure 的网络是 Azure 的问题。 在这里,你的互联网连接就是通往桌面的路径。它断了,桌面就访问不了,直到它恢复。
- 在 Azure 上,扩容就是刷一下信用卡的事。 在这里,扩容意味着再买一块卡或者再买一台主机。
- AVD 默认给用户完整的 RDP 功能集。 在这里,浏览器渲染的路径故意剥掉了剪贴板、音频和多显示器。需要这些功能的用户,通过同一条隧道、同一套策略使用原生 RDP 客户端,但默认是锁死的浏览器,而对于用自己设备上班的员工队伍,这才是正确的默认值。
这些没有一样是小事。它们重不重要,取决于你手里有什么:如果你已经在跑 Proxmox,已经在管 Windows,已经有人能照看虚拟化主机,那这些都是你本来就在做的事。如果没有,那 Azure 卖给你的就是你没有的人手,这确实值点钱。
问题是,它值不值得为 42 个基础桌面每年付 £18,000,或者为 GPU 桌面付 £136,000,年年如此,上面还要加网络、备份、IPv4 和授权,价格由别人定,硬件归别人所有,账单还用一种你控制不了的货币计价。或者,你每年在硬件和电费上花 £5,400,剩下的留在自己兜里。
这就是本文要讲清楚的。下一篇把它搭起来:cloudflared 隧道、LXC、Proxmox 防火墙规则、Cloudflare Access 策略,以及浏览器标签页里那个能用的桌面。
参考资料
Azure Virtual Desktop pricing — 计算、存储和网络在 Microsoft 365 权利之外分别计费。 ↩︎
Windows 365 plans and pricing — 按每用户每月固定计费,GPU 配置在 Enterprise 档。 ↩︎ ↩︎
Cloudflare Zero Trust pricing — 50 个用户以内免费,从第 51 个用户起按用量付费。 ↩︎
Intel Arc Pro B60 specifications — 24 GB GDDR6,20 个 Xe2 核心,PCIe 5.0 x8,SR-IOV 最多 7 个虚拟功能。 ↩︎
Intel Arc Pro B70 specifications — 32 GB GDDR6,32 个 Xe2 核心,PCIe 5.0 x16,SR-IOV 最多 4 个虚拟功能。 ↩︎
Windows 11 Licensing for Virtual Desktops — 在符合条件的操作系统(例如 Pro)上加购 Software Assurance 可升级到 Enterprise,授予在你自己的本地服务器上每用户最多四台虚拟机的 VDI 权利。 ↩︎