最近两周,刷知乎和小红书,很难躲开给 DGX Spark 组集群的帖子:两台、四台、八台张量并行,DeepSeek、MiMo 一个个都被拉出来跑。但真动手组过的人都知道,多机 Spark 的瓶颈往往不在算力,而在网络——有社区帖主做了 8 节点 TP8 的完整部署复盘,专门强调必须上 200G RoCE 高速网络做通信链路,管理网只配跑跑 SSH,没有高速网,多机同步就是严重阻塞、超时。知乎
于是一台按理说完全不在普通人预算里的设备被翻了出来:MikroTik CRS812 DDQ,标价 1295 美元,折合人民币九千上下。微博上有人直接喊它是目前见到最便宜的 400G 交换机。微博海外硬件媒体 ServeTheHome 的评价更狠:这是第一台把 400GbE 带到合理低价位的交换机,只要你手里有几台高速设备,这就是你想买的那台,业内真的没有对手。ServeTheHome

这台 1295 美元的交换机长什么样
全称 CRS812-8DS-2DQ-2DDQ-RM,1U 机架式,端口布局很有意思:
2 个 400G QSFP56-DD
2 个 200G QSFP56
8 个 50G SFP56

核心是 Marvell 98DX7335 交换芯片(56G PAM4 工艺)加 Annapurna AL52400 四核 ARM 管理芯片,双冗余电源、4 个热插拔风扇,满载插光模块也就 130-140W。ServeTheHomeSTH 用六位数的 Keysight CyPerf 流量仪实测,两个 400G 口双向跑满。
它还有个弟弟 CRS804 DDQ:4 个 400G QSFP56-DD、半宽机身、同款芯片,同样标价 1295 美元,海外街价已经能见到 1100 美元上下。ServeTheHome另外 MikroTik 同步推出的自家 400G QSFP-DD 光模块标价只要 159 美元——对 400G 这个级别来说,属于把耗材价格也打下来了。

为什么它和 DGX Spark 特别配
GB10 自带 2 个 QSFP56 200G 网口。CRS812 的两个 400G 口每个能拆成 2 路 200G,加上两个原生 200G 口,一台就相当于 6 个 200G 口;再往下拆 100G,就是 12 条链路。

这不是马后炮。STH 的编辑在发布会现场就跟 MikroTik CEO 说过:这东西就是给 DGX Spark 和其他 GB10 设备准备的,只要 NCCL 生态跑通,它会成为低功耗 AI 集群扩容的热门货。ServeTheHome
国内用户已经先买先用了。5 月有微博用户晒出 4 台 DGX Spark 加一台 CRS812 的集群,跑 MiMo-V2.5(310B 参数、1M 上下文),24 并发稳定在 200 tok/s,512K 上下文实测可服务。微博
8 台 Spark 实测:100G 到底够不够
最有参考价值的是小红书 7 月底的一条实测帖:一台 CRS812 接 8 台 DGX Spark,用 QSFP56 拆 2×100G 的 DAC 线连接,协商到 100G。小红书
帖主 8 月初更新了实测:100G 线缆连接确实会让通信减半,双向吞吐都掉到 50Gbps 上下。但真正跑模型时瓶颈不在网上,4 台机器跑 vLLM 推理,RDMA 加 TCP 的总吞吐最高只测到 150G,平均每台 45G,离 200G 网口的上限还差得远。小红书所以帖主的结论是:100G 在多数场景够用,一台 CRS812 接 8 台甚至 12 台 Spark 都行,只是未来通信栈升级、NCCL 利用率上来之后还够不够,不好说。
评论区还有个更技术流的判断:GB10 网卡走 PCIe gen5 x4,理论上限不到 120Gbps,200G 网口本来就喂不满。小红书当然也有唱衰的声音,说这是浪费钱——GB10 本身的算力天花板就摆在那,网络只是其中一块拼图,这个预期管理要有。
三个坑,先说清楚
第一,缓冲只有 8MB。社区在 RouterOS 7.21 分支上实测,交换芯片总缓冲 8MiB,这是 Marvell Prestera 系芯片的共性。日常交换没问题,但想在高负载 AI 训练里跑无损 RDMA、吃突发流量,得掂量掂量。ServeTheHome
第二,别指望它兼职干路由。B 站老玩家的总结很直白,只建议拿它做数据交换,硬卸载能力有限,策略路由之类就别想了。哔哩哔哩它的定位是给集群纯转发数据,不是接管你家全网。
第三,布线是最大的坑。这一代 400G 走 PAM4 56G 通道,跟上一代 NRZ 完全是两个世界:QSFP56-DD 和 OSFP、QSFP112 互不通用,线缆模块不能乱插。STH 的评测视频拿 40% 篇幅专门讲布线。ServeTheHome

另外,8 个 SFP56 口对上代 10G、25G 模块的兼容性,MikroTik 宣传册标称支持,社区还在验证。
顺带一提噪音:1U 机身 4 个风扇再加电源风扇,STH 的评价是勉强能放桌边,插了大功率光模块就不好说了,不建议放书房。

到底该不该买
2-4 台 Spark 的用户:够用。想省钱可以蹲一下 CRS804 DDQ 的货,只有两台机器直连 200G 线缆也能解决;
8-12 台节点的用户:一台 CRS812 拆 100G 目前实测够用,但要是赌未来通信栈升级,做好再补一台或者直接上 200G 链路的准备;
想搭无损训练网络、跑复杂路由的:它不适合你,8MB 缓冲和弱 L3 卸载都是硬约束,看别的专业设备去;
纯家用 NAS 组网的:别制造需求,2.5G、万兆真的够了。
渠道方面,海外主要是直销和 eBay,实际街价已经比 1295 美元的标价低了 150 美元以上。ServeTheHome国内目前以代理商渠道为主,B 站已经有商家在发实操视频,报价差异不小,下单前把保修和售后问清楚。
后续值得盯的信号:RouterOS 对这台交换机的修复从 7.21 分支起一直在更新,国内价格什么时候跟海外拉平、CRS804 的供货、还有 NVIDIA 多机通信栈的演进速度。它作为"个人 AI 集群买得起的 400G 口子"的定位短期不会变,但能吃满多少,要看整个生态的进化。