家庭万兆局域网折腾记~
自从2022年入手 群晖DS 1621+ 后,折腾从未停止,先后入手了 机械硬盘、SSD缓存盘、内存条、UPS 等一系列硬件。最近又逢双11,一直在研究如何升级到万兆网络。目前已经基本实现,期间踩了不少坑,特此记录 

现状
目前家设备拓扑图如下,光猫桥接到路由器,路由器连接家庭所有设备。

升级前网络拓扑图升级后
升级后加入了一个万兆光口交换机,Nas 与 Windows 电脑均加装 PCIe 万兆网卡,并连接至交换机上,同时也计划升级到 wifi6 路由器 

目前入户光猫在弱电箱里面,交换机机、路由器、Nas、Windows 都在书房,弱电箱到书房由一根墙内超六类网线链接。
常见的有两种万兆组网方案,电口与光口。考虑升级成本、发热、最少改动等问题,最终选择了使用了光口万兆的方案~~

升级清单

一直在寻找具有性价比的升级方案,具体清单如下,交换机+网卡+光纤的费用大概在 400 左右
万兆网卡 某宝的二手服务器网卡 型号为:Mellanox ConnectX-2。两块价格在 100+
光纤 某宝的二手服务器光纤:SFP+ 万兆10G堆叠线5M光纤。两块价格 40左右
万兆交换机 兮克 SKS1200-GGPY2XF: 4个2.5G电口,2个万兆光口。双十一价格 250左右
路由器 准备入手 AX86u Pro:支持一个 2.5G 电口、Wifi6。双十一价格在 1200 左右
Mellanox ConnectX-2 万兆网卡
光纤 带光模块接口测速

硬件安装完毕后,来进行软件测速。目前使用两套方案,iperf3 与 LibreSpeed。
iperf3:iPerf3 是一种用于主动测量 IP 网络上最大可达到带宽的工具,支持 客户端 与服务端。
LibreSpeed:是款可视化的测速工具,可以使用 Docker 直接安装到 Nas 上。
iperf3 服务端安装(Nas)
使用 群晖 Container Manager 套件,搜索 iperf3 ,找到星星多的,直接安装并启动
在注册表中搜索 iperf3
启动后iperf3 客户端安装(Windows)
在官网下载好后,使用 windows 终端进入 iperf3 所在目录

使用命令 ./iperf3.exe -c 192.168.50.x -t 3 -P 5
参数说明
-c 客户端模式运行
192.168.50.178 Nas 的 ip 地址
-t 测试时间,这里是 3 秒
-P 并发数,iperf3 默认跑不满 10G 需要加并发
速度为 6.42G 左右LibreSpeed 服务端安装(Nas)
使用 群晖 Container Manager 套件,搜索 libreSpeed ,也是找到星星多的,直接安装并启动

这里面的端口可以自定义安装完成后,使用浏览器访问 192.168.50.178:1111
可以看到测速结果测速结果
从测速结果上看,两次都没有跑满万兆带宽。那为什么跑不慢带宽呢,为什么呢???

,苦查了好久好久的资料。最后发现是 Windows 电脑的主板的 PCIE 接口速率限制了。
目前 Windows 使用的是 微星 PRO Z790-P WIFI 主板,主板 PCIe 接口规格如下

从图上看主板有 4 个 PCIE 接口,目前独立显卡插在 PCI_E1 接口上,由于40系列显卡尺寸过大,占据了 PCI_E2、PCI_E3 的位置,万兆网卡只有插在 PCI_E4 插槽上。

由于 PCI_E4 只有 x1 个引脚,速率只有 8Gbps 与上面测速结果相符。解决办法只有使用 PCIE 延长线,延长使用 PCI_E3 插槽的 PCIe 4.0 x4 的接口。

插槽名称解释 PCI_E1 Gen PCIe 5.0 supports up to x16 (From CPU)
PCI_E1: 插槽在主板上的名称
Gen PCIe x.0:x.0 PCIE 插槽版本号,目前最新是 5.0
supports up to x16:表示当前插槽有几个引脚,影响插槽速率常见速率示例:
PCIe 2.0 x1 4Gbps
PCIe 2.0 x2 8Gbps
PCIe 2.0 x4 16Gbps
PCIe 3.0 x1 8Gbps
PCIe 3.0 x2 16Gbps
PCIe 3.0 x4 32Gbps
PCIe 延长线 x4 - 4x再次测速

使用PCIE 延长线后,重新使用 iperf3 与 libreSpeed 测速,速率能够达到的兆万水平,如下图。


万兆速度结语
以上就是这次折腾万兆局域网的记录了,如有问题可以在评论区留言,下次再来分享一下 Nas 在家庭的一些应用与玩法~ 


校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
又读了几遍文章,感觉最主要的是要有2.5g口的路由器,家里的两个路由器都是华为AX3 pro,这样是不是必须换有2.5g口的路由器才行? 还是电脑和nas口都在2.5g交换机下,不用买新的路由器也行?
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
校验提示文案
又读了几遍文章,感觉最主要的是要有2.5g口的路由器,家里的两个路由器都是华为AX3 pro,这样是不是必须换有2.5g口的路由器才行? 还是电脑和nas口都在2.5g交换机下,不用买新的路由器也行?
校验提示文案