铭瑄MS-pc Farm b660i + i3 12300T 折腾黑裙过程记录

这篇文章年前就已经开始写了，断断续续，今天基本写完了。

引子：折腾之路始于钱韦德的一个视频。

看他这个视频的时候，我手头已有一台黑裙，并且已稳定运行两年多。下图是我以前的设备，红色框内，一个8盘位的设备：

旧设备

接下来进入正文部分，因我文笔平凡，逻辑能力较弱，所思所感皆为即时记录，且仅限于个人回顾之用。如果其中的某句话某个点能够对你有所启发或帮助，那便是我最大的荣幸。

原本打算先介绍新设备，然而，还是决定先谈谈旧设备。毕竟服役将近三年之久，期间未曾出现过任何故障，除了几次停电之外，没有掉过链子，值得先行一述。

旧设备配置如下：

机箱：8盘位（当时闲鱼买的全新的568元）
主板：技嘉B365M小雕（当时闲鱼买的全新的300元）
CPU：i5 8400 （闲鱼二手，当时买的板U套装，价格也不便宜）
内存：64G（16x4） （闲鱼二手2条16g，京东2条16g）
其它：i350T4网卡（那个时候网卡超级贵好像是五六百吧一块），ASM1166 PCIE3.0x4 转SATA 6口（闲鱼买的未拆封的） ，1块16T，1块14T，6块10T（这8块机械硬盘也是闲鱼淘的，运行至今没出现过问题，没翻车）2块2.5寸SSD（分别为120G和240G），易衡电源450W（淘宝全新），乔思伯下压式CPU散热。

底层为PVE虚拟机版本7.2，虚拟黑裙版本为DS918+ 7.0，此套配置一直稳定运行，唯一的问题是此版本黑裙无法开启硬解。试过各种方法，黑裙SSH后台进入也可以看到有这个传说的文件renderD128，但是只要在jellyfin开启硬解，随便播放一个视频更改编码不是提示不兼容就是没有反应，硬解不成功，关闭硬解后，软解一切正常。

当时从网上找了各种资料，安装教程，试过以下这些方法，无一成功，NAS论坛和百度贴吧也求助过，至今未解：

1.设置文件权限：renderD128 777，不行！
2.还有说jellyfin 10.4.3可以硬解也安装试过了，也不行！
3.还有说特供版(nyanmisaka/jellyfin/)可以，也安装了也不行！linuxserver/jellyfin也试过同样不行！
4.试过这个命令，也不行！
“docker exec --user root -it 72eda60c4d4d sh -c 'echo "deb http://http.us.debian.org/debian stable main contrib non-free" | tee -a /etc/apt/sources.list && apt-get update && apt-get install -y i965-va-driver-shaders && vainfo'”
5.环境变量添加PUID=0和PGID=0 也不行！

综上，所以我觉得这个黑裙版本DS918+ 7.0有问题（当时也属于尝鲜，黑裙7.0刚出来）但具体是哪里的问题不知道。因为当时已经安装并配置好了黑裙，硬解也不是特别必须，所以一直也没试过其它版本的黑裙。就这样，一直稳定运行两年多，期间没出现过问题。

后期我发觉，8盘位的对我来说有点多了，手里的PT站级别和上传都很高了。愈发觉得8盘位有点多余。而且，功耗也大，噪音也越来越大，所以想换一套的想法萌生了。刚开始我是先找的CPU，搜索哪个CPU最适合NAS，无意中刷到钱韦德的视频介绍了一个NAS神U：i3 12300T（UHD730，4核心8线程，TDP35W），视频当中也介绍了这块主板：铭瑄MS-pc Farm b660i（2个2.5G网口，2个m.2插槽，4个SATA，1个PCIEX4，1个PCIEX16，尺寸19CM*19CM）我是觉得这个CPU加这块板子组合真不错，唯一不足的可能就是板子只有4个SATA，如果有6个SATA简直完美。

我是非常喜欢这个板子，尺寸不大，扩展性很高。

铭瑄官网该主板的介绍：

https://www.maxsun.com.cn/2023/0511/5982.html

https://www.maxsun.com.cn/2022/1226/5863.html

https://download.maxsun.com.cn:8443/mb/bios/MS-PCFARMB660I/MS-PCFarmB660I.pdf

借用，钱韦德视频里说的话：这配置，这价格，不买不是人啊！ 但是这句话只适用当时那个时间（2024年5月份）。现在的话价格已经涨了很多，尤其是CPU，我2024年12月4日在闲鱼淘的全新的散片558元，在当时全新散片可能就400-450元之间甚至300大几就能入手一块全新散片，目前的话足足涨了100多！还有这个主板，当时的价格应该是400元左右还带挡板。2024年10月15日闲鱼淘的这块主板485元不带挡板！

NND，真是理财产品啊。有时候我在想，为啥每次我想弄一套配置的时候，价格都是涨价之后的....都是后知后觉。

这块板子没有全新的，全是二手拆机，根据钱韦德的视频介绍，这个板子不面向个人，属于大客户定制，是二手服务器拆机的，所以只能闲鱼淘，多多，京东，淘宝没有。

再放几张旧设备下岗时的照片吧：

里面全是厚厚的灰尘，相关风扇满是灰（这个机箱自带4个风扇，CPU风扇，电源风扇，一共6个风扇）都快转不动了，难怪噪音越来越大，真想把它扔水里冲洗一下。

下面开始介绍今天的主角，新设备硬件总结如下：

机箱：TANK机箱6盘位（淘宝全新）
主板：铭瑄MS-pc Farm b660i（闲鱼二手）
CPU：i3 12300T （闲鱼全新）
内存：32G 金士顿 一根（京东去年购入）
电源：350W （淘宝 优易全新，自带的线材太短。然后那个大4Pin还带翅膀，根本插不进去TANK机箱硬盘笼，然后定制了三条线：24pin+cpu+大4Pin线三条线合计95元）
其它：I350 T4 四口网卡（新购入的一百多，成色很新），ASM1166 PCIE转SATA6口（旧设备拆下，旧设备在没下架之前已经把相关数据移动到主板自带的6个SATA盘中，所以新设备直接装上了这个ASM1166扩展卡，不影响后期两台设备数据同步）

新设备准备插入：1个16T，一个14T，一个10T，3个2.5寸SSD（两个240G，一个120G） 一共6块，按顺序依次插入一块3.5寸机械，一块2.5寸SSD，这样硬盘与硬盘之间有较大空间，硬盘散热应该也不错。

有小伙伴可能问了，硬盘是不是太少了？我说目前的话足够了。

那就先说一下这台SA6400黑裙硬盘都怎么安排的吧：

①16T放小姐姐（我只收藏精品），②14T放电影（都是美国大片评分很高的电影，AppleTV安装infuse软件在75寸大电视上播放，真是不错），③10T刷PT（手里目前有40多个站，现在级别已经很高了，上传也很高，10T够用），④1个240G SSD用于监控（Surveillance Station，两个ONVIF协议的摄像头，只存7天录像，速度比之前机械快多了，坏了再换闲鱼二手的多的是），⑤1个240G SSD放备份的一些日常工具文件镜像啥的，⑥剩下的那块120G用于Synology Drive，还有虚拟黑裙的时候，给它分配了三块硬盘（⑦一块60G安装套件系统文件啥的，⑧一块240G用于局域网硬盘位置分享，比如我的个人游戏电脑还有一台笔记本，添加了这个硬盘的网络位置，平时在电脑上面操作需要上传个文件啥的，直接放那个盘符里，很方便，⑨还有一块120G用于Audio Station）总合计9块。

详见下图：

前三块（硬盘1,2,3）是创建SA6400黑裙分配的

以下为新设备硬件购买记录，可以做个参考：

先说主板，当时我在闲鱼搜索这个主板，有3个卖家在卖，一个是下面的这个只有一个单主板，另外两个卖家是主板+CPU （i3 12300T）价格好像是1K左右吧，当时本来想买板U套装的，但是看着CPU成色不是很好，就没买。而这个卖单主板的看图片成色很新，价格要485元包邮，没挡板。想想还是贵啊，也犹豫了几天，想着看是不是能蹲到便宜点的，但是一连好多天，都没有遇到新发布的卖家，看来主板还是少，流通的不多，想想还是不等了，物以稀为贵，价格忍了，直接拍了这个卖家的单主板，到手后，成色确实如卖家描述，很新：

主板：铭瑄MS-pc Farm b660i

主板闲鱼购买截图

买这块板子的时候有一个小插曲，卖家描述里面写着带挡板，但实际到货发现没有挡板，跟卖家沟通，卖家说写错了，文字是复制的其他卖家的，然后卖家挺痛也特别好说话，就补偿了我20元，主板实际价格485-20=465元。

板子买了之后，开始买CPU，在多多也看了全新的散片基本在600元左右，现在好像没600以下的了。后来在闲鱼看到了一个全新的散片价格只要558元，想想主板都买了，不差这点了，比多多便宜，果断下手：

CPU闲鱼购买截图

全新散片

对了，还有主板的挡板，还好闲鱼有卖的，而且是全新的，继续拍：

不是石榴姐的中古店，貌似这个主板大部分都是出自这个卖家

机箱选择的是TANK机箱，6盘位刚刚好，淘宝买的779元，别的没看上：

机箱淘宝购买截图

到货开箱

电源没用之前旧设备的450W电源，又买了一个新的350W电源399元，就上6个盘（3个3.5,3个2.5）U功耗也低，瓦数够用了：

电源淘宝购买截图

因为想着旧设备黑裙的硬盘资料得同步到新设备的黑裙，就是旧设备的黑裙和新设备的黑裙得同时正常访问，所以就又新买了块新的SSD，SSD用来安装PVE虚拟机，然后创建SA6400黑裙，有的朋友可能会问了，旧设备的硬盘直接拔下来插新设备上就可以了，也省同步了，不用那么麻烦，但是我怕出现啥问题，还是重新完全安装一套算了：

硬盘京东购买截图

硬件准备就绪，开始装机，以下为装机时随手拍的几张图片，多图预警：

还有主板背面有2块其他散热的扣具，不用拆！TANK机箱的这个散热器完美适配安装。

说一下上面图片中，电源线24PIN 和CPU电源线8PIN，还有其它线，我是用了一种胶带裹了一层，这个胶带，是我以前安装汽车音响主机的时候买的一种胶带，类似于纱带那种质感，我觉得很好用，机箱走线很简洁，而且也防刮，挺好的。

上图中，散热器位置刚刚好！

安装完毕后，再借用bilibili博主司波图的话：插电，开机，让电流跑起来！

成功点亮

首先主板BIOS需要设置一下：

BIOS首页： System Language 可设置中文，英语好的可以忽略

第一个来电开机：

家里停电之后再来电，不用手动再开机，直接自己就开机启动了

第二个开启VT-d：

第三个开启英特尔虚拟化技术（VMX）：

不知道是否板子的上家设置过，反正我到手板子BIOS这些都没有开启，尤其是第二和三，如果没有开启无法正常安装PVE虚拟机，更别说直通了。

以下为安装PVE虚拟机及SA6400黑裙遇到的问题，仅做参考：

1. 底层虚拟机依然选择PVE版本7.4（现在版本应该是PVE8.3了，没有追新，感觉7.x挺稳定的，之前就是7.2运行很稳定，没死过机）原本是想用更低的7.0版本，但是安装7.0版本之后，遇到两个问题。

第一个问题：PCI直通最多添加5个设备，添加第6个的时候报错。修改对应的XXX.conf可以解决，但是想想还是麻烦。

第二个问题：创建SA6400黑裙之后，点击开机直接起不来，RR引导显示booting然后页面就不动了，虚拟机出现黄色的感叹号。SA6400黑裙使用的是RR引导最新的24.12.4版本。不知道什么问题。以前的7.2版本找不到了，索性直接从PVE官网下载了一个7.4版本，然后重新安装了PVE 7.4版本，再次安装同一引导，启动正常，没有出现问题。

2. 安装好PVE7.4版本后，创建SA6400黑裙，添加PCI直通共添加了6个设备控制器（核显直通、SATA控制器直通、USB直通、主板网口1（2.5G网口）直通、主板网口2（2.5G网口）直通、ASM1166控制器直通）PVE 7.4版本 可以添加多个PCI设备，没有5个限制。

如下图：

SA6400 黑裙添加了6个设备控制器

然而，点击开机之后，直通的两个2.5G网口死活获取不到IP地址，一连试了很多次，始终无法获取IP，搞得我都心灰意冷了，难道，主板的网卡不能直通？！RR引导提示让我检查路由器上面的IP，也查了没发现什么问题，旧设备直通的是i350t4其中的两个网口，新设备直通的是主板的两个2.5G网口，MAC地址应该不会冲突。

后来我把旧设备关机，也是无意间发现的，然后新设备SA6400黑裙重新启动，两个网口全部获取到IP了，我猜是旧设备黑裙或Openwrt旁路由的问题，因为后来两台设备同步数据的时候没有问题。

具体是旧设备的黑裙问题还是OpenWRT旁路由的问题，就没有再次确认了，因为数据同步完成之后，老设备就正式下岗了，不会在启动了。反正是先启动新设备的SA6400黑裙就能正常获取IP，再启动老设备黑裙同步数据，没问题。

大家如果安装黑裙启动引导时，获取不到IP，可以把局域网里面的其它运行的黑群或旁路由Openwrt关闭之后，再试试。

3. 还有就是创建SA6400黑裙之后，无法直通ASM1166控制器，网上搜索发现原来ASM1166的固件版本比较老，在比较新的主板比如我这个B660i就不支持，PVE无法识别，网上找到一个升级固件的视频，链接如下：https://www.bilibili.com/video/BV1UY41167Lo 升级很简单，需要先在一个老的主板比如B365主板上面升级，升级之后再插入到铭瑄MS-pc Farm b660i 主板上，PVE就能识别到了，问题解决。

下图为在用的ASM1166 PCIE转SATA6口扩展卡：

4.机器安装好之后上架橱柜（对，橱柜，厨房的橱柜，双开门的，里面有两层架子，自己买的方管，找师傅焊的）插电开机，然后无线重启，我都懵了，后来发现，原来主板的挡板把主板自带的后置开关按钮给压住了，那个开关小按钮跑挡板里面去了，导致那个开关小按钮一直是按着的，晕死了。

最后，这次黑裙我安装的是SA6400，因为只有SA6400版本的黑裙支持12代CPU硬件解码。

再简单说一下安装黑裙的方法吧，PVE安装成功之后，只需六步就可以正常安装SA6400黑裙了，非常简单：

第一步：

打开PVE的Shell输入命令：nano /etc/default/grub（命令意思是编辑grub文件），见下图：

第二步：

编辑grub文件，开启硬件直通，把下图红框所示改为下面的代码（只适用interCPU）：GRUB_CMDLINE_LINUX_DEFAULT="quiet intel_iommu=on pcie_acs_override=downstream"

然后按一下Ctrl键 ，输入字母Y，然后再按一下 回车键，grub文件就修改好了，但是还没有生效。

第三步：

输入命令update-grub更新grub文件，更新完成后，再输入重启命令reboot，使grub生效。

第四步：

重启之后输入命令update-pciids更新PCI设备名称，如果不执行这条命令，在添加PCI设备的时候设备名称那块不显示，为空，见下图红框所示：

第五步：

使用WinSCP软件把黑裙引导文件（rr.img）上传到PVE root目录下面，见下图：

第六步：

编辑对应的conf文件，比如我的SA6400黑裙虚拟机编号为100，那么编辑其conf文件，输入下面代码：nano /etc/pve/qemu-server/100.conf

编辑100.conf文件在开头位置粘贴复制以下代码（注意引导文件rr.img当前位置，我是上传到root目录下，如果你上传到其它目录下需要修改file=/root/rr.img路径）：

args: -device 'qemu-xhci,addr=0x18' -drive 'id=synoboot,file=/root/rr.img,if=none,format=raw' -device 'usb-storage,id=synoboot,drive=synoboot,bootindex=1'

见下图：

PVE引导黑裙有两种方式：

一个是上面的这种添加U盘方式引导，推荐！！！还有一种就是创建虚拟磁盘引导方式（把引导img镜像文件转成虚拟磁盘并导入到虚拟机，像这样：qm importdisk 100 /root/rr.img local-lvm），创建虚拟磁盘方式引导不推荐，会在黑裙里面生成一个硬盘位置，不好。推荐上面的这个U盘方式引导。

100.conf文件修改好之后和上面修改grub文件方式一样，先按一下Ctrl键 ，输入字母Y，然后再按一下 回车键，这样100.conf添加U盘引导方式就修改好了。

以上都配置完成后启动SA6400黑裙虚拟机就可以正常获取IP并在线编辑引导了，我是直通两个网口因此获取了两个IP（记着先把网线插上）使用RR引导安装黑裙的方法也非常简单，参考其网站介绍：https://rrorg.cn/ 和其它大佬的安装教程。不再详细说了，前面基础准备好，剩下的都很简单。

还有一个问题，我没有在/etc/modules文件中添加下面的代码，据说是这仅在必要时启用IOMMU转换，将iommu分组相关的内核模块启用，从而可以提高VM中未使用的PCIe设备的性能。我也不太懂，反正我没有添加，感觉也没啥影响，所以判断可以不用添加。

vfio

vfio_iommu_type1

vfio_pci

vfio_virqfd

截止发稿前新设备SA6400黑裙运行稳定，核显正常，安装docker镜像jellyfin硬解正常，机箱前置的USB口插入移动硬盘后，SA6400黑裙系统也能正常识别到，主板4个SATA及ASM1166扩展卡上插入的两个SATA口都能正常识别到，且硬盘顺序也正确，没有发现问题。

还有SA6400黑裙直通的是主板自带的2个2.5G网口，组的链路聚合（需上层交换机也支持链路聚合才可以，我上层交换机是网件24口千兆交换机，支持链路聚合，下来准备换一个2.5G支持链路的交换机），见下图：

最后，这个主板没有发现硬件直通的问题。（因为在某些论坛或视频底下留言中有看到说铭瑄这块主板直通有问题）

最后的最后，橱柜关上门之后，几乎听不到任何声音（机箱1个风扇，电源1个风扇，合计2个风扇），有的小伙伴可能会说了，夏天不得闷死，旧设备8盘位的两年多也没出现任何死机，新设备况且只有6盘位，且U功耗也低，更不会出现问题。

橱柜的右侧及底下都有通风口，右侧之前旧设备的时候安装的是两个9CM风扇向外抽风（细心的小伙伴在上面的图片中应该能看到，就在白裙上面），这次新设备把已经运行两年多的风扇拆掉了，换了两个白色的12CM风扇，且买了一个可调节风扇转速的设备，等夏天的时候在开启。如下图：

橱柜底部散热孔

橱柜右侧出风口，在白裙上面，内部看

右侧出风口，外面看

换这个12CM的风扇花了我一些时间，主要是因为怎样把两个12CM的风扇固定到这个出风口，刚开始想的就是找8颗螺丝直接拧上，这种方式好处就是省钱，但是后期更换风扇感觉不是太方面，后来看到机箱风扇增高支架，固定风扇很方便，就是费钱，一个小支架花了我55大洋... 嘤嘤嘤

55元一个

支架到货后又加工了一下，用电钻打了4个眼：

背部自带的眼太小无法上螺丝固定

打了4个眼

上4颗螺丝固定支架

螺丝是支架自带的，上风扇很轻松

两个12CM,2.5CM风扇

整体效果

左右两侧有1.5cm缝隙，平时就这么着，夏天再找胶带封一下

风扇转速可调节

风扇向外抽风

下图为新设备上岗的照片，图中最右侧为DS218Play白裙，家里所有的手机照片都同步至白裙：

黑裙白色，白裙黑色，中间为厨房下水管道

最后的最后的最后：我很享受这个过程。