真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

2020-04-01 10:55:03 136点赞 805收藏 155评论

创作立场声明:本文所有硬件均为自己购入,非专业人士,相关知识均为自学,有不足之处还请指正。

前言

不知道从什么时候开始对Home Server/存储,开始有追求,一路走来,玩过的机器有从10年前的HP Gen7,苹果Time Capsule 时间胶囊,到HP Gen8,到Drobo 5D,Drobo 5n,到群辉918+,威联通453b mini,群辉1819以及各种x86架构下的DIY存储服务器,对目前家用存储服务各种方案也算有所了解。随着需求的增加,逐步希望有一个能真正All in One的机器满足我所有对Home Server的需求。最近疫情原因呆在家里有了充足的时间,于是,就有了这个系列。

需求

其实我的需求一开始很简单,一个安全的存储服务器能保存我5w多张Raw照片,一个支持smb并加入fruit协议的网络存储以便我备份苹果final cut pro管理的10年内拍的大小视频共5T,一个能在我不用的时候硬盘能睡眠的Plex影音服务器并支持硬件编码,以上是基本需求。

罗列出目前所有的需求如下图:

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

在动格6T 8T 12T 甚至14T的大容量硬盘组成的阵列中,raid5 raid6等追求容量的raid早已不安全,损失硬盘后重建过程中,大大大几率摧毁整个阵列,造成所有数据丢失。存储安全我只相信ZFS,这个“最”安全的文件格式/阵列格式是安全级别最高了,甚至很大一部分商业数据中心也使用的是ZFS(甲骨文原版)文件格式。关键还免费,不过门槛很高,之后会另开一篇专门讲此部分。

除此之外,以上大部分服务都可以精简为两三个虚拟机,甚至一个系统加Docker来完成所有的服务,但经过深思熟虑,硬件都All in One了,服务就尽量能分开,只要保证硬件正常运行,软件的维护成本会低很多,单个虚拟机出了问题,对其他的服务也会减到最小。当然缺点就是硬件overhead会很高,造成很多性能的浪费,以下为我的硬件。

硬件组成

主板SuperMicro 超微X11SSH-LN4F M-ATX

  • 支持e3 v5 v6系列处理器

  • 64GB ECC内存

  • 1个IPMI网口+4个Intel i210千兆网口

  • 三槽PCI-E x8 x8 x4

  • NVMe PCI-E 3.0 x2

  • 支持IPMP远程管理

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

CPU Intel 志强Xeon CPU E3-1235L v5

  • 4核4线程

  • 25W低功耗

  • Intel HD Graphics P530 支持4k HEVC视频转码

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

其他主要硬件

  • 镁光 2400MHz 32GB ECC

  • 西部数据 WD Black 500GB NVMe

  • 三星 1TB SSD

  • 三星 2TB 2.5‘ HDD机械硬盘

  • 8TB硬盘*8(待安装)

  • 台达 500w 1u Flex电源

  • Noctua 猫头鹰 NH-L9i 超薄风扇

  • 万由810A机箱

  • LSI 阵列卡(待安装)

  • 万兆网卡(待安装)


以下是装机过程

压箱底的垃圾成色万由810A机箱

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。主板安装CPU,内存和风扇,线绕了一下线长刚刚好

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

安装板载NVME

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

主板本身支持8个SATA,我只用其中2个,8个硬盘我会直通LSI阵列卡给FreeNAS做ZFS存储池。

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

主板板载显卡ASPEED是支持IPMI KVM管理的关键,这个芯片有256MB显存,可捕捉Intel板载显卡画面通过iKVM进行互动。

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

这个台达电源CPU供电只有4pin,不过CPU功耗很低不会影响。

设为头图

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

主板内部自带一个USB 3.0的接口,我插了一个16GB的小U盘为安装ESXi做准备。

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

机箱侧面安装2TB机械硬盘和1TB SSD,由于这个机箱只支持1个2.5寸硬盘,机械硬盘做了固定,SSD则随便丢在了一边,用双面胶固定的。

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

主板前期硬件安装完成,主板无声卡,Audio Header无法安装。USB3 USB2以及3个风扇都可安装。3个自带的风扇为4pin可调速,但是噪音很大。

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

前期硬件基本就安装完了,以下内容粗略介绍通过主板IPMI管理端口安装ESXi 6.7。

系统安装

系统选择

系统的选择方面有很多,比如ESXi,Proxmox,UnRAID等,可能是从HP Gen8留下的习惯,我这里选择的是ESXi 6.7,这也是我最熟悉,最信任的系统,并且可以通过VMWare Workstation或者VMWare Fusion进行简单管理,不用每次登陆Web界面。

IPMI功能

简单介绍一下IPMI,IPMI为Intelligent Platform Management Interface的缩写,是管理基于 Intel结构的企业系统中所使用的外围设备采用的一种工业标准,该标准由英特尔、惠普、NEC、美国戴尔电脑和SuperMicro等公司制定。用户可以利用IPMI监视服务器的物理健康特征,如温度、电压、风扇工作状态、电源状态等。

简单的说IPMI是一套主板板载的独立系统,可以通过一根网线支持开关机,管理BIOS,远程加载ISO安装系统,记录故障,系统日志,汇报传感器等功能,配合iKVM让你不必在机器旁,远程做到你在机器旁能做到的所有软件功能。

PMI功能在家用主板上出现的很少,intel在商业主板和CPU中加入vPro的功能部分替代IPMI,据我所知用的人并不多,主要还是便于IT管理员们批量部署办公用电脑。相似的功能有HP的iLO等。

通过IPMI安装ESXi

以下过程比较粗略,主要介绍通过IPMI部分的操作过程,毕竟除此之外,ESXi的安装过程和普通电脑无异。

通过Chrome浏览器访问IPMI的IP地址,输入账户密码登录。IP地址可以在开机后屏幕左下角显示,账号密码初始都为小写admin。

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

主页可以开关机并且有目前屏幕预览

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

选择远程控制 Remote Control,选择Console Redirection即可启动Java版本的远程iKVM。使用Java版本是因为HTML5的iKVM目前还无法远程加载iso。

由于尚未开机,目前console无视频信号

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

点击Virtual Media Virtual Storage

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

选择加载ISO,并选取本地ESXi的ISO文件,点击Plug in。这样就等同于人在机器上插入了一个ESXi的安装光盘。

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

点击OK后选择Power Control中的Power on开机可看到开机BIOS欢迎页面

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

如果ISO为第一启动项目则会自动启动ESXi的安装了

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

之后的过程不再累赘,和普通ESXi安装没有区别,我选择把ESXi安装在刚才主板上的16G U盘里便于系统备份与恢复。

安装好后esxi成功启动

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

访问ESXi的地址即可进入ESXi的管理页面,由于使用的硬件是ESXi官方所支持的主板,所有硬件都被识别。

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

导入由VMWare Workstation和VMware Fusion创建好的虚拟机,尝试运行无问题。

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

以下为硬件资源的分配(包含硬件直通),需要性能和隔离的系统都尽量使用硬件直通。由于下载和FreeNAS系统的Dataset对磁盘读写很多,为了保护SSD寿命,在购入Intel P系列企业SSD之前,先使用机械硬盘。

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

以上便是这个系列的开篇部分,下一篇计划讲LSI阵列的安装,FreeNAS的部署,和对ZFS数据安全性的阐述。目前就把这台机子扔到我的柜子上面吧:

真ALL in One!超微 志强 ECC 集齐各种系统做家用服务器 篇(一)硬件安装。

感谢能读到这里的各位,其实此文更是对我Home Server部署路上的一个记录。有什么更好的意见也请大家指出。

展开 收起
155评论

  • 精彩
  • 最新
  • 想请教下楼主,超微的ESXI 6.7官方去哪里下载? 可以给个地址吗?谢谢.

    校验提示文案

    提交
  • 猛然发现,搞什么NAS是假,我想开家电子实验室才是真嗒!

    校验提示文案

    提交
    欲望就是无止境,想了这个要那个。

    校验提示文案

    提交
    这个cpu贵了一倍

    校验提示文案

    提交
    收起所有回复
  • 期待楼主更多all in one的文章,请问为什么要用三个路由器版本 一个不是就能做到吗

    校验提示文案

    提交
    谢谢你的关注,主要是因为由过往的经验得出的结论,koolshare下的lede富强插件没有lean的稳定,但是插件库里有很多有趣的插件可以用。lean的两个openwrt分别使用的两个不同的富强机场,一个贵,稳定,高速但限制长时间上传,另一个便宜的富强机场速度慢但不限制流量和上传,这个openwrt连到了光猫多播上传,不影响主线路的稳定性。两个openwrt分别ip不同做旁路由,其他系统可按照需求调整网关选择这其中一个。这样某个虚拟机出了问题恢复快照很方便。性能损耗对这个处理器也几乎微乎其微。

    校验提示文案

    提交
    谢谢你的关注,不知道刚给你回复的长篇大论为什么被吃掉了,显示不出来,我晚些再给你回复一次。

    校验提示文案

    提交
    还有6条回复
    收起所有回复
  • 多虚拟机消耗太大了吧 我现在只要能docker绝不vm

    校验提示文案

    提交
    其实还好 cpu从来没超过50%使用率,docker感觉还是不够隔离,太依赖于宿主系统稳定性。赛扬之类的系统用docker吧。

    校验提示文案

    提交
    收起所有回复
  • 搞着搞着变成硬件玩人了,太多机器了吧?

    校验提示文案

    提交
    是的 不是完全被动因需求装机 我还能从中获得乐趣哈哈😄

    校验提示文案

    提交
    收起所有回复
  • 说下成本吧,目测不低于5000

    校验提示文案

    提交
    不算硬盘的话大概这个数 [喜极而泣] 比8盘群晖还是划算的。

    校验提示文案

    提交
    其实除非刚需不建议这个节骨眼上这么好的设备,intel 11代貌似开始发力了,12代也值得期待,现在入手1151平台高端产品有种49年入国军的意思

    校验提示文案

    提交
    还有5条回复
    收起所有回复
  • Gen8组raid1,移动硬盘冷备,定期同步。raid1坏了立刻先同步冷备,然后重建,个人觉得差不多够用了。回头再整个SSD做冷备,几乎无忧。

    校验提示文案

    提交
    是的 raid1 在数据量小的情况下是最安全的可行方案。我目前数据超过了20T raid1 成本太高。

    校验提示文案

    提交
    收起所有回复
  • 平时使用功耗大概什么范围啊?想弄个低功耗的机器玩玩 [皱眉] [皱眉]

    校验提示文案

    提交
    主存储8个硬盘休眠的情况下在,40w左右,电费还好。

    校验提示文案

    提交
    问一下这么搞,硬盘有多少时间是休眠的,1天大约会起转几次?最好用个智能插座监控一下,毕竟起转太多对硬盘不好

    校验提示文案

    提交
    还有5条回复
    收起所有回复
  • 能硬解4K电影吗?

    校验提示文案

    提交
    可以的,核显分配给windows server后可以plex硬件编码解码,外网的时候看家里电影无压力。

    校验提示文案

    提交
    这个核显硬解1080p原盘可以,但是4k原盘或者HEVC 10bit之类就干瞪眼了,很容易满负荷

    校验提示文案

    提交
    还有5条回复
    收起所有回复
  • 厉害,大佬。晚点学习一下。

    校验提示文案

    提交
    哈哈 互相学习

    校验提示文案

    提交
    收起所有回复
  • 巧了么这不是我出的那套机箱电源么,更巧的事我们用的同一款主板、cpu,所以你是不是觉得电源延长线的位置刚刚好 [高兴]

    校验提示文案

    提交
    哈哈?真的是你吗?这电源太吵了,我准备换一个猫扇改造的电源,把机箱风扇也都换猫扇。要不然太吵了。

    校验提示文案

    提交
    那个电源cpu供电是4+4的,只不过我延长线买成4pin的了,后期上高端u可以再加跟延长线

    校验提示文案

    提交
    还有2条回复
    收起所有回复
  • 功率测过吗?感觉这套组合很不错

    校验提示文案

    提交
    40w左右 硬盘休眠情况下

    校验提示文案

    提交
    我擦 这么低

    校验提示文案

    提交
    收起所有回复
  • 这电费很难受吧

    校验提示文案

    提交
    8盘休眠(大部分时间)的时候40w左右。24小时开机一个月14.5元,这有啥受不了的。

    校验提示文案

    提交
    收起所有回复
  • 搞个二手塔式服务器呢?

    校验提示文案

    提交
    不介意噪音 功耗和体积的话可以搞的。

    校验提示文案

    提交
    塔式服务器风噪不大。主要是体积大

    校验提示文案

    提交
    收起所有回复
  • 我看到了UDM [大吃一惊]

    校验提示文案

    提交
    哈哈 是的 很好用

    校验提示文案

    提交
    收起所有回复
  • 主板有购买链接吗

    校验提示文案

    提交
    某宝找超微代理

    校验提示文案

    提交
    收起所有回复
  • 和我的配置一模一样 不过我的是x11 ssh f 只有双千兆 你这个应该是ln4f 4口千兆 然而需求不高 我的1235l纯怼了8个sata装黑群辉了 惭愧

    校验提示文案

    提交
    哈哈 挺好的,我反正上了1819后觉得啥机器都比群晖好

    校验提示文案

    提交
    我对这个板子有个疑问不知楼主知不知道 内网这板子讨论太少了, m2槽用u盘装了win以后bios里出不来引导项,uefi和legacy都试了,是不是这块板子和紫光这种b key 的nvme盘有兼容性冲突?

    校验提示文案

    提交
    还有1条回复
    收起所有回复
  • 这样多虚拟机稳吗,感觉其他的都还可以,但是要是放个黑裙进去,就怕到时候盘挂了数据救不回来,我现在是gen8只装黑裙,但是近期想试试openwrt,上软路由好还是放gen8里比较好,打算当个旁路由耍

    校验提示文案

    提交
    数据在freenas里 zfs比群晖安全多了。群晖只做下载和onedrive同步

    校验提示文案

    提交
    全都是服务器级别的硬件,ecc内存+zfs存储,家用应该没有比这个数据更安全的了。

    校验提示文案

    提交
    收起所有回复
  • 很想知道楼主的阵列卡和万兆网卡在这个箱子上要怎么装…… [看不到]

    校验提示文案

    提交
    需要pcie延长线 x8的就可以了

    校验提示文案

    提交
    感觉两张的话有点打挤,刚才早上剁手了技嘉的C246M,听他们说背面两个pice口错开的要好装一点点。

    校验提示文案

    提交
    还有5条回复
    收起所有回复
  • 楼主问一个问题啊,在esxi下你用freenas的zfs做存储,文件共享能给win server么?怎么在保证直通的情况下共享给win server呢

    校验提示文案

    提交
    就是普通的smb分享,走的esxi的虚拟万兆交换机,你想运行软件的话还可以做iscsi

    校验提示文案

    提交
    收起所有回复
提示信息

取消
确认
评论举报

相关文章推荐

更多精彩文章
更多精彩文章

IMShinJi

Ta还没有介绍自己

关注 打赏
最新文章 热门文章
805
扫一下,分享更方便,购买更轻松