个人数据分级存储实践

2021-07-12 21:57:03 61点赞 518收藏 48评论

摘要

1、将重要的个人数据按是常用程度分为冷、热两部分,热数据部署在主力NAS,长期开机使用; 冷数据部署在备份NAS,定期开机进行备份,临时使用则可通过路由器的唤醒功能进行唤醒。主力NAS和备份NAS间使用rsync进行定期自动备份。不重要的数据不备份。

2、主力NAS可使用蜗牛,少量数据丢失也不可怕,可使用海鲜市场里的便宜硬盘;备份NAS不长期开机,可使用较好一点的台式机硬盘。通过上述配置,可以降低对高质量NAS硬盘的需求,减少硬盘的投入。

3、群晖和威联通对比情况。群晖店大欺客,价格高,售后差,主要优势是系统易用性好;而威联通性价比高,售后好,系统易用性相比群晖有一定差距。建议购买群晖X86机型作为主力NAS,购买威联通ARM机型作为备份NAS。

起因(吐槽)

本来没计划弄那么多,原来就一个DS 216PLAY,就是一个NAS默默工作好就算了,不起眼的设备才是最好的设备。可是,我的群晖 DS 216PLAY的一个硬盘接口坏了。只能单盘运行。好吧,趁着去年矿难,300块搞了一台蜗牛,用着也还不错。但216PLAY一直放着不用,而使用蜗牛则老是担心电源不好会把那么贵的NAS硬盘(一块红盘、一块酷狼)给搞坏,长期开着老是觉得心里有点不踏实。想想还是得处理一下,去修好216PLAY吧。

因为对维修不熟悉,不知道线下去哪里修,于是电话问了群晖客服,客服也没问坏了什么地方,直接说得寄回厂家修改,嗯,维修费是1570。对比下TS212P3,于是我买了TS212P3,我想脑子没秀掉了的人,都不会选择去修吧。

个人数据分级存储实践

架构设计

TS212P3到手,于是设计了起来。大概这样的架构。

个人数据分级存储实践

1、数据分级

首先,先要对自己的数据有一个清醒的认识,区分维度主要区分重要与不重要。重要数据里又要区分常用与不常用。其中不重要数据无需备份。

如何确定数据分级是因人而异的。每人有不一样的需求。对我而言,作为一个二胎爸爸,小朋友的照片、视频等是最重要的。而一般常用的资料,都是近期一段时间内的照片、视频,对于半年或一年以上的照片/视频,看的次数暂时不多。在这基础上,冷热数据的界限就非常明显了。可以将近期的照片作为热数据,放置在常开的NAS上,经常查看。而半年前的数据则可以作为冷数据,在不常开的NAS上进行备份,同时,也在移动硬盘上进行冷备。

对于小姐姐、电视、电影这种,要么使用app在线看,要么随时下载好了,再说,临时找的还有点新鲜感。对吧?个人数据分级存储实践 个人数据分级存储实践

2、具体配置

1)主力NAS的设置

主力NAS作为经常使用的NAS,建议使用性能较好的X86机型。因为X86机型才可以使用docker,而docker是扩展NAS能力的必备条件。在配置上,主要是设置Hyber Backup。一是实现定期(每周一次)向备份NAS进行备份,二是由于主力NAS未采用RAID1等有数据保护的模式。因此,需要针对部分重要的文夹,每天在本机上备份,即每天拷贝一份到本机另一个磁盘的文件夹。

定期向NAS备份,Hyper Backup->左下角的+号->数据备份任务->rsync备份(单一版本)->选择rsyn兼容服务器,输入用户、密码->应用程序备份(个人建议不用备份)->应用(建议不备份缩略图)。

注意,在此操作前,先要设置好备份NAS的rsync服务器。

点击+号,选择数据备份任务点击+号,选择数据备份任务

个人数据分级存储实践

输入地址、用户、密码(在备份NAS上设置)。输入地址、用户、密码(在备份NAS上设置)。

选择要备份的热数据文件夹选择要备份的热数据文件夹

设置备份计划,另外,建议不备份缩略图。设置备份计划,另外,建议不备份缩略图。

每天拷贝一份重要数据到另一个磁盘,也是类似,第二步修改一下:

选择本地文件夹和USB(单一版本)选择本地文件夹和USB(单一版本)

2)备份NAS的设置

备份NAS的主要职责是备份,平时关机,或者按需做一些简单的操作,因此,性能不需要太好,只需要ARM的NAS就可以(土豪请忽略)。另外,不建议使用两块相同容量的硬盘组RAID1,可以使用两块不同品牌的硬盘。亲见同事的NAS使用了同样品牌的硬盘同时损坏,以为万无一失的数据一下子全没。

备份NAS需要作为rsync的服务器,需要在HB3里打开设置。在HB3 Hybrid Backup Sync->服务->Rsync服务器里启用。

只需要启用,输入密码就好只需要启用,输入密码就好

同时,备份NAS不是每天都开启,可以设置定时开关机。关机可以设置为每天关,开机就在备份那天开就好,考虑到开机需要一点时间,建议开机时间在备份时间前的30分钟前,同时,开始备份的时间到每天关机时间的间隔最好留长一点,避免避免内容过多,而未能及时完成同步。

定时开关机截图,控制台->电源->电源计划

设置定期开关机设置定期开关机

其他啰里啰唆

1、弄了这方案后,有机会对比了群晖和威联通,感觉群晖系统还是比威联通简单,容易上手。设置好后,理论上日常使用应该没问题,但其照片的APP感觉也还是没有群晖用起来舒服,也许是我使用群晖的APP习惯了。总有点适应不过来。另外,不知道是不是因为TS212P3还在建索引的原因,网页打开、APP浏览都挺慢的,特别是刚打开APP的时候。

2、其实我的蜗牛作主力并不完美,一是我的蜗牛版本是只有100M的网卡,打算把蜗牛当主力后,买了个千兆的USB网卡,弄了个链路聚合,结果发现,不管在路由、蜗牛上怎么设置,都是只有10MB/S,只有把原网卡禁用,只用USB网卡,才能达到30MB/S。也不知道咋回事。二是我的蜗牛没有洗白,序列号都用不上,视频无法转码。不过算了吧,300块,要啥自行车?

总结

1、通过冷热数据分级存储,可以节省使用NAS专业硬盘的损耗,在确保数据安全的同时,也能便捷的使用。如果主力机型使用蜗牛,则更能省银子。

2、希望威联通能更快弥补软件易用性的短板,可以替换掉群晖。

3、欢迎有批评或好的优化建议,评论区见。

展开 收起
48评论

  • 精彩
  • 最新
  • 我情况和你差不多,我是416play,四个4T组RAID5,然后同步到百度网盘。最近硬盘突然坏了一块,于是开始考虑异地备份的事。目前是这么考虑的,买一个720+组个RAID1,跑Drive和Photo,只放最重要的照片和文件,速度也快。现有的416play用来存电影啥的,然后装个HyperBackVault,720的数据每天备份到416上。另外还准备收个二手的218j之类的低功耗ARM机器,放在异地做异地备份,不用做raid,真坏了就换个便宜硬盘。

    校验提示文案

    提交

    imf_

    作者

    737Max

    异地备份挺重要的。

    校验提示文案

    提交
    百度网盘自己的同步功能管增不管删(本地已删掉的网盘还是存在),请问有完全镜像一致的解决办法吗?

    校验提示文案

    提交
    还有4条回复
    收起所有回复
  • 这个思路。买了NAS发现专用盘很贵,还赶上硬盘挖矿潮,不划算。干脆买了清零盘和手里旧的酷鱼盘装NAS,然后发现我根本不需要专用盘,只需要把重要数据冷备份多一份,每几个月再网盘备份一份就可以了,以后盘坏了都买便宜的紫盘。电影这些根本不需要RAID也不需要备份,盘开始出错了就拷到新盘,如果盘突然暴毙了也无所谓,不花钱可以慢慢再下,花钱就更容易找资源了。

    校验提示文案

    提交
    是的,归根到底,还是得想清楚,哪些资料是必须用自家NAS保存,而且必须是不能丢失;哪些是可以容忍丢失,或者丢失了也能找回来的。
    我理解就是三个因素判断,一是有重要意义,对我而言,孩子的照片视频是最珍贵的。二是唯一性,小盆友的照片只有自家有,丢了也无法从网络其他地方下载。三是放自家的必要性。孩子的照片还是设计隐私,个人还是不愿意放到网盘上。其他的资料,能花点时间或金钱在网上得到的,就没必要弄那么多备份了。

    校验提示文案

    提交
    对的,分类备份才是王道。
    网盘储存主要是避免最最极端的情况比如失窃和失火而做的异地备份,也可以用异地NAS备份,但不常用的资料网盘备份便宜。隐私问题可以通过加密分割打包来解决,反正可能几个月才做一次。

    校验提示文案

    提交
    还有3条回复
    收起所有回复
  • 首先,群晖是经销商形式,维修直接本地找经销商。其次,群晖的技术支持服务是我用过所有产品中前三的。

    校验提示文案

    提交

    imf_

    作者

    Huzour

    我没太多接触,只能从我遇到的经历来对比。我的群晖是在京东买的,在京东app上问技术问题,只是发个400电话号码过来让我电话问,还是说周六日技术不上班,我就没再电话问(我的问题)。电话问维修问题,直接说要1570。威联通是在拼夕夕买的,任何技术话题,都在app上及时回复。综上,个人经验还是觉得威联通的服务好。

    校验提示文案

    提交
    收起所有回复
  • 强迫症和极简主义患者,看到几台设备和处理不了的bug会疯 [傻笑]

    校验提示文案

    提交

    imf_

    作者

    bozhai

    确实,有空还是得弄弄。

    校验提示文案

    提交
    收起所有回复
  • 某宝上有修群晖的,你可以去问问

    校验提示文案

    提交
    谢谢,得去问问。

    校验提示文案

    提交
    收起所有回复
  • 同想法。主力nas用小容量海鲜盘下载狂草,备份用大容量好盘放在我家云离线定期备份,但是有个悖论是主力nas配置高电源好,备份nas配置电源又太low了些,唉

    校验提示文案

    提交
    arm机型的电源会很差吗?不时间开机会不会缓解这问题?

    校验提示文案

    提交
    看价格吧,老牌厂商的群晖威联通应该没问题

    校验提示文案

    提交
    收起所有回复
  • 低配置的群晖和威联通都是半斤八两,没啥区别,对比高配置群晖完全没法打

    校验提示文案

    提交
    单说硬件当然是威联通,但是整个系统的易用性还是群晖好。photo station的界面什么的,都还是群晖的方便。当然,也可能是我还没适应。

    校验提示文案

    提交
    收起所有回复
  • 咨询个问题,你用rsync备份到QNAP后,还是.hbk那种备份目录吗?

    校验提示文案

    提交

    imf_

    作者

    737Max

    不是的,按我截图的配置,就是普通文件夹的形式。

    校验提示文案

    提交

    737Max

    imf_

    作者
    谢谢,看来要实现多版本循环还是得用HyperBackupVault

    校验提示文案

    提交
    还有1条回复
    收起所有回复
  • 我现在qnap 451-qnap453mini-onedrive,就是微软的服务经常连不上,机器经常发告警邮件

    校验提示文案

    提交
    qnap这个通知太详细了也不好。网络断了一下也是警报,这几天弄网路,一登录就是满眼红色警报。

    校验提示文案

    提交
    可以在通知中心把它关掉,我现在只接收系统更新和异常登录的还有硬件,存储池异常的通知 [高兴]

    校验提示文案

    提交
    还有1条回复
    收起所有回复
  • 光盘+U+机械盘 +备份U

    校验提示文案

    提交

    imf_

    作者

    SweetQ

    10多年以前用过光盘,然后悲催的发现找了半天找不到光驱,好不容易找到,发现读不出来。

    校验提示文案

    提交

    SweetQ

    imf_

    作者
    拆开,激光头酒精棉花擦下即可!!

    校验提示文案

    提交
    还有1条回复
    收起所有回复
  • WOW,感觉略微有点儿复杂,瞬间觉得度盘200元/年,真 *** 便宜,电费、设备折损都解决了...个人都需要多地备份,真太厉害。另外,群晖的相册,好不好用?

    校验提示文案

    提交
    每人需求不一样

    校验提示文案

    提交
    等到某一天把你拍的亲子视频变成8秒教育片时, 你就可以哭了 [呲牙]

    校验提示文案

    提交
    还有1条回复
    收起所有回复
  • 重要的相片sync到阿里云,其他pt,随他去吧,哈哈

    校验提示文案

    提交
    阿里云容量太小了

    校验提示文案

    提交
    收起所有回复
  • 我也是主机黑裙24小时运行,威联通453b mini是每周五下午开机,周一凌晨关机。
    然后把群晖的照片备份到威联通里面。
    每月末打包当月的照片,加密上传到网盘,类似天翼和阿里云这种。

    校验提示文案

    提交
  • 和我思路类似 [赞一个] ,但我是全手动备份

    校验提示文案

    提交
  • 差不多,蜗牛C + 212P3。212P3作为纯粹的备份机挺好,也没法胜任更多角色了。

    校验提示文案

    提交
  • 好家伙,开头就是主力nas和备份nas,我这个连mas都没有的看得津津有味 [皱眉]

    校验提示文案

    提交
  • 我是一台nas,一个5t硬盘冷备份全家照片视频,麻烦点 [高兴] 办公室移动硬盘里还备份了一份

    校验提示文案

    提交
  • 备份记得按时去检查

    校验提示文案

    提交
提示信息

取消
确认
评论举报

相关文章推荐

更多精彩文章
更多精彩文章
最新文章 热门文章
518
扫一下,分享更方便,购买更轻松