绿联固态硬盘
绿联固态硬盘
绿联固态硬盘
绿联固态硬盘
  • zaozuo
  • zaozuo
  • zaozuo
  • zaozuo

NAS上跑本地大模型的三种姿势:Ollama部署避坑指南

2026-06-26 14:23:37

#NAS+AI部署实战

一、为什么在NAS上跑AI

本地部署大模型,数据不出家门,隐私安全,没有API计费焦虑。量化版小模型对硬件要求低,8G内存的旧机器就能跑。

二、姿势一:Docker部署Ollama

飞牛OS和群晖都支持Docker。镜像拉取慢可以换国内源,容器挂载目录需要注意权限,设成777可避免启动失败。CPU模式跑llama3.2 3B量化版,内存占用控制在4G以内。

三、姿势二:直接安装ollama Linux版

不习惯Docker的可以直接装二进制版本。一条curl命令搞定,缺点是没有Web界面,需要配合Open WebUI使用。

四、姿势三:集成方案1Panel

1Panel面板自带OpenAI接口兼容层,部署后手机App和网页都能调用。适合想快速上手又懒得敲命令的值友。

五、网络避坑

内网访问直接用IP:端口。外网访问没有公网IP的,用ZeroTier或飞牛自带穿透。IPv6需要路由器支持,光猫拨号的话得改桥接。

展开 收起

本文作者

0评论

当前文章无评论,是时候发表评论了
提示信息

取消
确认
评论举报

相关笔记推荐

最新文章 热门文章
1
扫一下,分享更方便,购买更轻松

已收藏