NAS上跑本地大模型的三种姿势:Ollama部署避坑指南
一、为什么在NAS上跑AI
本地部署大模型,数据不出家门,隐私安全,没有API计费焦虑。量化版小模型对硬件要求低,8G内存的旧机器就能跑。
二、姿势一:Docker部署Ollama
飞牛OS和群晖都支持Docker。镜像拉取慢可以换国内源,容器挂载目录需要注意权限,设成777可避免启动失败。CPU模式跑llama3.2 3B量化版,内存占用控制在4G以内。
三、姿势二:直接安装ollama Linux版
不习惯Docker的可以直接装二进制版本。一条curl命令搞定,缺点是没有Web界面,需要配合Open WebUI使用。
四、姿势三:集成方案1Panel
1Panel面板自带OpenAI接口兼容层,部署后手机App和网页都能调用。适合想快速上手又懒得敲命令的值友。
五、网络避坑
内网访问直接用IP:端口。外网访问没有公网IP的,用ZeroTier或飞牛自带穿透。IPv6需要路由器支持,光猫拨号的话得改桥接。














