Docker容器日志撑爆磁盘的排查与根治指南
在使用 Docker 的过程中,系统磁盘常因 /var/lib/docker/containers/ 目录下的日志文件迅速膨胀而被占满。这些以 -json.log 结尾的文件记录了容器的标准输出和标准错误,若不加以控制,往往会无声无息地吞噬大量存储空间。针对这一问题,需要明确处理禁忌、掌握应急清理方法,并配置长效的日志管理机制。
01问题原因与处理禁忌
当执行 df -h 命令发现磁盘空间不足时,通常是由容器日志文件过大导致。面对这种情况,严禁直接使用 rm 命令删除日志文件。因为文件正被 Docker 进程占用,Linux 文件系统机制会在进程关闭前继续锁定该空间。直接删除不仅无法释放磁盘空间,还可能导致 Docker 引擎无法正常写入日志,甚至引发容器运行异常。
02临时救急方案
当磁盘已满且急需恢复业务时,应通过清空文件内容而非删除文件的方式来释放空间。使用 truncate 命令可以保留文件句柄并立即释放被占用的磁盘。
- 执行以下命令清空所有容器日志:
truncate -s 0 /var/lib/docker/containers/*/*-json.log
03根治策略:配置日志回滚
为避免日志再次撑爆磁盘,需对 Docker 的日志驱动进行配置,限制单个日志文件的大小及保留的归档数量。
配置方式对比
全局配置(推荐)
修改 /etc/docker/daemon.json 文件,统一管理所有新创建容器的日志策略。
- 配置内容:
{
"log-driver": "json-file",
"log-opts": {
"max-size": "100m",
"max-file": "3"
}
} - 参数说明:
max-size: 单个日志文件上限 100MB
max-file: 最多保留 3 个归档文件 - 生效方式:
保存文件后执行 systemctl restart docker。
注意:此设置仅对新容器生效,存量容器需重建。
单容器配置
在 docker-compose.yml 或 docker run 命令中针对特定服务进行设置。
- Docker Compose 示例:
services:
app:
logging:
driver: "json-file"
options:
max-size: "10m"
max-file: "3" - Docker Run 示例:
--log-driver json-file --log-opt max-size=10m --log-opt max-file=3
04排查建议
若发现日志增长速度异常,需排查应用程序是否存在逻辑问题,如未关闭的调试模式(DEBUG)或程序陷入死循环疯狂报错。同时,可使用以下命令定位占用空间最大的容器:
- 查找磁盘占用大户:
du -d 2 -h /var/lib/docker/containers | sort -h
当前文章无评论,是时候发表评论了