Linux服务器在持续运行过程中,系统服务、应用程序会不断生成各类日志文件,包括系统日志、服务运行日志、错误日志等。这些日志如果长期不进行管控,文件体积会不断增大,最终可能占满磁盘空间,导致服务异常、系统卡顿等问题,因此掌握日志过大的解决方法十分必要。

一、日志过大的常见原因
日志文件体积异常增长通常有以下几种常见情况:
- 应用程序出现异常,不断重复输出错误日志,导致单个日志文件快速增长
- 系统默认没有配置日志轮转策略,日志一直追加写入同一个文件不会自动切割
- 部分调试级别的日志没有关闭,大量冗余日志被持续记录
- 历史日志没有定期归档或清理,长期堆积在服务器磁盘中
二、手动清理日志的安全方法
如果需要紧急释放磁盘空间,可以先手动处理过大的日志文件,注意不要直接删除正在被进程写入的日志文件,否则可能导致进程无法继续写入日志,甚至引发服务异常。
1. 清空日志文件内容
对于正在被进程占用的日志文件,推荐使用清空内容的方式处理,而不是删除文件。可以使用以下命令:
# 清空指定日志文件内容,保留文件本身 > /var/log/nginx/access.log # 或者使用truncate命令 truncate -s 0 /var/log/nginx/access.log
2. 删除历史归档日志
对于已经轮转过的旧日志文件,比如带日期后缀的归档日志,确认不需要留存后可以直接删除:
# 删除7天前的所有.gz结尾的归档日志 find /var/log -name "*.log.gz" -mtime +7 -delete # 删除30天前的所有旧日志文件 find /var/log -name "*.log.*" -mtime +30 -delete
三、使用logrotate实现日志自动管控
logrotate是Linux系统自带的日志轮转工具,可以自动完成日志的切割、压缩、删除和归档,是长期管控日志的最佳方案。系统默认会每天执行一次logrotate任务,配置文件分为主配置和子配置两部分。
1. logrotate基础配置说明
主配置文件路径为/etc/logrotate.conf,里面定义了全局默认规则,常见的配置参数含义如下:
| 参数 | 含义 |
|---|---|
| daily | 每天轮转一次日志 |
| weekly | 每周轮转一次日志 |
| rotate 7 | 保留最近7个轮转后的日志文件 |
| compress | 轮转后的日志文件进行gzip压缩 |
| missingok | 日志文件不存在时不报错 |
| notifempty | 日志文件为空时不进行轮转 |
| create 0644 root root | 轮转后创建新的日志文件,指定权限和属主 |
| postrotate | 轮转后执行的命令,通常用于重启服务让进程重新打开日志文件 |
2. 自定义应用日志轮转配置
我们可以在/etc/logrotate.d/目录下创建自定义配置,比如为nginx日志添加轮转规则:
# 创建nginx日志轮转配置 vim /etc/logrotate.d/nginx
配置文件内容如下:
/var/log/nginx/*.log {
daily # 每天轮转一次
rotate 14 # 保留14天的日志
compress # 压缩轮转后的日志
delaycompress # 延迟压缩,最近一次轮转的日志不压缩
missingok # 日志不存在不报错
notifempty # 日志为空不轮转
create 0644 nginx nginx # 新建日志文件权限和属主
sharedscripts # 所有日志轮转后只执行一次脚本
postrotate # 轮转后执行的命令
systemctl reload nginx > /dev/null 2>&1
endscript
}
3. 测试logrotate配置
配置完成后可以手动测试规则是否生效,不会实际修改日志文件:
# 测试nginx日志轮转配置是否正确 logrotate -d /etc/logrotate.d/nginx # 强制立即执行轮转,用于验证效果 logrotate -f /etc/logrotate.d/nginx
四、日志大小监控技巧
除了定期清理和自动轮转,还可以配置日志大小监控,当日志超过阈值时及时告警,避免问题恶化。
可以使用du命令查看指定目录的日志大小:
# 查看/var/log目录下各文件大小,按大小排序 du -sh /var/log/* | sort -rh
也可以编写简单的监控脚本,结合定时任务实现每日检查:
#!/bin/bash
# 日志目录路径
LOG_DIR="/var/log"
# 告警阈值,单位GB
THRESHOLD=5
# 计算日志目录总大小,单位为GB
LOG_SIZE=$(du -sg $LOG_DIR | awk '{print $1}')
# 判断大小是否超过阈值
if [ $LOG_SIZE -gt $THRESHOLD ]; then
echo "警告:/var/log目录日志大小已达${LOG_SIZE}GB,超过${THRESHOLD}GB阈值,请及时清理" >> /var/log/log_monitor.log
fi
将脚本添加到crontab定时任务中,每天执行一次即可:
# 编辑定时任务 crontab -e # 添加以下内容,每天凌晨2点执行监控脚本 0 2 * * * /bin/bash /root/log_monitor.sh
五、注意事项
- 清理日志前一定要确认日志内容是否还需要留存,重要业务的日志建议先备份再清理
- 不要直接删除正在被进程写入的日志文件,尽量使用清空内容的方式处理
- logrotate的postrotate脚本要根据服务类型调整,确保服务能重新打开新的日志文件
- 对于容器化部署的应用,日志管控需要结合容器平台的日志驱动配置,避免容器日志占满宿主机磁盘