Linux 日志重启后全没了?journald 持久化、容量限制与历史记录排查

服务器重启后,journalctl 只剩本次启动记录,可以先核对查询权限、日志目录和 journald 存储模式。本文说明 volatile、persistent 与 auto 的区别,给出独立配置片段、容量和保留时间示例,并通过测试标记与维护重启验证保存效果,同时说明历史日志已丢失时的查找方向和恢复边界。
Linux 日志重启后全没了?journald 持久化、容量限制与历史记录排查

服务器异常重启后,想查关机前最后几分钟的记录,journalctl 却只显示本次启动。常见原因是日志一直保存在 /run 下,重启后随临时文件系统一起消失。也可能已经启用了磁盘存储,但旧日志被容量策略清理,或者当前账号看不到系统日志。

这篇文章按“确认能看到什么、核对存储位置、开启持久化、验证重启后仍可查询”的顺序处理。示例面向采用 systemd-journald 的 Linux 主机,命令需结合发行版和本机 systemd 版本使用;容器内部未运行 systemd 时不适用。文中配置用于说明,没有在读者的生产环境执行。

先确认丢失的是哪一段日志

用有权限的账号查看系统日志,排除普通用户权限造成的误判:

sudo journalctl --list-boots
sudo journalctl -b -1 -n 100 --no-pager
sudo journalctl --disk-usage

第一条列出的启动记录来自现存 journal 文件,无法代替完整的开关机历史。第二条查看上一次有记录的启动;如果没有对应数据,命令会提示找不到。第三条统计当前可读取 journal 文件的空间占用,包含活动文件和归档文件。[1]

再核对查询条件。只执行 journalctl -b,范围就是本次启动;加了 -u nginx.service,看到的也只有这个服务。排查时先用不带服务筛选的启动列表,再缩小到具体服务和时间。系统时间调整、时区理解错误,也可能让记录看起来落在了错误时段。

看到的现象 优先核对
只有本次启动,/var 下也没有 journal 是否使用运行时存储
以 sudo 查询才看到历史 日志读取权限
有多次启动,但更早的记录缺失 容量、保留时间和人工清理
其他服务有记录,某个应用一直没有 应用实际输出位置、服务配置
磁盘目录存在,重启后仍只剩当前记录 写入失败、挂载情况、清理任务

应用自行写入的 access.log、数据库日志和容器日志,未必会进入 journald。journalctl 没找到记录时,还需要查应用配置,不能直接认定所有日志都丢了。

分清 /run 与 /var 下的存储

journald 的 Storage 选项决定日志保存方式:[2]

  • volatile:写入 /run/log/journal,通常随重启消失。
  • persistent:优先写入 /var/log/journal;启动早期或磁盘无法写入时仍可能暂用 /run。
  • auto:根据 /var/log/journal 是否存在决定是否使用持久存储。
  • none:不保存在本地 journal 文件中;已经配置的其他转发方式仍可能生效。

不要把某个教程里的默认值当成本机事实。systemd 版本、编译选项和发行版配置都可能改变默认行为。新版本文档与旧发行版的实际默认值也可能不同。

先检查目录、磁盘和服务状态:

sudo ls -ld /run/log/journal /var/log/journal
df -h /var/log
sudo systemctl status systemd-journald.service --no-pager
sudo journalctl -u systemd-journald.service -b -n 100 --no-pager

某个目录不存在可以作为线索,但目录存在并不证明日志正在持续写入。需要结合文件更新时间、journald 的错误记录,以及后面的跨重启验收判断。

支持该命令的系统还可以查看配置来源:

systemd-analyze cat-config systemd/journald.conf

这会展示配置文件及片段,不是所有运行时状态的完整快照。旧版本若不支持,请查本机 man journald.conf,核对主文件和 journald.conf.d 片段的优先级。仅查看主文件中被注释的 Storage 行,容易漏掉发行版或管理员的覆盖配置。

用独立配置片段开启持久化

变更前保存当前配置副本,检查 /var 所在分区是否可写、是否有足够空间。如果目标片段已经存在,应先备份并合并内容,避免覆盖原有策略。

下面以新建 /etc/systemd/journald.conf.d/60-retention.conf 为例:

sudo install -d /etc/systemd/journald.conf.d
sudoedit /etc/systemd/journald.conf.d/60-retention.conf

写入以下示例配置:

[Journal]
Storage=persistent
SystemMaxUse=512M
SystemKeepFree=1G
RuntimeMaxUse=64M
MaxRetentionSec=14day

512M、1G、64M 和 14 天都需要按日志产量与磁盘容量调整。SystemMaxUse 限制磁盘 journal 的使用量,SystemKeepFree 要求为其他用途保留空间,RuntimeMaxUse 约束 /run 中的运行时日志。MaxRetentionSec 是按时间清理的上限,不能保证一定保留满 14 天;容量限制可能更早触发删除。[2]

配置片段后面还可能有优先级更高的覆盖项。保存后重新核对配置来源,再让 journald 读取变更:

sudo systemctl restart systemd-journald.service
sudo journalctl --flush

systemd 文档说明,直接 restart 能保留服务标准输出相关的日志流连接;将 stop 和 start 分开执行可能断开这些连接,不宜用来代替 restart。[3] 生产环境仍应安排合适的变更时段,并检查重启命令退出状态和服务状态。

启用持久化后,–flush 会请求把尚在 /run 中的当前运行期日志转到 /var。系统启动时通常也由 systemd-journal-flush.service 执行这项操作。[1][2] 如果 /var 只读、空间不足或权限异常,开启 persistent 并不能绕过这些故障。

不需要把整个 /var/log 递归改成全员可写。出现权限问题时应按发行版目录规则修复,并核对 systemd-tmpfiles 配置,避免用宽泛权限掩盖错误。

用测试标记验证,重启留到维护窗口

先写一条不含敏感信息的标记,并请求同步:

sudo systemd-cat -t journal-retention-check echo "retention-check-20261118"
sudo journalctl --sync
sudo journalctl -t journal-retention-check -n 10 --no-pager

systemd-cat 把命令输出送入 journal,标签便于后续查找。[4] 这能确认当前日志采集通路,尚不能证明跨重启保留已经成功。还应确认 /var/log/journal 中出现本机的日志文件,并检查 journald 有没有写入失败记录。

在已经安排好的维护重启之后,再执行:

sudo journalctl --list-boots
sudo journalctl -b -1 -t journal-retention-check --no-pager

如果期间重启过多次,应从启动列表选择准确的 boot ID 查询。不要为了验证一项日志配置临时重启业务主机。持续收集几天后,还需检查日志增速和最早记录的时间,确认容量策略满足实际排查需要。

已经清掉的历史记录,开启持久化也补不回来

如果上一次启动的日志只存在于 /run,并且主机已经重启,当前启用 persistent 只能改变后续保存行为。–flush 迁移的是当前仍存在的运行时数据,无法重新生成消失的旧记录。

此时可以查已经部署的 rsyslog 文件、集中日志平台、应用自身日志,以及云平台已有的串口或控制台记录。磁盘快照或备份只有在当时覆盖到对应持久化文件时才可能有用;普通磁盘快照不能当作 /run 中内存日志的备份。

如果之前启用过持久化,却发现较早记录缺失,还要检查日志管理脚本、自动清理、镜像初始化流程和主机标识变化。不要在证据尚未导出时执行 vacuum。

journalctl 的 –vacuum-size、–vacuum-time 等选项会清理归档文件,不会直接删除当前活动文件。–disk-usage 同时统计活动与归档文件,所以清理后的占用未必低于指定值。[1] 磁盘还剩很多,也不代表 journal 会一直保留历史,journald 有独立的容量和时间约束。

配置回滚与后续保留

出现异常时,恢复修改前的配置片段;如果片段是本次新建,可以仅移走这个文件,再 restart journald,并检查状态和新日志采集情况。配置回滚不会恢复已经被容量策略删除的历史文件。

持久化解决的是主机重启后还能查看本地日志。需要抵抗主机损坏、整机删除,或需要跨机器检索时,还应部署独立的日志收集端,明确保留周期、访问权限和敏感字段处理。首次接入后要验证断网积压、恢复传输和旧记录检索,避免到故障发生时才发现远端没有收到。

官方参考资料

资料核验日期:2026 年 11 月 18 日。在线文档可能面向较新版本,实际参数以本机手册为准。

  1. systemd:journalctl——启动查询、flush、sync、空间统计和 vacuum。
  2. systemd:journald.conf——存储模式、配置优先级、容量和保留时间。
  3. systemd:systemd-journald.service——日志流与服务重启行为。
  4. systemd:systemd-cat——向 journal 提交命令输出。
Linux运维

Linux 磁盘没满,网站却越跑越慢?iostat、I/O 等待与云盘性能排查

2026-11-16 10:34:22

网站安全

服务器安全的新范式:从“打补丁”到“收敛攻击面”,如何构建黑客无从下手的系统?

2026-1-16 13:39:06