首页/运维/正文

轻量日志集中与检索方案

不一定要上大平台,先把采集、轮转和检索做到可用。

运维自建服务可靠性2025-10-16约 1 分钟361 字

日志分散在各个容器和系统目录里,排查问题时最耗时的是“找到那条日志”。轻量方案不需要很复杂,先把三件事做好。

采集

统一收集到一台机器,按服务和日期分目录。容器日志用日志驱动或挂载目录,避免重启即丢。

bash
# 宿主机 journald 持久化
mkdir -p /var/log/journal
sed -i 's/#Storage=auto/Storage=persistent/' /etc/systemd/journald.conf
systemctl restart systemd-journald

轮转

按大小和时间双维度轮转,保留 7 到 14 天。磁盘被日志吃满是很常见的事故。

text
/var/log/app/*.log {
  daily
  rotate 14
  maxsize 200M
  compress
  delaycompress
  missingok
  notifempty
  copytruncate
}

copytruncate 适合不支持重新打开文件句柄的程序;支持的用 create + 信号更稳妥。

检索

量不大时,固定时间范围加 grep 就够:

bash
journalctl -u nginx --since "2026-03-01 08:00" --until "2026-03-01 10:00" -g "upstream"
grep -F "2026-03-01T09:" /var/log/app/app.log | grep -F "timeout"

用 -F 避免正则元字符误匹配,用固定时间前缀先缩小范围。

什么时候需要索引

当日志超过每天几百 MB、或者需要按字段聚合时,再考虑 Loki 或 Elasticsearch。提前上重型平台,维护成本会超过收益。

日志里别写敏感信息

请求头、Cookie、手机号、令牌不要整条落盘。需要排查时记录哈希或后四位即可,否则日志本身就成了泄漏源。

结构化一点

应用日志尽量带时间戳、级别、请求 ID。三样齐全,跨服务串一条请求链路会容易很多。

小结

先保证日志不丢、能找到、磁盘不爆,再谈可视化和告警。

说明:文中的地址、域名、主机名与账号均为脱敏示例;配置片段来自实际环境,但版本与网络条件不同,照搬前请先在测试环境验证。最后校对:2025-10-16。