docker logs 没有日志问题定位解决

link管理

链接快照平台

输入网页链接，自动生成快照
标签化管理网页链接

问题定位

首先确认了一下 Docker Container 是正常运行的，这没有问题；然后再看下应用监听的端口是否运行着：

[root@liqiang.io]# ss -anlp | grep 222
tcp    LISTEN     0      4096   127.0.0.1:2222                  *:*                   users:(("server",pid=27069,fd=10))

端口也是监听的，至少在业务上到这一步了，那么应用肯定是输出了日志的，那么问题就出在 infrature 层面了。

接着就看下 Docker 自身是否异常，先看下 docker 的日志吧：

[root@liqiang.io]# journalctl -xu docker
Journal file /var/log/journal/ae6603ff6b1849af8525fbf6688811fd/system.journal uses an unsupported feature, ignoring file.
Use SYSTEMD_LOG_LEVEL=debug journalctl --file=/var/log/journal/ae6603ff6b1849af8525fbf6688811fd/system.journal to see the details.
-- No entries --

果然一看就发现问题所在了，Docker 自身的日志就出现问题了，看上去和 journal 日志有关，然后这里好在有提示，所以可以看一下：

[root@liqiang.io]# SYSTEMD_LOG_LEVEL=debug journalctl --file=/var/log/journal/ae6603ff6b1849af8525fbf6688811fd/system.journal
Journal effective settings seal=no keyed_hash=yes compress=no compress_threshold_bytes=8B
Journal file /var/log/journal/ae6603ff6b1849af8525fbf6688811fd/system.journal uses incompatible flag xz-compressed disabled at compilation time.
Failed to open journal file /var/log/journal/ae6603ff6b1849af8525fbf6688811fd/system.journal: Protocol not supported
mmap cache statistics: 0 hit, 1 miss
Failed to open files: Protocol not supported

OK，这里问题看上去是因为我重新编译过 systemd （ CentOS7 升级 systemd 242/243 ）有关，然后看上去是我遗漏了一些压缩选项，所以我需要重新编译一下 systemd。

docker 日志配置

Docker 自己的日志出问题的原因找到了，那 container 为什么没有日志呢，于是还得看下 docker 里面的日志配置是怎样的，找了一番之后确定是这里：

[root@liqiang.io]# grep -ir log   /etc/sysconfig/docker
OPTIONS='--selinux-enabled --log-driver=journald --signature-verification=false'
# Controls the /etc/cron.daily/docker-logrotate cron job status.
# LOGROTATE=false

原来默认的 docker 日志使用的是 journal 日志，所以 journal 日志无法使用，docker 自己的日志也是无法查看。那么现在除了解决 journal 日志问题之外，还可以看下 docker 支持的其他日志 driver（ Driver 列表）。那么不妨先选择本地的日志来尝试一下。

查看文档之后发现可以不修改全局配置，而是修改单个 container 的配置也行，于是我就 run 了一个：

[root@liqiang.io]# docker run \
      --log-driver local --log-opt max-size=10m \
      alpine echo hello world
/usr/bin/docker-current: Error response from daemon: logger: no log driver named 'local' is registered.
See '/usr/bin/docker-current run --help'.

然而现实就是这么打脸，运行失败，然后再看下文档里面的详细描述，没有发现特别的说明，不过看了一下自己的 docker 版本，发现已经是非常陈旧的版本了，所以就索性升级一把，直接升级到最新的 20.10.5 版本，升级之后发现 docker 日志居然就恢复正常了。

小结

本文就差不多这样了，没有太多惊艳的东西，不过对于 docker 日志的处理确实之前没有关注太多，这次也算是涨了一把姿势。这里需要强调一下的是，官方文档中说明了，如果不设置 log 的 rotate 的话，默认是不会帮你清理日志的，所以需要自己注意。

Docker Docs：Configure logging drivers