【问题标题】:Logs not getting sent to AWS Cloudwatch when docker in detached or foreground当 docker 处于分离状态或前台时,日志未发送到 AWS Cloudwatch
【发布时间】:2020-06-04 09:52:49
【问题描述】:

当我以交互模式运行 docker 脚本时,它可以工作。我可以在控制台和 AWS CloudWatch Logs 中看到日志。下面的 docker 脚本以交互模式运行,我添加了 awslogs 配置,因此日志进入 cloudwatch。 docker awslogs configuration

docker run --rm -i -t  --log-driver awslogs \
    --log-opt awslogs-region=us-east-1 \
    --log-opt awslogs-group=falcoint \
    --log-opt awslogs-create-group=true \
    --privileged \
    -v /dev:/host/dev \
    -v /proc:/host/proc:ro \
    -v /boot:/host/boot:ro \
    -v /lib/modules:/host/lib/modules:ro \
    -v /usr:/host/usr:ro \
    -v /etc:/host/etc:ro \
    falcosecurity/falco:latest

但是一旦我在 -d 分离模式下运行,所有日志都不会进入 aws cloudwatch

docker run --rm -d --log-driver awslogs \
    --log-opt awslogs-region=us-east-1 \
    --log-opt awslogs-group=falcoint \
    --log-opt awslogs-create-group=true \
    --privileged \
    -v /dev:/host/dev \
    -v /proc:/host/proc:ro \
    -v /boot:/host/boot:ro \
    -v /lib/modules:/host/lib/modules:ro \
    -v /usr:/host/usr:ro \
    -v /etc:/host/etc:ro \
    falcosecurity/falco:latest

当我在前台模式下运行相同的脚本时,即没有 -it 或 -d 时,也没有日志发送到 cloudwatch。但是当 falco docker 停止时,所有的数据都会被缓冲和发送。

docker run --rm --log-driver awslogs \
    --log-opt awslogs-region=us-east-1 \
    --log-opt awslogs-group=falcoint \
    --log-opt awslogs-create-group=true \
    --privileged \
    -v /dev:/host/dev \
    -v /proc:/host/proc:ro \
    -v /boot:/host/boot:ro \
    -v /lib/modules:/host/lib/modules:ro \
    -v /usr:/host/usr:ro \
    -v /etc:/host/etc:ro \
    falcosecurity/falco:latest

当 falco docker 停止时,它会将以下内容转储到日志中。理想情况下,带有“错误文件在下面创建...”的日志应该已经到达 CloudWatch Logs,而无需停止容器。

2020-06-04T02:33:44+0000: SIGINT received, exiting...
Syscall event drop monitoring:
   - event drop detected: 0 occurrences
   - num times actions taken: 0
2020-06-04T02:32:32.495581404+0000: Notice A shell was spawned in a container with an attached terminal (user=root <NA> (id=01ca7b2306b5) shell=sh parent=runc cmdline=sh terminal=34816 container_id=01ca7b2306b5 image=<NA>)
2020-06-04T02:33:00.014981252+0000: Error File created below /dev by untrusted program (user=root command=touch /dev/rootkit2 file=/dev/rootkit2 container_id=01ca7b2306b5 image=<NA>)
2020-06-04T02:33:30.226554205+0000: Error File created below /dev by untrusted program (user=root command=touch /dev/rootkit3 file=/dev/rootkit3 container_id=01ca7b2306b5 image=<NA>)
Events detected: 3
Rule counts by severity:
   ERROR: 2
   NOTICE: 1
Triggered rules by rule name:
   Terminal shell in container: 1
   Create files below dev: 2

要重现问题,请运行上述之一并运行另一个终端

docker run -it node:8-alpine sh

然后登录容器并运行

touch /dev/rootkit

更新:

我注意到,当我使用 -d -t 日志运行 docker 以转到 aws Cloudwatch 日志时。知道为什么会这样吗?

【问题讨论】:

    标签: docker amazon-cloudwatch falco


    【解决方案1】:

    默认情况下,Docker 使用 json-file 驱动程序,它将 JSON 格式的日志写入容器运行所在主机上的容器特定文件。 参考这个docker logging

    提供 -t 选项分配伪 tty,docker 的主进程通过该伪 tty 将日志输出到虚拟终端。 aws log-driver 会寻找 tty 来捕获日志。 看看这个how -t option works,并在这篇文章中专门回答第 3 个问题。

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 2020-01-25
      • 2022-01-19
      • 2020-02-27
      • 2018-03-10
      • 2020-10-23
      • 2018-06-27
      • 2021-09-03
      相关资源
      最近更新 更多