如何使用 slack/grafana 或任何其他自动化方式重新启动 docker 容器？

Question

当我们在 slack 上收到来自 grafana 的警报时，我想重新启动使用 docker-compose 创建的 docker 容器。

指标位于我的服务器端点 url/metrics.json 上，我将其导出到 prometheus 并向 slack 发送警报。

有没有什么简单的方法可以在警报期间重新启动容器？

Answer 1

指标位于我的服务器端点 url/metrics.json 上，我将其导出到 prometheus 并向 slack 发送警报。

如果您已经在 Prometheus 中使用 Alertmanger，请使用 prometheus-am-executor：

prometheus-am-executor 是一个 HTTP 服务器，它从 Prometheus Alertmanager 接收警报并执行给定的命令，并将警报详细信息设置为环境变量。

您在alertmanager.yml 中将其配置为接收器。除了您先前存在的接收器之外，将您的警报发送到此接收器：

receivers:
- name: 'alertmanager_executor'
  webhook_configs:
  - url: 'http://alertmanager.executor:8080'

在接收器端，将其配置为在收到带有所需标签的警报时重新启动容器：

listen_address: ":8080"
commands:
 - cmd: /usr/bin/docker restart [container]
   match_labels:
     "restart_docker": true

您也可以将其配置为运行脚本，以执行其他操作：

listen_address: ":8080"
commands:
 - cmd: /usr/sbin/restart-containers.sh
   match_labels:
     "restart_docker": true

如果您已正确设置，当您的警报触发时，将运行该命令以重新启动您的 docker 容器。