我需要监控在 kubernetes 集群上运行的容器内存使用情况。看了一些文章后有两个建议：“container_memory_rss”、“container_memory_working_set_bytes”
两个指标的定义都说了（来自 cAdvisor 代码）
我认为这两个指标都代表进程使用的物理内存的字节大小。但是我的 grafana 仪表板中的两个值之间存在一些差异。
我的问题是：
【问题讨论】：
标签： kubernetes memory containers monitoring
你是对的。我将尝试更详细地解决您的问题。
两个指标有什么区别？
container_memory_rss 等于来自/sys/fs/cgroups/memory/memory.status 文件的total_rss 的值：
// The amount of anonymous and swap cache memory (includes transparent
// hugepages).
// Units: Bytes.
RSS uint64 `json:"rss"`
匿名和交换缓存内存的总量（包括透明大页），它等于memory.status文件中total_rss的值。这不应与真正的 resident set size 或 cgroup 使用的物理内存量相混淆。 rss + file_mapped 将为您提供 cgroup 的常驻集大小。它不包括被换出的内存。只要这些库中的页面实际上在内存中，它就包含来自共享库的内存。它确实包括所有堆栈和堆内存。
container_memory_working_set_bytes（正如 Olesya 已经提到的）是total usage - inactive file。这是对无法驱逐多少内存的估计：
// The amount of working set memory, this includes recently accessed memory,
// dirty memory, and kernel memory. Working set is <= "usage".
// Units: Bytes.
WorkingSet uint64 `json:"working_set"`
Working Set 是此进程的工作集的当前大小（以字节为单位）。工作集是进程中的线程最近访问的内存页集。
哪些指标更适合监控内存使用情况？有帖子说 都是因为其中一个指标达到了极限，那么 容器被 oom 杀死了。
如果您的 pod 是 limiting the resource usage，那么您应该同时监控它们，因为如果它们达到特定的资源限制，它们将导致 oom-kill。
我还推荐this article，它显示了一个解释以下断言的示例：
您可能认为使用
container_memory_usage_bytes，但是，此指标还包括 缓存（想想文件系统缓存）可以在内存下驱逐的项目 压力。更好的指标是container_memory_working_set_bytes这就是OOM杀手所关注的。
编辑：
添加一些额外的来源作为补充：
【讨论】：