docker容器内linux内存,Docker和容器内进程内存计算差别

生产环境上了大规模容器集群后，肯定需要对容器进行监控，容器的编排我们采用了Kubernetes，监控前期采用了Weave Scope，后期采用了cAdvisor+Heapster+InfluxDB的方案，刚开始监控感觉并没有什么异常，但是集群运行久了之后，发现监控的指标和预想的并不一样。

我们有对应的Java应用跑在容器中，每个Container的资源限制了4C16G(看起来和虚机一样夸张)，JVM设置了Xmx2G的限制，但是发现有些容器的内存使用率一直在16G左，完全没有释放出来。Weave Scope和Heapster监控采集到的指标都是一样的，但是实际登录容器后发现JVM才用了800M不到。Weave Scope上其实可看到container和container内process的内存消耗，这个和实际登录容器看到的是一样的结果，如下图(剩余的那些sleep等进程其实占内存很少，忽略不计)

我们可以用docker stats查看对应容器的资源消耗，看到内存使用率在16G左，如下图