本篇会介绍几个目前比较常用且流行的容器监控工具，首先我们来看看Docker自带的几个监控子命令：ps、top以及stats，然后是一个功能更强的开源监控工具Weave Scope，最后我们来了解一下Google开发的容器监控工具cAdvisor。

实验环境：阿里云ECS主机，CentOS 7.4

一、Docker自带监控子命令

1.1 ps

　　想必只要我们看过一点docker的文章，就应该都知道docker ps这个命令，它使我们可以方便的查看现在正在运行的所有容器实例。

# docker ps

　　执行后效果如下图：

　　

　　其实，它等价于下面两句命令：

# docker container ps
# docker container ls

1.2 top

　　如果我们想要了解某个容器中到底运行了哪些进程，可以通过top命令来查询。

# docker top container_name

　　这里假设我们想查询exceptionless_api这个容器中运行了哪些进程，通过以下命令查询：

# docker top exceptionless_api_1

　　

　　可以看到，在exceptionless_api_1这个容器中只运行了一个进程，该进程是一个.NET Core应用程序，其命令为：dotnet Exceptionless.Web.dll。

　　如果想要看到更多信息比如状态、启动时间等等，可以加上-au：（当然可以参阅Linux ps命令的参数加上更多参数显示特定信息）

# docker top exceptionless_api_1 -au

　　

　　从上图可以看到，该进程对于CPU和内存的占用量。

1.3 stats

　　如果我们想要查询每个容器对于各种资源的使用情况，那么可以直接使用docker stats，这是一个强大的命令，默认会显示一个实时变化的列表，以显示每个容器实例的CPU使用率、内存使用量以及可用量等等。

　　

Note：可以看到上图中内存的Limit都是3.7G，这是因为在容器启动时没有特别指定内存Limit，所以这里都会默认显示Host主机的总内存量（这里我的阿里云ECS主机是4G的内存配置），但并不意味着每个容器都能使用到这么多的内存。因此，我们完全可以为不同的容器实例设置不同的资源限制值，我也有写一篇文章《Docker资源限制学习与验证》。

　　可以看到默认列表是基于容器ID来排列的，其实并不便于我们查看某个具体容器的资源使用情况，我们可以加上具体容器名字来定位和查看详情：

# docker stats exceptionless_api_1

　　

二、强大监控工具Weave Scope

2.1 安装与运行Weave Scope

　　Weave Scope 是 Docker 和 Kubernetes 可视化监控工具。Scope 提供了至上而下的集群基础设施和应用的完整视图，用户可以轻松对分布式的容器化应用进行实时监控和问题诊断。

　　Weave Scope的GitHub地址为：https://github.com/weaveworks/scope

　　我们可以通过以下脚本安装运行Weave Scope：

# curl -L git.io/scope -o /usr/local/bin/scope
# chmod a+x /usr/local/bin/scope
# scope lanuch

　　

　　看到上图中的提示信息，代表你已经成功启动了Weave Scope。

2.2 监控容器

　　Weave Scope默认的端口号绑定的是4040，因此我们可以直接访问http://[Host IP]:4040就可以看到如下图所示的界面：

　　

　　从上图中可以看到，目前我的Host中有哪些容器实例，他们之间的关联是什么样的。比如这里我有一个Exceptionless的容器实例群，包括UI、API、Job、ElasticSearch、Kibna以及Redis。其中UI和其他容器没有关联关系，而API、Job、Kibna以及Redis都互有联系。

　　此外，Weave Scope还有自己的容器，因为我们的Weave Scope也是容器运行的，点击筛选“System containers”就会显示Weave自己的容器了：

　　

　　默认情况下，Weave提供了CPU占用率和内存使用量这两个关键指标的监控，我们可以选择不同的指标进行查看：

　　比如这里我选中Memory，Weave会采用水位高低的显示方式来展示内存使用量；同理，CPU占用率也是一样。

　　

　　如果想查看某个容器的详细信息，可以单击该容器的图标，这里我们点击exceptionless_elasticsearch这个容器，可以看到如下图所示的详细信息：

　　

　　从上图可以看到详情主要包括两个部分：

　　（1）Status：CPU、内存实时占用率以及历史曲线（注意CPU和内存那条线不一定都是直的，是曲线哟）；

　　（2）Info：容器镜像名称、启动命令、网络、状态等信息；

　　滚动下拉还可以看到如下图所示的信息：

　　

　　从上图可以看到容器中正在运行的进程及其资源占用情况。点开Image，还会看到更详细的镜像信息。

　　此外，我们还看到了容器详情上面有一排按钮，可以支持我们对容器进行操作，从而不再需要去记住那些docker attach等命令。

　　

　　第一个图标是attach，点击可以attach容器的启动进程，等价于：docker attach。

　　 第二个图标是打开shell，点击可以进入容器中，等价于：docker exec。

　　后面三个代表restart重启容器，pause暂停容器 及 stop停止容器。

　　比如我点击第二个图标，即可进入该容器中可以进行shell命令输入了：

　　

2.3 监控Host主机

　　除了监控容器之外，Weave Scope还支持监控容器所在的Host。当我们单击顶部菜单中的“Hosts”选项，即可显示当前Host的信息：

　　

　　可以看到，我目前就只有一台阿里云ECS主机Host。

　　同理，单击该Host图标也会显示其详细信息：

　　

　　从图中可以看到，Host的实时资源使用情况和历史曲线我们都能够清晰的看到，滚动下拉条还可以看到Host上运行的进程和容器列表，如下图所示：

　　

　　单击某个容器链接，就可以看到该容器的详细监控信息了，很方便。

　　此外，对于Host也提供了单击进入Shell的按钮，可以方便地打开Shell窗口做远程管理：

　　

2.4 监控多个Host主机

　　实际环境中，我们会有多个Host，每个Host都会部署多个容器，那么如何让多个Host作为一个集群被监控呢？

　　假设我们有两个Host，只需要在这两个Host中执行以下命令进行启动即可：

# scope launch 192.168.16.150 192.168.16.151

　　这样无论访问哪个服务器的4040端口（假设没有更改默认端口）都能监控到两个Host。

　　这里我的两台阿里云ECS主机（edc-aliyun-server1 & edc-aliyun-server2）都被监控到了，棒吧！

2.5 逻辑条件定位查询

　　实际环境中我们会有很多个容器，那么如何快速查询到某个关键指标的容器呢？

　　Weave Scope还提供了逻辑条件的查询，这里我们以CPU和内存为例：

　　（1）查询内存使用量>900MB的容器实例：

　　

　　筛选出来，目前只有一个容器内存使用超过了900mb。

　　（2）查询CPU占用率>1%的容器实例：

　　

　　筛选出来，也只有一个（当然也跟我实验环境容器实例并不多有关）。

三、Google开发的容器监控工具cAdvisor

　　为了解决容器的监控问题，Google开发了一款容器监控工具cAdvisor（_Container Advisor_），它为容器用户提供了对其运行容器的资源使用和性能特征的直观展示。 它是一个运行守护程序，用于收集，聚合，处理和导出有关正在运行的容器的信息。

　　cAdvisor可以对节点机器上的资源及容器进行实时监控和性能数据采集，包括CPU使用情况、内存使用情况、网络吞吐量及文件系统使用情况。

　　cAdvisor使用go语言开发，如果想了解更多请访问其官方github：https://github.com/google/cadvisor

3.1 安装与运行cAdvisor

　　cAdvisor 有两种方法来运行，一种是以二进制可执行文件安装运行，另一种是以 Docker 容器运行。这里我们主要介绍第二种以Docker方式安装运行。

　　我们可以通过以下命令来在实验环境的云服务器中运行cAdvisor容器：

docker run \
  --volume=/:/rootfs:ro \
  --volume=/var/run:/var/run:rw \
  --volume=/sys:/sys:ro \
  --volume=/var/lib/docker/:/var/lib/docker:ro \
  --volume=/dev/disk/:/dev/disk:ro \
  --publish=8080:8080 \
  --detach=true \
  --name=cadvisor \
  google/cadvisor:latest

　　执行之后你会看到以下提示信息：

　　

　　看到以上信息代表我们以docker方式运行成功，我们可以通过 http://[Your Host IP]:8080（默认是8080端口）来访问cAdvisor。看到以下界面，代表我们的安装工作完成。

　　

3.2 使用cAdvisor

3.2.1 监控容器

　　cAdvisor提供了对Host和容器的监控，单击“Docker Containers”链接：

　　

　　我们即可进入容器监控列表

　　

　　单击其中某个容器例如exceptionless_api_1，即可进入该容器实例的监控页面（前方长图，注意流量）：

　　

　　我们可以清楚地看到：CPU、内存、网络、文件系统的动态使用情况。

3.2.2 监控Host

　　除了监控容器之外，cAdvisor也提供了对Host的监控。退出Docker Containers，我们在首页就可以看到如下图所示的Host动态性能数据：

　　

　　同样，我们也能清楚地看到CPU、内存、网络、文件系统等资源的动态使用情况以及历史数据的变化。

四、小结

　　本文简单介绍了几个容器监控工具的基本安装与使用。Docker自带子命令虽然简单，但是补贴金实际管理场景。Weave Scope和cAdvisor提供了良好的使用体验。

但是，cAdvisor的缺点是它的操作界面比较简陋，而且需要多个页面来回跳转，其易用性看起来不如Weave Scope。更为重要的是，它不能监控多个Host，而Weave Scope至少还可以监控多个Host。那么，为何我们还要学习它呢？因为cAdvisor有一个亮点之处就在于它可以将其监控数据导出给第三方工具，而这个第三方工具就可以是我们下一篇将要学习的Prometheus，Prometheus会对这些监控数据做进一步加工处理。

　　因此，我们后续的监控结构是：Prometheus + cAdvisor + Grafana。

参考资料

Cloud Man，《每天5分钟玩转Docker容器技术》

二二向箔，《容器监控实践-cAdvisor》

Ein Verne，《使用Google出品的cAdvisor监控Docker容器》

冰冻vs西瓜，《利用WeaveScope监控容器》

sjyu_eadd，《Docker那些事儿-Docker容器监控工具》