Kubernetes监控之Heapster介绍

LeviDing 发布于2019-07-01 16:29 / 1696人阅读

摘要：在每个上都会运行，它会收集本机以及容器的监控数据。使用这里主要介绍的使用，及可获取的。参考资料文档文档及可用在官方文档中都介绍的比较齐全。我们没有采用该方式，是考虑到如果和监控系统相互依赖，会导致异常之后，存在监控系统无法使用的隐患。

什么是Heapster？

Heapster是容器集群监控和性能分析工具，天然的支持Kubernetes和CoreOS。
Kubernetes有个出名的监控agent---cAdvisor。在每个kubernetes Node上都会运行cAdvisor，它会收集本机以及容器的监控数据(cpu,memory,filesystem,network,uptime)。
在较新的版本中，K8S已经将cAdvisor功能集成到kubelet组件中。每个Node节点可以直接进行web访问。

cAdvisor web界面访问： http://< Node-IP >:4194
cAdvisor也提供Restful API: https://github.com/google/cad...

Heapster是一个收集者，将每个Node上的cAdvisor的数据进行汇总，然后导到第三方工具(如InfluxDB)。

框架图：

Heapster首先从K8S Master获取集群中所有Node的信息，然后通过这些Node上的kubelet获取有用数据，而kubelet本身的数据则是从cAdvisor得到。所有获取到的数据都被推到Heapster配置的后端存储中，并还支持数据的可视化。现在后端存储 + 可视化的方法，如InfluxDB + grafana。

Heapster使用

这里主要介绍Heapster的API使用，及可获取的Metrics。
参考资料：
API文档： https://github.com/kubernetes...
Metrics: https://github.com/kubernetes...

API文档及可用Metrics在官方文档中都介绍的比较齐全。下面用几条测试命令来解释API使用：

# 获取cluster支持的metrics
# curl -L http://:8082/api/v1/model/metrics

# 列出Nodes支持的metrics
# curl -L http://:8082/api/v1/model/nodes/metrics

# 查看对应Pod的cpu使用率
# curl -L http://:8082/api/v1/model/namespaces//pods//metrics/cpu-usage

Heapster系统部署

我们采用Heapster以InfluxDB作为数据存储后端，再配合Grafana的前端进行数据可视化的系统监控方案，进行部署。

镜像制作：

Heapster的版本：v0.19.0

没有采用最新的Heapster版本，是因为我们使用的Kubernets版本为较旧的v1.0.3，较新的Heapster版本不兼容该K8S版本。

Heapster镜像：
进入heapster-0.19.0//deploy/docker,使用build.sh进行镜像制作。该脚本会依赖go环境进行heapster源码编译，所以需要提前安装go环境(go和godep的安装)。

InfluxDB和Grafana镜像：
这两个镜像的Dockerfile分别在根目录下的对应文件中，只需查看Makefile进行对应的命令编译制作镜像即可。Dockerfile会依赖一些基础镜像，最好提前下载好。

容器的运行

Heapster容器的运行可以依赖Kubernetes进行部署，也可以多带带使用docker命令进行部署。

Kubernetes部署：
直接依赖heapster-0.19.0/deploy/kube-config/influxdb/目录下的yaml文件，
使用kubectl create -f heapster-0.19.0/deploy/kube-config/influxdb/命令进行部署。

我们没有采用该方式，是考虑到如果K8S和监控系统相互依赖，会导致K8S异常之后，存在监控系统无法使用的隐患。
但是直接使用多带带的容器进行部署，也需要考虑到监控容器异常退出了，谁来维护重启？
需要进行权衡？
还需要注意一点：Heapster会使用内存进行数据缓存，容易撑爆内存，导致容器OOM

Docker命令部署：
使用docker命令进行部署的话，需要传入各种参数，该参数可以参考kubernetes部署使用到的yaml文件。
具体命令如下：

InfluxDB:
docker run -p 8083:8083 -p 8086:8086 --net=host -v /data heapster_influxdb:canary
注：data是数据存储目录，需要考虑数据可持久化，并且能保证容器重启不影响数据。

Grafana:
docker run -p 3000:3000 --net=host -e INFLUXDB_SERVICE_URL=http://:8086 -e GF_AUTH_BASIC_ENABLED="false" -e GF_AUTH_ANONYMOUS_ENABLED="true" -e GF_AUTH_ANONYMOUS_ORG_ROLE="Admin" -e GF_SERVER_ROOT_URL=/ -v /var heapster_grafana:canary

Heapster:
docker run -it -p 8082:8082 --net=host heapster:canary --source=kubernetes:http://:8080?inClusterConfig=false&useServiceAccount=false --sink=influxdb:http://:8086

Heapster命令参考相对较为重要，可以参考官方文档，具体如下：

--source: 指定数据获取源。这里我们指定kube-apiserver即可。
后缀参数：
inClusterConfig:
kubeletPort: 指定kubelet的使用端口，默认10255
kubeletHttps: 是否使用https去连接kubelets(默认：false)
apiVersion: 指定K8S的apiversion
insecure: 是否使用安全证书(默认：false)
auth: 安全认证
useServiceAccount: 是否使用K8S的安全令牌

--sink: 指定后端数据存储。这里指定influxdb数据库。
后缀参数：
user: InfluxDB用户
pw: InfluxDB密码
db: 数据库名
secure: 安全连接到InfluxDB(默认：false)
withfields：使用InfluxDB fields(默认：false)。可以参考Here

GPU云服务器云服务器 kubernetes介绍 webrtc介绍之监控易介绍云监控介绍

文章版权归作者所有，未经允许请勿转载,若此文章存在违规行为，您可以联系管理员删除。

转载请注明本文地址：https://www.ucloud.cn/yun/32532.html

Kubernetes监控之Heapster源码分析

摘要：源码版本简介是下的一个监控项目，用于进行容器集群的监控和性能分析。基本的功能及概念介绍可以回顾我之前的一篇文章监控之介绍。在源码分析之前我们先介绍的实现流程，由上图可以看出会从各个上获取相关的监控信息，然后进行汇总发送给后台数据库。源码版本 heapster version： release-1.2 简介 Heapster是Kubernetes下的一个监控项目，用于进行容器集群的监控...

gclove 2019-07-01 16:31 评论0 收藏0
Kubernetes v1.0特性解析

摘要：问题是不是定义的一个的容器集群是只部署在同一个主机上杨乐到目前是，同一个里的是部署在同一台主机的。问题这个图里的是安装在哪里的所有的客户端以及会连接这个嘛杨乐可以任意地方，只要能访问到集群，会作为的出口。 kubernetes1.0刚刚发布，开源社区400多位贡献者一年的努力，多达14000多次的代码提交，最终达到了之前预计的milestone, 并意味着这个开源容器编排系统可以正式在...

HackerShell 2019-07-01 16:19 评论0 收藏0
kubernetes下heapster的部署案例

摘要：举个例子，我们在这种状态下创建一个，然后执行在中会发现有了字段，并且装载了一个是的，这个就是我们这个下的。注：本案例在我的部署环境下是可行的，但不保证在所有环境下都可行。我尽可能讲得直白而详细，因为我自己也才刚开始接触，已经做过深入研究的可以浏览，若有什么错误，烦请指正，感激不尽！我的环境： K8S1.0.0+flannel+docker1.6的分布式集群。这里先不赘述fla...

Ali_ 2019-07-01 16:18 评论0 收藏0
kubernetes下heapster的部署案例

摘要：举个例子，我们在这种状态下创建一个，然后执行在中会发现有了字段，并且装载了一个是的，这个就是我们这个下的。注：本案例在我的部署环境下是可行的，但不保证在所有环境下都可行。我尽可能讲得直白而详细，因为我自己也才刚开始接触，已经做过深入研究的可以浏览，若有什么错误，烦请指正，感激不尽！我的环境： K8S1.0.0+flannel+docker1.6的分布式集群。这里先不赘述fla...

Jinkey 2019-06-28 14:58 评论0 收藏0
容器监控实践—Metrics Server

摘要：出现后，新的监控架构将变成上图的样子核心流程黑色部分这是正常工作所需要的核心度量，从等获取度量数据，再由提供给控制器等使用。本文为容器监控实践系列文章，完整内容见概述从 v1.8 开始，资源使用情况的监控可以通过 Metrics API的形式获取，具体的组件为Metrics Server，用来替换之前的heapster，heapster从1.11开始逐渐被废弃。 Metrics-S...

libxd 2019-06-28 16:57 评论0 收藏0