基于Prometheus和Zabbix实现容器云平台监控方案.pdfVIP

基于Prometheus和Zabbix实现容器云平台监控方案--第1页 基于 Prometheus 和 Zabbix 实现容器 云平台整体监控方案 一、 概述 容器云成为 IT 的主要基础设施平台，以Docker 为代表的容器技术，加上以 Kubernetes 为代表的容器编排技术，是目前最流行的容器云建设方案。云平台 的特点是快速部署、弹性伸缩、动态调整、运维自动化，对应的监控也需要是 动态发现、自动化部署的。我们的项目是以 Zabbix 为基础监控工具设计和建设 的，但鉴于prometheus 对 docker 和 k8s 监控的天然集成， 我们打算引入 prometheus 和 Zabbix 结合起来，复用之前 Zabbix 上开发扩展的功能，达到可 以快速实现 、高效部署的云平台整体监控方案 。 Zabbix 是面向 IP 的监控，更适合于物理机/虚拟机环境的监控，可以通过开发 自定义脚本采集数据从而实现各类型监控，Prometheus 是面向服务和数据的监 控，适合云环境的监控，原生支持监控容器，更好的适配 k8s，且提供专业的 exporter，监控项更全面，不需要二次开发；zabbix agent 本身进程有限， agent 进程按 Server 端配置串行取值，采集的效率决定于自定义脚本的执行效 基于Prometheus和Zabbix实现容器云平台监控方案--第1页 基于Prometheus和Zabbix实现容器云平台监控方案--第2页 率，即使单个监控项采值很快，但若Host 同时存在上千个agent 类型监控项， 还是会造成大部分 agent 监控项取值延迟，需根据监控项数量调整采值间隔优 化，Prometheus 官方显示的采集速度是 10w/sec，且Prometheus 使用时序数据 库，更适用于监控数据的存储，按时间索引性能更高，所以使用 Prometheus 监 控容器或 k8s 本身的性能监控比 zabbix 实现容器或 k8s 更优。 Prometheus 监控项值仅支持数字类型，zabbix 监控项取值类型支持数字、字符 串，且zabbix 图形化界面成熟，方便查看、配置监控项，所以可以使用 zabbix 将 Prometheus 监控项和其取值接入。 对于容器内中间件和数据库的监控，zabbix 自身的Database jmx 监控方式或 应用主动推送数据不需要安装 agent，实现方便，容器内应用仅需与同k8s 集 群的容器内 zabbix proxy 能实现互相访问即可，监控项可以复用容器外应用模 板，所以仍采用 zabbix 监控容器内应用实现方案。 二 总体设计架构 基于Prometheus和Zabbix实现容器云平台监控方案--第2页 基于Prometheus和Zabbix实现容器云平台监控方案--第3页 按照容器监控的内容，我们分为 docker+K8S 基础监控和容器内应用监控两部 分来分别实现。 1， docker+K8S 基础监控的实现： 由于 prometheus 对 docker 和 k8s 监控的天然集成，通过 cAdvisor 可以直 接获取 docker 基础监控数据， 通过 kube-state-metrics 可以直接获取 K8S 的资源对象和对应监控数据 ，因此我们在每个K8S 集群上默认部署 prometheus 实现这部分监控采集， 然后通过 Zabbix Http Agent 方式调用 prometheus API 来获取数据，接入 Zabbix Server 从而复用之前建设的功 能 ，实现后续的告警阈值配置和数据接入集中监控平台。 2， 容器内应用监控的实现： 所有的应用监控我们都通过 Zabbix 实现， 这里的 “ 应用 ”可以是数据库、