Docker 进阶篇-CIG 重量级监控系统

news/2024/9/19 10:57:38/文章来源:https://www.cnblogs.com/PeterJXL/p/18416909

上一篇讲的是轻量级的监控工具,本文就来讲重量级的: CAdvisor + InfluxDB + Granfana,简称 CIG。

docker stats

原生的 Docker 命令中,stats 可以查看每个容器占用的 CPU,内存,网络流量等情况:

CONTAINER ID  NAME       CPU %    MEM USAGE / LIMIT    MEM %    NET I/O           BLOCK I/O     PIDS
f9480daf14c6  mynginx    0.00%    1.445MiB / 3.701GiB  0.04%    2.55kB / 2.43kB   0B / 15.9kB   2
b31770c6aef2  wonderful  0.00%    2.164MiB / 3.701GiB  0.06%    830B / 0B         9.97MB / 0B   2
740c27663f2c  portainer  0.00%    13.36MiB / 3.701GiB  0.35%    687kB / 16.6MB    0B / 5.76MB   7

stats 统计结果只能是当前宿主机的全部容器,数据是实时的,不会存储、也没有健康指标过线预警等功能。

CIG 是什么

每个技术的作用:

  • CAdvisor:监控收集
  • InfluxDB:存储数据
  • Granfana:展示图表

示意图:

CAdvisor

一个容器资源监控工具,包括容器的内存,CPU,网络 IO,磁盘 IO 等监控,同时提供了一个 WEB 页面用于查看容器的实时运行状态。CAdvisor 默认存储 2 分钟的数据,而且只是针对单物理机。

不过,CAdvisor 提供了很多数据集成接口,支持 InfluxDB,Redis,Kafka,Elasticsearch 等集成,可以加上对应配置将监控数据发往这些数据库存储起来。

CAdvisor 功能主要有两点:

  • 展示 Host 和容器两个层次的监控数据。
  • 展示历史变化数据。

InfluxDB

InfluxDB 是用 Go 语言编写的一个开源分布式时序、事件和指标数据库,无需外部依赖。

CAdvisor 默认只在本机保存最近 2 分钟的数据,为了持久化存储数据和统一收集展示监控数据,需要将数据存储到 InfluxDB 中。InfluxDB 是一个时序数据库,专门用于存储时序相关数据,很适合存储 CAdvisor 的数据。而且,CAdvisor 本身已经提供了 InfluxDB 的集成方法,启动容器时指定配置即可。

InfluxDB 主要功能:

  • 基于时间序列,支持与时间有关的相关函数(如最大、最小、求和等);
  • 可度量性:你可以实时对大量数据进行计算;
  • 基于事件:它支持任意的事件数据

Granfana

Grafana 是一个开源的数据监控分析可视化平台,支持多种数据源配置(InfluxDB,MySQL,Elasticsearch,OpenTSDB,Graphite 等)和丰富的插件及模板功能,支持图表权限控制和报警。

Grafan 主要特性:

  • 灵活丰富的图形化选项
  • 可以混合多种风格
  • 支持白天和夜间模式
  • 多个数据源

使用 compose 一键搭建监控平台

我们使用 compose,一键启动 cadvisor,influxdb 以及 grafana。当然也可以逐个启动,不过既然我们学了 compose,就用起来。

编写 /mydocker/cig/docker-compose.yml:

version: '3.1'volumes:grafana_data: {}services:influxdb:image: tutum/influxdb:0.9restart: alwaysenvironment:- PRE_CREATE_DB=cadvisorports:- "8083:8083"- "8086:8086"volumes:- ./data/influxdb:/datacadvisor:image: google/cadvisorlinks:- influxdb:influxsrvcommand: -storage_driver=influxdb -storage_driver_db=cadvisor -storage_driver_host=influxsrv:8086restart: alwaysports:- "8080:8080"volumes:- /:/rootfs:ro- /var/run:/var/run:rw- /sys:/sys:ro- /var/lib/docker/:/var/lib/docker:rografana:user: "104"image: grafana/grafanarestart: alwayslinks:- influxdb:influxsrvports:- "3000:3000"volumes:- grafana_data:/var/lib/grafanaenvironment:- HTTP_USER=admin- HTTP_PASS=admin- INFLUXDB_HOST=influxsrv- INFLUXDB_PORT=8086- INFLUXDB_NAME=cadvisor- INFLUXDB_USER=root- INFLUXDB_PASS=root

说明:

  • 第 11 行 PRE_CREATE_DB=cadvisor​,预先创建一个数据库,用来存储数据。有点类似我们之前微服务实战中创建的数据库 db2021
  • 第 20 行:links​,配置的是 influxdb​,相当于 CAdvisor 集成​ influxdb
  • 第 22 行:配置 CAdvisor ​使用的驱动(类似 JDBC 驱动类型)

然后检查下配置文件有没错:

docker compose config -q

然后启动(注意要用到 8080 端口,因此如果有 Tomcat 监听了该端口,得先关闭。启动完记得用 ps 检查下):

docker compose up -d

测试

然后我们访问并测试:

  • 浏览 cAdvisor 收集服务,http://ip:8080
  • 浏览 influxdb 存储服务,http://ip:8083
  • 浏览 grafana 展现服务, http://ip:3080

cAdvisor 第一次访问慢,要等一下;cadvisor 也有基础的图形展现功能,这里主要用它来作数据采集

influxdb:可以做一些查询工作,例如展现数据库:

8083 是 web 端口,后台监听的是 8086 端口

选中 query templates,在输入框回车,即可看到查询结果,有我们之前定义的 cadvisor:

访问 grafana,默认帐户密码为 admin/admin,首次登录后需要改密。

登录后,我们给 grafana 配置数据源:

grafana 支持很多数据库,这里我们选择 InfluxDB

然后我们配置名字和网址:

数据库名以及用户密码,然后测试,成功的话会出现“Data Source is working”:

​​

接下来我们配置新的面板:

​​

然后选择面板的形状(例如柱状图,圆饼图等,这里我们选择经典的 graph):

然后下方有详细的配置,这里我们随便配置下名字和描述,然后保存:

然后图形化界面就好了,但是没有数据:

没有数据是因为还没配置要监控什么内容。我们选择编辑:

在下方可以添加监控指标,例如监控 CPU,监控内存等;

这里我们写一个监控 CPU 的:指标选择 CPU 使用情况,然后根据容器名字来查询,容器名字为 cig-cadvisor-1,然后下面可以起个别名:

配置完后在右上方选择保存,并回退到刚刚的面板,可以看到有数据了:

该图形化界面功能还是很多的,多点点就会了,或者看官网文档来配置。

(完)

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.hqwc.cn/news/798515.html

如若内容造成侵权/违法违规/事实不符,请联系编程知识网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

macOS Sequoia 15 发布,iPhone 镜像、密码应用程序、窗口平铺更新等带来全新体验

macOS Sequoia 15 发布,iPhone 镜像、密码应用程序、窗口平铺更新等带来全新体验macOS Sequoia 15 发布,iPhone 镜像、密码应用程序、窗口平铺更新等带来全新体验 2024 年 9 月 17 日凌晨 1 点 请访问原文链接:https://sysin.org/blog/macOS-Sequoia/,查看最新版。原创作品…

基于Java+Springboot+Vue开发的大学竞赛报名管理系统

项目简介该项目是基于Java+Springboot+Vue开发的大学竞赛报名管理系统(前后端分离),这是一项为大学生课程设计作业而开发的项目。该系统旨在帮助大学生学习并掌握Java编程技能,同时锻炼他们的项目设计与开发能力。通过学习基于Java的大学竞赛报名管理系统项目,大学生可以在…

基于Java+Springboot+Vue开发的蛋糕商城管理系统

项目简介该项目是基于Java+Springboot+Vue开发的蛋糕商城管理系统(前后端分离),这是一项为大学生课程设计作业而开发的项目。该系统旨在帮助大学生学习并掌握Java编程技能,同时锻炼他们的项目设计与开发能力。通过学习基于Java的蛋糕商城管理系统项目,大学生可以在实践中学…

产品架构图

这批产品架构图一出,设计、前后端都得服的

VMware Avi Load Balancer 30.2.2 发布下载,新增功能概览

VMware Avi Load Balancer 30.2.2 发布下载,新增功能概览VMware Avi Load Balancer 30.2.2 - 多云负载均衡平台 应用交付:多云负载均衡、Web 应用防火墙和容器 Ingress 服务 请访问原文链接:https://sysin.org/blog/vmware-avi-load-balancer-30/,查看最新版。原创作品,转…

用户验收测试指南1UAT的重要性

1 UAT的重要性 简介中介绍了一些有助于更好地理解 UAT 的一般概念,并介绍了一些备受瞩目的项目失败案例。这些失败即使不是由 UAT 引起的,也肯定不是由 UAT 避免的。第 1 章概述了 UAT、UAT 的目的、UAT 与实施项目的关系以及参与项目的人员。您将了解为什么 UAT 不同于其他类…

读构建可扩展分布式系统:方法与实践06异步消息传递

异步消息传递1. 异步消息传递 1.1. 通信是分布式系统的基础,也是架构师需要纳入其系统设计的主要问题 1.2. 客户端发送请求并等待服务器响应1.2.1. 这就是大多数分布式通信的设计方式,因为客户端需要得到即时响应后才能继续1.2.2. 并非所有系统都有这个要求1.3. 使用异步通信…

mysql 官方架构相关图

一些来自 MySQL 官网的图片汇总。 主要是 8.4 版本的 manual。架构图01 Figure 18.3 MySQL Architecture with Pluggable Storage Engines https://dev.mysql.com/doc/refman/8.4/en/pluggable-storage-overview.html架构图02:InnoDB InnoDB Architecture https://dev.mysql.c…

mysql 架构相关图

一些来自 MySQL 官网的图片汇总。 主要是 8.4 版本的 manual。架构图01 Figure 18.3 MySQL Architecture with Pluggable Storage Engines https://dev.mysql.com/doc/refman/8.4/en/pluggable-storage-overview.html架构图02:InnoDB InnoDB Architecture https://dev.mysql.c…

mac 中安装 homebrew

原链接:https://zhuanlan.zhihu.com/p/905081701. 写在前面curl: (7) Failed to connect to raw.githubusercontent.com port 443: Operation timed out使用官方脚本遇到上面的错误提示:请按照下面「安装步骤」步骤执行。 2. 安装步骤 如果有更换镜像源的想法,强烈推荐使用镜…

Spring框架漏洞总结

本篇文章主要是内容常见Spring漏洞的解析以及理解。目录SpEL注入攻击Spring H2 Database Console未授权访问Spring Security OAuth2远程命令执行漏洞(CVE-2016-4977)Spring WebFlow远程代码执行漏洞(CVE-2017-4971)Spring Data Rest远程命令执行漏洞(CVE-2017-8046)Spring Mess…

第一个中秋节

第一个中秋节 第一次分别 1347公里的同一轮明月 心比月光皎洁