【监控】Prometheus+Grafana 构建可视化监控

news2025/7/17 9:20:19

在云原生和微服务架构盛行的今天，监控系统已成为保障业务稳定性的核心基础设施。作为监控领域的标杆工具，Prometheus和Grafana凭借其高效的数据采集、灵活的可视化能力，成为运维和开发团队的“标配”。

一、Prometheus

Prometheus诞生于2012年，由SoundCloud开发并捐赠给CNCF基金会，现已成为继Kubernetes之后最受欢迎的云原生项目之一。

1. 核心特性
  • 多维数据模型：通过<metric name>{<label1>=<value1>, ...}的格式记录数据，支持按标签动态分类（如区分不同服务的HTTP请求延迟）。
  • PromQL查询语言：提供强大的时间序列数据分析能力，例如计算CPU使用率的滑动平均值：
avg_over_time(node_cpu_seconds_total{mode="idle"}[5m])
  • Pull/Push混合模式：默认通过HTTP主动拉取目标数据，同时支持通过Pushgateway接收短期任务推送的指标。
  • 分布式高可用：支持联邦集群架构，实现跨数据中心的数据聚合。
2. 架构组件
体系结构

下图说明了Prometheus的体系结构及其某些生态系统组件：

Prometheus体系涉及的组件

  • Prometheus server - 收集和存储时间序列数据
  • Client Library: 客户端库，为需要监控的服务生成相应的
  • metrics 并暴露给 - Prometheus server。当 Prometheus server 来 pull 时，直接返回实时状态的 metrics。
  • pushgateway - 对于短暂运行的任务，负责接收和缓存时间序列数据，同时也是一个数据源
  • exporter - 各种专用exporter，面向硬件、存储、数据库、HTTP服务等
  • alertmanager - 处理报警
  • webUI等，其他各种支持的工具，本身的界面值适合用来语句查询，数据可视化，需要第三方组件，比如Grafana。
3.如何收集度量值

度量指标由监控系统执行的过程通常可以分为两种方法：推和拉。

Prometheus基于HTTP call，从配置文件中指定的网络端点(endpoint）上周期性获取指标数据。

Prometheus支持通过三种类型的途径从目标上“抓取(Serape)”指标数据：

Exporters：被监控的目标不支持pro的数据格式，通过exporters抽取指标数据，进行格式化处理成pro兼容的数据格式，再响应给pro server。

Instrumentation：应用系统内建了pro兼容的指标数据格式，pro server可以直接采集。

Push gateway：pro采用 pull 模式，可能由于不在一个子网或者防火墙原因，导致 Prometheus 无法直接拉取各个 target 数据。在监控业务数据的时候，需要将不同数据汇总, 由 Prometheus 统一收集。暂存在pushgateway，等待Prometheus server拉取。

二、Grafana

Grafana作为开源可视化领域的“瑞士军刀”，能够将Prometheus的原始数据转化为直观的运维仪表盘。

1. 核心优势
  • 多数据源支持：无缝集成Prometheus、Loki、InfluxDB、Elasticsearch等30+数据源。
  • 动态仪表盘：提供折线图、热力图、统计面板等10+图表类型，支持通过变量实现交互式过滤（如按环境/服务筛选）。
  • 告警可视化：可在图表中直接标注阈值告警点，并结合Alertmanager实现分级通知。
  • 模板生态：官方市场提供1.5万+预置模板，例如：
    • 主机监控模板（ID: 8919）
    • MySQL性能分析模板（ID: 11329）
    • Kubernetes集群监控模板（ID: 315）
2. 高级功能
  • 混合数据源：在同一面板中对比不同系统的数据（如同时展示Prometheus的CPU指标和Elasticsearch的日志量）。
  • 权限管控：支持基于角色的访问控制（RBAC），细化到仪表盘级别的权限管理。
三、协同工作流

  1. 数据采集
    Node Exporter采集主机CPU/内存指标，cAdvisor收集容器资源使用情况，应用通过Client Library暴露自定义指标（如Spring Boot的HTTP请求数）。
  2. 存储分析
    Prometheus每15秒拉取一次数据，存储至TSDB，并通过PromQL实现实时分析。例如检测内存泄漏：
increase(container_memory_usage_bytes{container="app"}[1h]) > 1GB
  1. 可视化展示
    在Grafana中创建仪表盘，组合多个图表形成监控全景（图2）。例如：
    • 实时显示服务的QPS、错误率、响应时间百分位数
    • 通过GeoMap插件展示全球用户的访问延迟分布
  2. 智能告警
    当Prometheus检测到指标异常（如错误率>5%持续5分钟），Alertmanager会触发Grafana通知，并自动生成事件时间线供事后分析。
四、典型应用场景
  1. 基础设施监控
    通过Node Exporter+主机模板（图3），实时跟踪服务器CPU/磁盘/网络状态，预测硬件故障。
  2. 微服务观测
    结合Istio等服务网格，监控服务间调用的黄金指标（吞吐量、错误率、饱和度）。
  3. CI/CD健康度
    分析流水线的构建时长、失败原因，优化Jenkins任务调度策略。
  4. 业务指标可视化
    将订单成交量、用户活跃度等业务指标接入，实现技术与业务数据的联动分析。
五、最佳实践
  1. 指标设计规范
    • 遵循<service>_<metric>_<unit>命名规则（如http_requests_total）
    • 避免高基数标签（如用户ID会导致时序爆炸）
  2. 性能优化
    • 设置合理的抓取间隔（生产环境建议30-60秒）
    • 使用Recording Rules预计算常用查询
  3. 可视化策略
    • 关键指标采用红/黄/绿状态标识
    • 在仪表盘顶部放置全局过滤器（如环境/数据中心）

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/2387717.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

RAGFlow源码安装操作过程

RAGFlow源码安装操作过程

RAGFlow是一款基于深度文档理解构建的开源 RAG&#xff08;Retrieval-Augmented Generation&#xff09;引擎&#xff0c;可作为Dify的外部知识库使用[1]。本文主要介绍RAGFlow前端和后端等源码安装操作过程。 一.后端安装 特别注意&#xff1a;python ">3.12,<3…
阅读更多...
Unity使用XCharts动态配置数据——折线图（LineChart）

Unity使用XCharts动态配置数据——折线图（LineChart）

XCharts官网地址&#xff1a;https://xcharts-team.github.io/ 本地上传资源&#xff1a;https://download.csdn.net/download/m0_64375864/90919669 效果图&#xff1a; 动态配置数据&#xff1a; public class Test3 : MonoBehaviour {public LineChart lineChart;public …
阅读更多...
【HITCSAPP 哈工大计算机系统期末大作业】 程序人生-Hello’s P2P

【HITCSAPP 哈工大计算机系统期末大作业】 程序人生-Hello’s P2P

计算机系统 大作业 题 目 程序人生-Hello’s P2P 专 业 计算机与电子通信类 学　　 号 2023112915 班　　 级 23L0505 学 生 杨昕彦 指 导 教 师 刘宏伟 计算机科学…
阅读更多...
DAY9 热力图和箱线图的绘制

DAY9 热力图和箱线图的绘制

浙大疏锦行 学会了绘制两个图&#xff1a; 热力图&#xff1a;表示每个特征之间的影响&#xff0c;颜色越深数值越大表示这两个特征的关系越紧密 箱线图&#xff1a;表示每个特征的数据分布情况 箱体&#xff08;Box&#xff09;&#xff1a; 箱体的上下边界分别表示第一四分位…
阅读更多...
解释一下NGINX的反向代理和正向代理的区别?

解释一下NGINX的反向代理和正向代理的区别?

大家好&#xff0c;我是锋哥。今天分享关于【解释一下NGINX的反向代理和正向代理的区别?】面试题。希望对大家有帮助&#xff1b; 解释一下NGINX的反向代理和正向代理的区别? NGINX的反向代理和正向代理的区别主要体现在它们的功能和使用场景上。下面我会详细解释它们的定义…
阅读更多...
数学笔记一：标量、向量和矩阵基本概念辨析

数学笔记一：标量、向量和矩阵基本概念辨析

一、标量 标量&#xff08;Scalar&#xff09; 是一种仅用数值大小&#xff08;即 “量值”&#xff09;就能完全描述的物理量或数学对象&#xff0c;它不具有方向属性。 例如在实数领域的正数、负数。 在物理学领域的多少斤、多少公斤、水温多少度、气温多少度都是标量。 …
阅读更多...
vue3获取两个日期之间的所有时间

vue3获取两个日期之间的所有时间

1.获取两个日期之间所有年月日 如图所示&#xff1a; 代码如下&#xff1a; <template><div class"datePicker"><el-date-pickerv-model"value1"type"daterange"range-separator"至"start-placeholder"开始时间…
阅读更多...
Python 实现简易版的文件管理（结合网络编程）

Python 实现简易版的文件管理（结合网络编程）

目录 一、Python 代码实现1. 服务器端2. 客户端 二、结果展示1. 查看当前路径下的内容 ls2. 切换当前路径 cd3. 查看当前路径 pwd4. 显示根目录下的树状结构 tree5. 在当前路径下创建目录 mkdir6. 删除当前路径下的文件或目录 rm7. 复制文件 mv8. 移动文件 cp9. 用户从当前路径…
阅读更多...
PXC集群

PXC集群

PXC集群 一、环境介绍二、PXC安装1、关闭默认mysql模块2、安装yum源3、准备pxc安装环境4、安装pxc5、启动mysql&#xff0c;并更改root密码 三、搭建PXC集群1、编辑/etc/my.cnf 配置文件&#xff08;1&#xff09;pxc1节点配置文件&#xff08;2&#xff09;pxc2节点配置文件&a…
阅读更多...
线程安全问题的成因

线程安全问题的成因

前言 大家晚上好呀~~ 今天学习了线程不安全问题的成因。线程安全问题是十分重要的知识点&#xff0c;我想把我所学的与大家分享一波&#xff0c;希望可以帮助到有需要的人&#xff0c;同时加深自己对于线程安全问题的理解。 分析过程如下 结语 今天心情还不错~ 要坚持持续…
阅读更多...
零基础远程连接课题组Linux服务器，安装anaconda，配置python环境（换源），在服务器上运行python代码【3/3 适合小白，步骤详细！！！】

零基础远程连接课题组Linux服务器，安装anaconda，配置python环境（换源），在服务器上运行python代码【3/3 适合小白，步骤详细！！！】

远程连接服务器 请查阅之前的博客——零基础远程连接课题组Linux服务器&#xff0c;安装anaconda&#xff0c;配置python环境&#xff08;换源&#xff09;&#xff0c;在服务器上运行python代码【1/3 适合小白&#xff0c;步骤详细&#xff01;&#xff01;&#xff01;】&am…
阅读更多...
unity实现wasd键控制汽车漫游

unity实现wasd键控制汽车漫游

1.给汽车模型添加Box Collider和Rigidbody 2.创建脚本CarController并加载到汽车模型上 using UnityEngine; using UnityEngine.UI;public class CarController : MonoBehaviour
阅读更多...
Python优雅执行SSH命令：10种方法+虚拟环境深度实践

Python优雅执行SSH命令：10种方法+虚拟环境深度实践

引言&#xff1a;为什么选择Python操作SSH&#xff1f; SSH作为网络安全的基石&#xff0c;广泛应用于远程管理、文件传输和自动化任务。Python凭借其丰富的生态&#xff08;如paramiko、fabric&#xff09;和简洁语法&#xff0c;成为编写SSH脚本的首选语言。本文将系统梳理通…
阅读更多...
嵌入式高级工程师面试全解：从 malloc 到 kernel panic 的系统知识梳理

嵌入式高级工程师面试全解：从 malloc 到 kernel panic 的系统知识梳理

在嵌入式和操作系统方向的技术面试中&#xff0c;常常会涉及一系列关于内存管理、虚拟化、系统权限、调试工具、外设通信等方面的问题。本文将基于一次真实的高级嵌入式工程师岗位面试问题&#xff0c;整理并详解所有相关技术点&#xff0c;作为一份结构清晰、知识全面的学习资…
阅读更多...
C++（初阶）（二十）——封装实现set和map

C++（初阶）（二十）——封装实现set和map

二十&#xff0c;封装实现set和map 二十&#xff0c;封装实现set和map1&#xff0c;参数类型2&#xff0c;比较方式3&#xff0c;迭代器3.1&#xff0c;普通迭代器3.2&#xff0c;const迭代器3.3&#xff0c;set_map的迭代器实现 4&#xff0c;插入和查找5&#xff0c;特别的&a…
阅读更多...
【MySQL】06.内置函数

【MySQL】06.内置函数

1. 聚合函数 -- 统计表中的人数 -- 使用 * 做统计&#xff0c;不受 NULL 影响 mysql> select count(*) 人数 from exam_result; -------- | 人数 | -------- | 5 | -------- 1 row in set (0.01 sec)-- 使用表达式做统计 mysql> select count(name) 人数 from ex…
阅读更多...
企业微信内部网页开发流程笔记

企业微信内部网页开发流程笔记

背景 基于ai实现企微侧边栏和工作台快速问答小助&#xff0c;需要h5开发&#xff0c;因为流程不清楚摸索半天&#xff0c;所以记录一下 一、网页授权登录 1. 配置步骤 1.1 设置可信域名 登录企业微信管理后台 进入"应用管理" > 选择开发的具体应用 > “网…
阅读更多...
智慧在线判题OJ系统项目总体，包含功能开发思路，内部中间件，已经部分知识点

智慧在线判题OJ系统项目总体，包含功能开发思路，内部中间件，已经部分知识点

目录 回顾一下xml文件怎么写 哪个地方使用了哪个技术 MyBatis-Plus-oj的表结构设计&#xff0c; 管理员登录功能 Swagger Apifox​编辑 BCrypt 日志框架引入(slf4jlogback) nacos Swagger无法被所有微服务获取到修改的原因 身份认证三种方式: JWT(Json Web Json,一…
阅读更多...
【MySQL】2-MySQL索引P2-执行计划

【MySQL】2-MySQL索引P2-执行计划

欢迎来到啾啾的博客&#x1f431;。 记录学习点滴。分享工作思考和实用技巧&#xff0c;偶尔也分享一些杂谈&#x1f4ac;。 有很多很多不足的地方&#xff0c;欢迎评论交流&#xff0c;感谢您的阅读和评论&#x1f604;。 目录 EXPLAINexplain output 执行计划输出解释重点typ…
阅读更多...
云电脑显卡性能终极对决：ToDesk云电脑/顺网云/海马云，谁才是4K游戏之王？

云电脑显卡性能终极对决：ToDesk云电脑/顺网云/海马云，谁才是4K游戏之王？

一、引言 1.1 云电脑的算力革命 云电脑与传统PC的算力供给差异 传统PC的算力构建依赖用户一次性配置本地硬件&#xff0c;特别是CPU与显卡&#xff08;GPU&#xff09;。而在高性能计算和游戏图形渲染等任务中&#xff0c;GPU的能力往往成为决定体验上限的核心因素。随着游戏分…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023