机器指标监控技术方案

文章目录

机器指标监控技术方案
- 架构图
- - 组件简介
  - - Prometheus 简介
    - - 核心特性
      - 适用场景
    - Grafana 简介
    - - 核心特性
      - 适用场景
    - Alertmanager 简介
    - - 核心特性
      - 适用场景
- 数据采集
- - 机器Node Exporter
  - MySQL Exporter
  - Redis Exporter
  - ES Exporter
  - RocketMQ Exporter
  - Springcloud Exporter
  - Nacos
- 数据存储
- - 短期存储
  - 长期存储
  - - 方案 1：Thanos（推荐）
    - 方案 2：VictoriaMetrics
    - 方案 3：M3DB（Uber 开源）
- 数据查询展示
- - 快速导入模板
  - 机器指标监控模板
  - MySQL 指标监控模板
  - Redis 指标监控模板
  - ES 指标监控模板
  - RocketMQ 指标监控模板
  - Springcloud 指标监控模板
- 指标异常告警
- - AlertManager
  - - 核心特性
    - 适用场景
    - 协作流程

机器指标监控技术方案

架构图

[图片]

组件简介

Prometheus 简介

Prometheus 是一款开源的监控和告警工具，由 Cloud Native Computing Foundation (CNCF) 托管，专为云原生环境设计。它采用 Pull（拉取）模式采集指标数据，并支持强大的 PromQL 查询语言，适用于微服务、容器、中间件和基础设施的监控。

核心特性

✅ 多维度数据模型：基于 metric_name{labels}=value 的键值对存储，支持灵活查询。
✅ 高效存储：采用时间序列数据库（TSDB），支持高效查询和压缩存储。
✅ 服务发现：支持 Kubernetes、Consul、Nacos 等动态发现监控目标。
✅ 告警规则：可定义灵活的告警条件（如 CPU > 90%），并推送至 Alertmanager。
✅ 丰富的 Exporter 生态：支持 Node Exporter（机器监控）、MySQL Exporter（数据库监控）等。

适用场景

📌 监控 Spring Cloud 微服务（JVM、HTTP 请求、线程池）
📌 监控中间件（RocketMQ、MySQL、Redis、Elasticsearch）
📌 监控服务器资源（CPU、内存、磁盘、网络）

Grafana 简介

Grafana 是一款开源的数据可视化和监控分析平台，支持多种数据源（如 Prometheus、MySQL、Elasticsearch），能够将复杂的监控数据转化为直观的仪表盘，帮助团队快速发现和诊断问题。

核心特性

✅ 多数据源支持：可集成 Prometheus、InfluxDB、Elasticsearch、Loki 等。
✅ 丰富的可视化组件：折线图、柱状图、仪表盘、热力图、日志面板等。
✅ 动态仪表盘：支持变量过滤（如按服务名、实例筛选数据）。
✅ 告警可视化：可在仪表盘直接查看告警状态。
✅ 团队协作：支持共享仪表盘、权限管理、版本回滚。

适用场景

📊 可视化 Prometheus 监控数据（如机器指标、微服务性能）
📊 日志分析（结合 Elasticsearch 或 Loki）
📊 业务数据监控（如订单量、API 成功率）

Alertmanager 简介

Alertmanager 是 Prometheus 生态中的告警管理组件，负责对 Prometheus 触发的告警进行去重、分组、路由和通知，确保告警信息能高效、准确地送达相关人员。

核心特性

🔔 告警分组（Grouping）：合并同类告警（如多台机器高 CPU 告警合并为一条）。
🔔 告警抑制（Inhibition）：避免冗余告警（如机器宕机时，忽略该机器上的服务告警）。
🔔 多通知渠道：支持邮件、Slack、钉钉、企业微信、Webhook 等。
🔔 静默（Silence）：临时屏蔽特定告警（如维护期间）。
🔔 高可用：支持多实例集群部署，避免单点故障。

适用场景

🚨 微服务异常告警（如 HTTP 错误率飙升、JVM OOM）
🚨 中间件告警（如 RocketMQ 消息堆积、MySQL 慢查询）
🚨 服务器告警（如磁盘空间不足、CPU 过载）

数据采集

exporter list https://prometheus.io/docs/instrumenting/exporters/

机器Node Exporter

https://github.com/prometheus/node_exporter

MySQL Exporter

https://github.com/prometheus/mysqld_exporter

Redis Exporter

https://github.com/oliver006/redis_exporter

ES Exporter

https://github.com/prometheus-community/elasticsearch_exporter

RocketMQ Exporter

https://github.com/apache/rocketmq-exporter

Springcloud Exporter

https://micrometer.io/docs/registry/prometheus

Nacos

使用动态服务发现
https://blog.csdn.net/qaknar826/article/details/147055927

scrape_configs:

job_name: ‘spring-cloud-apps’
nacos_sd_configs:
- server: ‘nacos-server-ip:8848’ # Nacos 地址
  group_name: ‘DEFAULT_GROUP’
  namespace_id: ‘your-namespace-id’
  metrics_path: ‘/actuator/prometheus’
  relabel_configs:
- source_labels: [__meta_nacos_service_name]
  target_label: application