文章目录

• Alertmanager告警路由，告警静默，告警抑制，高可用
• • 一、AlertManager告警路由
  • • 1.1 告警路由介绍
    • 1.2 告警路由实践
    • • 1）配置AlertManager，添加子路由规则
    • 1.2 告警路由实践
    • • 1）配置AlertManager，添加子路由规则
      • 2）检查语法，并重新加载AlertManager
    • 1.3 告警路由验证
    • • 1）触发mysql和redis的告警，验证企业微信-DBA团队是否能收到告警消息
      • 2）触发node相关的告警，验证企业微信-OPS团队是否能收到告警消息
      • 3）触发nginx相关的告警，验证钉钉运维团队是否能收到告警消息
  • 二、AlertManager告警静默
  • • 2.1 告警静默介绍
    • • 1）先告警后静默
      • 2）先配置静默
    • 2.2 配置告警静默
    • • 1、先告警后静默
      • 2、先配置静默
  • 三、AlertManager告警抑制
  • • • 3.1 告警抑制介绍
    • 3.2 告警抑制场景-1
    • • 1）模拟节点故障，并且模拟因为节点故障从⽽造成的其他级联故障；
      • 2）正常情况下我们会收到3条告警消息，但最为重要的就是节点Down机，其他告警消息都是因为节点Down而产生的级联故障
    • 3.3 告警抑制场景-2
    • • 1）假设我们运行了MySQL主从，我们的告警规则如下：
      • 2）接下来，模拟主库异常和从库异常，看是否会收到两条告警消息。
      • 3）配置抑制规则，当主库出现故障，则抑制从库的故障
      • 4）模拟主库和从库都告警，验证最终是否仅收到主库的告警，而抑制从库的告警。
  • 四、AleartManager高可用
  • • 4.1 AlertManager传统架构
    • 4.2 AlertManager高可用架构
    • 4.3 AlertManager高可用配置实践
    • • 1）将jigntian01节点上的，AlertManager拷贝止其他两个节点
      • 2）在所有节点上，准备 alertmanager_ha.service 的启动配置文件
      • 3）检查alertmanager集群状态
      • 4）配置Prometheus对接多个AlertManager实例
    • 4.4 AlertManager高可用结果验证
    • • 1）测试集群同步状态，当在一个节点上创建了一个静默（Silence）记录，其他节点的监控页面能够即时显示该静默的信息
      • <