【Prometheus + Alertmanager + Grafana 监控平台部署】

Prometheus + Alertmanager + Grafana 监控平台部署

说明：本文只记录部署操作步骤与配置要点。安装包内已提供的文件（docker-compose.yaml、prometheus.yml、alerts/*.yml、node_targets.json、alertmanager/config.yml、install_node_exporter.sh、node_exporter.service）不再重复列出内容，按需修改即可。

一、组件与端口

数据流：

node_exporter(:9100) ──拉取──> Prometheus(:9090) ──告警──> Alertmanager(:9093) ──webhook──> 飞书中转服务 ──> 飞书群 │ └──数据源──> Grafana(:3000)

二、目录结构

. ├── alertmanager │ └── config.yml ├── docker-compose.yaml ├── grafana │ └── grafana_data └── prometheus ├── prometheus_config │ ├── alerts │ │ ├── blackbox_alerts.yml │ │ ├── kafka_alerts.yml │ │ ├── milvus_standalone_rule.yml │ │ └── rules.yml │ ├── node_targets.json │ └── prometheus.yml └── prometheus_data

三、部署前准备：目录权限

三个组件在容器内均以非 root 用户运行，宿主机挂载目录属主不一致会直接导致启动失败。

执行

# Prometheuschown-R65534:65534 prometheus/chmod-R755prometheus/# Alertmanager（UID 以上面自查结果为准）chown-R65534:65534 alertmanager/chmod-R755alertmanager/# Grafanachown-R472:0 grafana/chmod-R755grafana/

需要 root 执行，命令前加sudo。

四、启动

docker-composeup-d

验证

dockercomposeps# 三个服务均应为 Updockerlogs-fprometheusdockerlogs-falertmanagerdockerlogs-fgrafana

访问地址

若端口打不开，检查防火墙是否放行 9090 / 9093 / 3000。

五、Grafana 配置

5.1 登录

访问http://<IP>:3000，默认用户名密码admin / admin，首次登录强制修改密码。

5.2 添加数据源

Connections → Data sources → Add data source → Prometheus

• Prometheus server URL填：http://prometheus:9090
• 其余保持默认，点Save & test，提示Successfully queried the Prometheus API即通。

不要填localhost:9090—— Grafana 容器内的 localhost 指向它自己，连不通。

5.3 导入仪表盘

Dashboards → New → Import→ 填入 ID1860→ Load → 选择 Prometheus 数据源 → Import。

其他常用仪表盘：

六、安装 node_exporter（被监控主机）

安装包已提供：

. ├── install_node_exporter.sh ├── node_exporter-1.9.1.linux-amd64.tar.gz └── node_exporter.service

在被监控主机上执行：

chmod+x install_node_exporter.sh ./install_node_exporter.sh

安装后验证（在被监控主机上）：

systemctl status node_exportercurl-shttp://localhost:9100/metrics|head-5

需放行 9100 端口，且仅允许 Prometheus 主机访问：

firewall-cmd--permanent--add-rich-rule='rule family="ipv4" source address="<Prometheus主机IP>/32" port port="9100" protocol="tcp" accept'firewall-cmd--reload

七、添加 / 移除监控节点

1. 目标主机安装 node_exporter（见第六章）。
2. 编辑prometheus/prometheus_config/node_targets.json，按已有格式追加主机。
3. 改node_targets.json无需任何操作，文件服务发现会自动加载。
4. 改prometheus.yml主配置（如新增 job）才需要重载：

curl-shttp://localhost:9090/-/reload-XPOST

配置校验

# 主配置语法dockerexecprometheus promtool check config /etc/prometheus/prometheus.yml# 告警规则语法dockerexecprometheus promtool check rules /etc/prometheus/alerts/rules.yml

八、Alertmanager 配置飞书告警

编辑alertmanager/config.yml，在receivers中把 webhook 地址指向中转服务：

receivers:-name:'feishu'webhook_configs:-url:'http://<中转服务IP>:<端口>/alert'send_resolved:true

为什么需要中转：Alertmanager 发出的 JSON 结构与飞书自定义机器人要求的{"msg_type":"text","content":{"text":"..."}}（或 interactive 卡片）格式不一致，必须由一个中转程序做格式转换后再调用飞书 Webhook。若飞书机器人开启了签名校验，中转程序还需按timestamp + key生成 HMAC-SHA256 签名。

飞书侧：群设置 → 群机器人 → 添加自定义机器人，获取 Webhook 地址：

https://open.feishu.cn/open-apis/bot/v2/hook/<token>

配置校验与重载

dockerexecalertmanager amtool check-config /etc/alertmanager/config.ymlcurl-shttp://localhost:9093/-/reload-XPOST

九、常见问题速查

安装包可私信我获取