使用Prometheus + Grafana + node_exporter实现Linux服务器性能监控

监控与告警系统部署：
项目示例: "使用Prometheus + Grafana + node_exporter实现Linux服务器性能监控"
描述: 在目标服务器部署node_exporter采集系统指标(CPU, 内存, 磁盘, 网络)。
部署配置Prometheus Server，抓取node_exporter数据。
部署配置Grafana，连接Prometheus数据源，创建可视化仪表盘展示关键指标。 配置Prometheus Alertmanager或Grafana告警规则（如CPU使用率>90%持续5分钟邮件告警）。
技术关键词: Prometheus, Grafana, node_exporter, Alertmanager,
监控指标(CPU/Mem/Disk/Net), 告警规则。
亮点: 掌握现代监控栈的核心流程，理解关键性能指标，具备告警意识。

✅ 项目目标总结（你最终会学会的）

你将部署并掌握以下组件：

组件功能是否部署
node_exporter采集 Linux 主机指标（CPU/内存/磁盘/网络）✅ 是
Prometheus抓取 exporter 指标、存储、查询、告警✅ 是
Grafana连接 Prometheus，做图表可视化✅ 是
AlertmanagerPrometheus 告警触发后转发邮件/微信等通知✅ 是

🛠 教学模式（分阶段推进）

我会按以下 5 个阶段带你完成部署，每一步我都可以给你指令+截图模板：

阶段任务是否必须
1. 环境准备准备3台虚拟机或1台本机✅ 必须
2. node_exporter部署被监控主机安装 exporter✅ 必须
3. Prometheus部署主控端部署并配置 prometheus.yml✅ 必须
4. Grafana安装浏览器访问仪表盘展示监控图表✅ 必须
5. 告警系统配置配置 CPU >90% 持续5分钟发邮件⚠️ 可选，但建议完成

📦 第1步：环境准备（你要准备什么）

你至少要有：

  • 🖥️ 1 台 Linux 虚拟机（推荐 CentOS 7 或 Ubuntu 20.04）
    ✅ 如果有 VMware + CentOS 就直接用那台
    ✅ 最好关掉 selinux 和 firewalld

  • 📶 能联网（或者提前下载好 Prometheus/Grafana 安装包）

  • 📁 一个安装目录，如：/opt/monitoring

📌 现在我们开始第1阶段：

✅ 第1阶段：部署 node_exporter（采集系统指标）

目标：你这台主机的 CPU/内存/磁盘 数据能被采集到

第1步：下载安装 node_exporter

# 进入工作目录 
cd /opt# 下载 node_exporter（以 v1.8.1 为例） wget https://github.com/prometheus/node_exporter/releases/download/v1.8.1/node_exporter-1.8.1.linux-amd64.tar.gz# 解压 tar -xzf node_exporter-1.8.1.linux-amd64.tar.gz cd node_exporter-1.8.1.linux-amd64

第2步：后台运行 node_exporter

# 启动 node_exporter（监听在 9100 端口） ,一定要先进入cd node_exporter-1.8.1.linux-amd64目录./node_exporter &

遇到问题：

执行了

后，光标仍然闪动，好像没进入后台

可能原因：

 原因一：程序其实没有完全进入后台

虽然你用了 &，但：

  • 程序可能打印了很多日志到控制台（stdout / stderr），

  • shell 仍然认为你“在等它输出”，光标就会一直闪，

  • 所以 Ctrl + C 终止了它。

这是 Linux 的常见行为，并不是命令错了。

原因二：程序被调度到后台了，但还有“子线程/子进程”输出信息或没释放终端控制权。

解决办法

用 nohup 让它真正脱离终端运行（临时使用）

cd到这个/usr/local/Prometheusm目录下执行

nohup ./node_exporter > /dev/null 2>&1 &

第3步：确认是否运行成功

# 查看监听端口 
netstat -tunlp | grep 9100 
# 浏览器访问http://主机号:9100/metrics
#或者ps -ef | grep node_exporter

✅ 第二步：部署 Prometheus Server

1. 下载并解压 Prometheus

你可以从 官网 获取，也可以直接用以下命令下载最新版：

cd /usr/local/src/ wget https://github.com/prometheus/prometheus/releases/download/v2.52.0/prometheus-2.52.0.linux-amd64.tar.gztar -xzf prometheus-2.52.0.linux-amd64.tar.gz mv prometheus-2.52.0.linux-amd64 /usr/local/Prometheus cd /usr/local/Prometheus

2. 编辑配置文件 prometheus.yml

vim prometheus.yml

在 scrape_configs 下添加 node_exporter 的配置，例如：

scrape_configs:- job_name: 'node_exporter'static_configs:- targets: ['localhost:9100']

🔍 说明：

  • localhost:9100 是你的 node_exporter 默认监听地址。

  • 如果你的 node_exporter 是部署在别的服务器上，则改为对应的 IP，例如：192.168.1.100:9100

3. 启动 Prometheus

./prometheus --config.file=prometheus.yml &

  • 启动后访问 Prometheus Web UI：

    http://<你的服务器IP>:9090

4. 验证是否采集到 node_exporter 数据

在浏览器中打开 http://<你的服务器IP>:9090

  • 点击 “Status” → “Targets”

  • 查看是否有 node_exporter 的目标出现，并且状态为 UP

图示：

✅ 当前进度回顾

任务状态
✔️ 部署 node_exporter已完成
✅ 部署 Prometheus Server进行中
⏭️ 部署 Grafana下一步
⏭️ 创建 Dashboard 并配置告警后续

第三步：部署 Grafana（可视化监控面板）

Grafana 是一个强大的开源可视化工具，用于展示 Prometheus 收集的数据。

1. 安装 Grafana

 方法一：使用 RPM 包安装（推荐 CentOS）
# 添加 Grafana 官方源
cat <<EOF | sudo tee /etc/yum.repos.d/grafana.repo
[grafana]
name=grafana
baseurl=https://packages.grafana.com/oss/rpm
repo_gpgcheck=1
enabled=1
gpgcheck=1
gpgkey=https://packages.grafana.com/gpg.key
EOF# 安装 Grafana
sudo yum install -y grafana

2. 启动 Grafana 并设置为开机启动

sudo systemctl start grafana-serversudo systemctl enable Grafana-serverGrafana

3. 放行防火墙端口（默认 3000）

bash
复制编辑
sudo firewall-cmd --add-port=3000/tcp --permanent sudo firewall-cmd --reload 


4. 访问 Grafana Web 界面
打开浏览器访问：
http://<你的服务器IP>:3000
首次登录默认账号密码是：
用户名：admin 密码：admin 
首次登录会要求修改密码，请记住新密码。


5. 添加 Prometheus 数据源
登录 Grafana 后：
  1. 点击左侧边栏的 Data Sources
  2. 点击 Add data source
  3. 选择 Prometheus
  4. 在 URL 填入：
    http://localhost:9090 
  5. 点击底部的 Save & Test，显示 success 即可。


6. 导入官方 Node Exporter 监控模板（Dashboard）
Grafana 社区已有 Node Exporter 的可视化模板，操作如下：
  1. 点击左侧 “+” → Import
  2. 在 Import 页面中，输入 dashboard ID：
    1860 这是官方维护的 Node Exporter 全套模板
  3. 点击 Load
  4. 选择你刚添加的 Prometheus 数据源
  5. 点击 Import
导入成功后，就能看到完整的服务器资源监控仪表板，包括 CPU、内存、磁盘、网络等信息。


✅ 当前进度回顾
任务状态
✔️ 部署 node_exporter已完成
✔️ 部署 Prometheus Server已完成
✅ 部署 Grafana进行中
⏭️ 创建 Dashboard 并配置告警下一步
第四步：配置 Grafana Dashboard 和告警系统
📊 一、导入官方 Node Exporter Dashboard
1. 登录 Grafana
浏览器访问：
http://<你的服务器IP>:3000 
默认账号密码是：
用户名：admin 密码：123456


2. 添加 Prometheus 数据源
在 Grafana 页面中：
  1. 左侧栏点击齿轮「⚙️」 → Data sources
  2. 点击「Add data source」
  3. 选择「Prometheus」
  4. 在 URL 栏填写：
    http://localhost:9090 
  5. 点击最下方「Save & test」，如果提示成功则数据源配置完成。


3. 导入 Node Exporter 官方 Dashboard（ID：1860）
  1. 左侧栏点击「+」 → Import
  2. 在 “Import via grafana.com” 输入：
    1860 
  3. 点击「Load」
  4. 选择刚才添加的 Prometheus 数据源
  5. 点击「Import」
你将看到一个完整的、实时更新的系统监控 Dashboard，包括 CPU、内存、磁盘、网络 等指标。


🚨 二、配置告警规则（Prometheus + Alertmanager 简版）
1. 创建 Prometheus 告警规则文件
vim /usr/local/prometheus/rules/alert.rules.yml 
示例内容：当 CPU 使用率连续 1 分钟超过 80%，触发告警：
groups:- name: node_alertsrules:- alert: HighCPUUsageexpr: 100 - (avg by (instance) (rate(node_cpu_seconds_total{mode="idle"}[1m])) * 100) > 80for: 1mlabels:severity: warningannotations:summary: "High CPU usage detected on {{ $labels.instance }}"description: "CPU usage is above 80% for more than 1 minute."


2. 修改 Prometheus 配置文件添加告警规则
# prometheus.yml 添加下面配置rule_files: - "rules/alert.rules.yml"


3. 配置 Alertmanager（可选）
如果你希望支持发送邮件、钉钉、企业微信等告警，可以继续配置 Alertmanager（可等你后面深入时单独学习）。
🛠 第四步：部署与配置 Alertmanager
1. 下载并解压 Alertmanager
cd /usr/local/src/
wget https://github.com/prometheus/alertmanager/releases/download/v0.27.0/alertmanager-0.27.0.linux-amd64.tar.gz
tar -xzf alertmanager-0.27.0.linux-amd64.tar.gz
mv alertmanager-0.27.0.linux-amd64 /usr/local/alertmanager
cd /usr/local/alertmanager


2. 配置 Alertmanager
先备份，在配置
mv  ./alertmanager.yml ./alertmanager01.yml
编辑 alertmanager.yml（163邮箱）
global:resolve_timeout: 5msmtp_smarthost: 'smtp.163.com:465'               # 163 SMTP + SSL端口smtp_from: '你的邮箱@163.com'                     # 发件邮箱smtp_auth_username: '你的邮箱@163.com'            # 账号smtp_auth_password: '你的授权码'                   # 注意：不是登录密码，是客户端授权码smtp_require_tls: false                          # 465端口是SSL，不用STARTTLSroute:receiver: 'email-alert'group_wait: 10sgroup_interval: 1mrepeat_interval: 3hreceivers:- name: 'email-alert'email_configs:- to: '接收告警的邮箱@example.com'               # 接收方邮箱，可以不是163send_resolved: true


💡 说明：
  • to 为告警接收方邮箱
  • from 与 auth_username 必须一致，且为发送邮箱
  • auth_password 为邮箱 SMTP 授权码（不是邮箱登录密码）
  • smarthost 为邮件服务商的 SMTP 地址（如 smtp.qq.com:465）




3. 启动 Alertmanager
#在/usr/local/alertmmanager目录下执行./alertmanager --config.file=alertmanager01.yml &
默认端口：9093

访问测试：http://<你的IP>:9093


4. 将 Alertmanager 接入 Prometheus
修改 Prometheus 配置文件 prometheus01.yml，添加：
alerting: 
alertmanagers: - static_configs: - targets: ['localhost:9093']


5、添加告警规则文件（CPU 使用率 > 90%）
创建 rules.yml
cd /usr/local/Prometheus
vim rules.yml
编写
groups:- name: cpu_alertrules:- alert: HighCPULoadexpr: 100 - (avg by(instance)(rate(node_cpu_seconds_total{mode="idle"}[2m])) * 100) > 90for: 5mlabels:severity: criticalannotations:summary: "CPU 使用率高于 90%"description: "实例 {{ $labels.instance }} 的 CPU 使用率已连续 5 分钟超过 90%"


6、在 prometheus.yml 中引入规则文件
rule_files: - "rules.yml"


7️⃣ 重启 Prometheus 和 Alertmanager
pkill prometheus./prometheus --config.file=prometheus.yml & pkill alertmanager ./alertmanager --config.file=alertmanager.yml &


8️⃣ 验证告警
  1. 可以用 stress 工具制造高 CPU：
    yum install epel-release -y yum install stress -y stress --cpu 2 --timeout 600
  2. 等 5 分钟，看是否收到 163 邮箱的告警邮件

                    

                    

                    

                    

                        

                            本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mfbz.cn/a/2739.html
                        

                        如若内容造成侵权/违法违规/事实不符，请联系我们进行投诉反馈qq邮箱809451989@qq.com，一经查实，立即删除！
                    

                    
                    

                        
                    

                

                

                    相关文章

                
                

                    

                        

                            

                                
                                    2025 蓝桥杯C/C++国B 部分题解
                            

                        

                        

                            

                                2025 蓝桥杯C/C++国B 部分题解
                            

                            

                                P12836 [蓝桥杯 2025 国 B] 翻倍
题目描述
给定 nnn 个正整数 A1,A2,…,AnA_1, A_2, \ldots, A_nA1​,A2​,…,An​&#xff0c;每次操作可以选择任意一个数翻倍。
请输出让序列单调不下降&#xff0c;也就是每个数都不小于上一个数&#xff0c;最少需要操作多少次&#xff1f;…
                            

                            

                                阅读更多...
                            

                        

                    

                

                
                

                    

                        

                            

                                
                                    在 Mac 上安装 IntelliJ IDEA
                            

                        

                        

                            

                                在 Mac 上安装 IntelliJ IDEA
                            

                            

                                在 Mac 上安装 IntelliJ IDEA 步骤。下面我将提供两种最主流的安装方法&#xff0c;并附上详细的图文解说式步骤。 
安装前的准备&#xff1a;选择版本 
首先&#xff0c;你需要决定安装哪个版本的 IntelliJ IDEA。 
版本Ultimate (旗舰版)Community (社区版)价格付费 (提供 30…
                            

                            

                                阅读更多...
                            

                        

                    

                

                
                

                    

                        

                            

                                
                                    云原生时代的 Linux：容器、虚拟化与分布式的基石
                            

                        

                        

                            

                                云原生时代的 Linux：容器、虚拟化与分布式的基石
                            

                            

                                &#x1f4dd;个人主页&#x1f339;&#xff1a;慌ZHANG-CSDN博客 &#x1f339;&#x1f339;期待您的关注 &#x1f339;&#x1f339; 在云计算与容器化快速发展的今天&#xff0c;Linux 已经不再只是服务器上的操作系统&#xff0c;而是整个云原生生态的底层基石。无论是运…
                            

                            

                                阅读更多...
                            

                        

                    

                

                
                

                    

                        

                            

                                
                                    【普中STM32精灵开发攻略】--第 14 章 动态数码管实验
                            

                        

                        

                            

                                【普中STM32精灵开发攻略】--第 14 章 动态数码管实验
                            

                            

                                (1)实验平台&#xff1a; 
普中STM32精灵开发板​​​https://item.taobao.com/item.htm?id739076227953(2)资料下载&#xff1a;普中科技-各型号产品资料下载链接 前面章节我们已经介绍了如何使用 STM32 单片机控制IO 输出。本章将介绍数码管显示&#xff0c;在实际应用中通常…
                            

                            

                                阅读更多...
                            

                        

                    

                

                
                

                    

                        

                            

                                
                                    Bitmap 裁剪和拉伸
                            

                        

                        

                            

                                Bitmap 裁剪和拉伸
                            

                            

                                Drawable 转换成 bitmp
fun drawableToBitmap(drawable: Drawable): Bitmap? {if (drawable is BitmapDrawable) {return drawable.bitmap}val width  drawable.intrinsicWidthval height  drawable.intrinsicHeightval bitmap  Bitmap.createBitmap(width, height, Bitmap.Co…
                            

                            

                                阅读更多...
                            

                        

                    

                

                
                

                    

                        

                            

                                
                                    计算机视觉（opencv）——图像本质、数字矩阵、RGB + 基本操作（实战一）
                            

                        

                        

                            

                                计算机视觉（opencv）——图像本质、数字矩阵、RGB + 基本操作（实战一）
                            

                            

                                OpenCV 入门教程&#xff1a; 
OpenCV&#xff08;Open Source Computer Vision Library&#xff09;是一个开源的计算机视觉库&#xff0c;广泛应用于图像处理、视频分析、机器学习等领域。 
在 Python 中&#xff0c;cv2 是 OpenCV 的主要接口模块。本文将带你一步步掌握 cv2…
                            

                            

                                阅读更多...
                            

                        

                    

                

                
                

                    

                        

                            

                                
                                    初识C++类的6个默认成员函数
                            

                        

                        

                            

                                初识C++类的6个默认成员函数
                            

                            

                                目录 
一、初始化和清理 
二、拷贝复制 
三、取地址重载 
四、重要说明 
五、注意事项 
六、示例代码 在C中&#xff0c;当一个类没有显式定义某些成员函数时&#xff0c;编译器会自动生成6个默认成员函数。这些函数可以分为以下几类&#xff1a; 一、初始化和清理 
1、构造函数…
                            

                            

                                阅读更多...
                            

                        

                    

                

                
                

                    

                        

                            

                                
                                    【tips】css模仿矢量图透明背景
                            

                        

                        

                            

                                【tips】css模仿矢量图透明背景
                            

                            

                                就像棋盘格background-image: linear-gradient(45deg, #f0f0f0 25%, transparent 25%), linear-gradient(-45deg, #f0f0f0 25%, transparent 25%), linear-gradient(45deg, transparent 75%, #f0f0f0 75%), linear-gradient(-45deg, transparent 75%, #f0f0f0 75%);background-…
                            

                            

                                阅读更多...
                            

                        

                    

                

                
                

                    

                        

                            

                                
                                    【高等数学】第八章 向量代数与空间解析几何——第二节 数量积 向量积 混合积
                            

                        

                        

                            

                                【高等数学】第八章 向量代数与空间解析几何——第二节 数量积 向量积 混合积
                            

                            

                                上一节&#xff1a;【高等数学】第八章 向量代数与空间解析几何——第一节 向量及其线性运算 总目录&#xff1a;【高等数学】 目录 文章目录1. 两向量的数量积2. 两向量的向量积3. 向量的混合积1. 两向量的数量积 
定义向量a\boldsymbol{a}a和向量b\boldsymbol{b}b的数量积&am…
                            

                            

                                阅读更多...
                            

                        

                    

                

                
                

                    

                        

                            

                                
                                    一个程序通过 HTTP 协议调用天气 API，解析 JSON 格式的天气数据，提取关键信息并格式化输出：日期、天气状况、温度范围、风向、湿度等核心气象数据。
                            

                        

                        

                            

                                一个程序通过 HTTP 协议调用天气 API，解析 JSON 格式的天气数据，提取关键信息并格式化输出：日期、天气状况、温度范围、风向、湿度等核心气象数据。
                            

                            

                                #include <stdio.h>                  // 标准输入输出库&#xff0c;提供printf、fgets等函数
#include <string.h>                 // 字符串处理库&#xff0c;提供strlen、strstr等函数
#include <sys/types.h>              // 系统类型定义库&#xf…
                            

                            

                                阅读更多...
                            

                        

                    

                

                
                

                    

                        

                            

                                
                                    炫酷圆形按钮调色器
                            

                        

                        

                            

                                炫酷圆形按钮调色器
                            

                            

                                <!DOCTYPE html>
<html lang"zh">
<head><meta charset"UTF-8"><meta name"viewport" content"widthdevice-width, initial-scale1.0"><title>圆形按钮颜色控制器</title><style>bod…
                            

                            

                                阅读更多...
                            

                        

                    

                

                
                

                    

                        

                            

                                
                                    蓝桥杯----锁存器、LED、蜂鸣器、继电器、Motor
                            

                        

                        

                            

                                蓝桥杯----锁存器、LED、蜂鸣器、继电器、Motor
                            

                            

                                (七)、锁存器1、原理蓝桥杯中数据传入口都是P0&#xff0c;也就是数码管段选、位选数据、LED亮灭的数据、蜂鸣器启动或禁用的数据&#xff0c;外设启动或者关闭都需要通过P0写入数据&#xff0c;那么如何这样共用一个端口会造成冲突嘛&#xff0c;答案是肯定的。所以蓝桥杯加入…
                            

                            

                                阅读更多...
                            

                        

                    

                

                
            

            

                

                    

                        

                            最新文章

                        
                    

                

            

        

    

    

        

            

                Copyright @ 2022~2023