搭建prometheus+grafana监控系统抓取Linux主机系统资源数据

ops/2025/1/12 17:16:34/

Prometheus 和 Grafana 是两个非常流行的开源工具，通常结合使用来实现监控、可视化和告警功能。它们在现代 DevOps 和云原生环境中被广泛使用。

1. Prometheus

  • 定义：Prometheus 是一个开源的系统监控和告警工具包，最初由 SoundCloud 开发，现在是 CNCF（云原生计算基金会）的毕业项目。

  • 核心功能：

    • 数据采集：通过拉取（Pull）方式从目标服务（如应用程序、服务器、数据库等）收集指标数据。

    • 数据存储：将采集到的时序数据（Time Series Data）存储在本地或远程存储中。

    • 查询语言：提供强大的查询语言 PromQL，用于分析和查询监控数据。

    • 告警功能：支持基于规则的告警，可以通过 Alertmanager 发送告警通知（如邮件、Slack、PagerDuty 等）。

  • 特点：

    • 多维数据模型（通过标签区分不同的指标）。

    • 支持服务发现，动态监控目标。

    • 高性能，适合大规模监控。

  • 适用场景：

    • 监控 Kubernetes 集群。

    • 监控微服务架构。

    • 监控基础设施（如服务器、数据库、网络设备等）。

2. Grafana

  • 定义：Grafana 是一个开源的指标分析和可视化工具，支持多种数据源（如 Prometheus、InfluxDB、Elasticsearch 等）。

  • 核心功能：

    • 数据可视化：通过丰富的图表（如折线图、柱状图、仪表盘等）展示监控数据。

    • 多数据源支持：支持 Prometheus、InfluxDB、MySQL、Elasticsearch 等多种数据源。

    • 仪表盘：用户可以创建和共享自定义的监控仪表盘。

    • 告警功能：Grafana 也支持告警功能，可以根据指标设置告警规则并发送通知。

  • 特点：

    • 界面美观，交互性强。

    • 支持插件扩展，功能丰富。

    • 社区活跃，有大量现成的仪表盘模板。

  • 适用场景：

    • 可视化 Prometheus 的监控数据。

    • 分析和展示时序数据。

    • 创建自定义的监控和运维仪表盘。

3. Prometheus + Grafana 的结合

  • Prometheus 负责数据采集和存储，而 Grafana 负责数据的可视化和展示。

  • 典型工作流程：

    1. Prometheus 从目标服务（如应用程序、服务器）拉取指标数据。

    2. Prometheus 将数据存储在其时序数据库中。

    3. Grafana 连接到 Prometheus 数据源，查询数据并展示在仪表盘上。

    4. 用户通过 Grafana 的仪表盘实时监控系统状态。

    5. 如果需要告警，可以通过 Prometheus 的 Alertmanager 或 Grafana 的告警功能发送通知。

部署环境：

OS：Rocky Linux 9.4

上传所需软件版本：

prometheus-2.40.1.linux-amd64.tar.gz

grafana-enterprise-9.2.4-1.x86_64.rpm

node_exporter-1.4.0.linux-amd64.tar.gz

初始化操作：

关闭防火墙和seLinux，这台机之前关过了，所以没啥提示

systemctl stop firewalld
systemctl disable firewalld
setenforce 0 #临时关闭，也可在/etc/selinux/config文件里永久关闭

修改一下主机名：hostnamectl set-hostname prometheus

下载prometheus安装包：
地址：https://prometheus.io/download/

解压并重命名和启动prometheus：

tar xf prometheus-2.40.1.linux-amd64.tar.gz -C /usr/local/
mv /usr/local/prometheus-2.40.1.linux-amd64/ /usr/local/prometheus
nohup /usr/local/prometheus/prometheus --config.file="/usr/local/prometheus/prometheus.yml" &

查看启动情况：

查看启动端口：

netstat -an |grep 9090

通过主机IP:端口浏览器访问：

默认可以查看到已监控本机
菜单Status -> Targets

查看监控数据：主机IP:端口/metrics

在WEB界面首页可以通过关键字搜索查询监控项


接下来安装Grafana图形化监测工具

官网：https://grafana.com/

下载安装包：
地址：
https://dl.grafana.com/enterprise/release/grafana-enterprise-9.2.4-1.x86_64.rpm

上传grafana的rpm包之后，先安装两个依赖

yum install fontconfig urw-fonts

如果安装grafana报了这个问题：

我这里直接强制跳过了这个chkconfig依赖

rpm -ivh --nodeps grafana-enterprise-9.2.4-1.x86_64.rpm

接着启动grafana并查看端口号是否正在监听

systemctl start grafana-server
systemctl enable grafana-server
netstat -an |grep 3000

浏览使用主机ip:端口访问默认账号密码：admin/admin

登录后把prometheus服务器收集的数据作为一个数据源添加到grafana，让grafana可以得到prometheus的数据

（1）从左侧导航栏找到Data sources菜单

url填上PrometheusIP地址加端口

2.2配置Grafana仪表板

配置完数据源后，grafana接收到prometheus的数据需要使用仪表板展示，仪表板可自定义或导入模板，grafana官网也有非常多类型的模板供下载

Grafana dashboards | Grafana Labs

（1）从左侧导航栏找到导入仪表板，选择添加一个面板我选了官网的3662面板

接下来采集Linux主机系统资源

下载安装包：

地址：Download | Prometheus

上传采集器node_exporter-1.4.0.linux-amd64.tar.gz

解压文件

移动文件到/usr/local/目录下并重命名为node_exporter

启动采集器并修改默认端口

tar -zxf  node_exporter-1.4.0.linux-amd64.tar.gz
mv node_exporter-1.4.0.linux-amd64 /usr/local/node_exporter
nohup /usr/local/node_exporter/node_exporter --web.listen-address=":9900" &

接下来配置prometheus

编辑prometheus.yml文件，配置监控项

[root@prometheus prometheus]# cat  prometheus.yml
# my global config
global:scrape_interval: 15s # Set the scrape interval to every 15 seconds. Default is every 1 minute.evaluation_interval: 15s # Evaluate rules every 15 seconds. The default is every 1 minute.# scrape_timeout is set to the global default (10s).# Alertmanager configuration
alerting:alertmanagers:- static_configs:- targets:# - alertmanager:9093# Load rules once and periodically evaluate them according to the global 'evaluation_interval'.
rule_files:#- "/usr/local/prometheus/rules.yml"# - "first_rules.yml"# - "second_rules.yml"# A scrape configuration containing exactly one endpoint to scrape:
# Here it's Prometheus itself.
scrape_configs:# The job name is added as a label `job=<job_name>` to any timeseries scraped from this config.- job_name: "prometheus"# metrics_path defaults to '/metrics'# scheme defaults to 'http'.static_configs:- targets: ["192.168.158.183:9090"]- job_name: 'linux'file_sd_configs:- files:- /usr/local/prometheus/node_exporter_targets.json

如果有大批量的机器要监控的话，为了方便维护，可以把所有主机信息单独存放到一个文件中

标签名：beijing代表这台机是北京区域的，、prod代表是生产环境的，可自行修改。

[root@prometheus prometheus]# cat  /usr/local/prometheus/node_exporter_targets.json
[{"targets": ["192.168.158.183:9900"],"labels": {"project": "beijing","env": "prod"}}
]

接下来执行

ps -ef |grep prometheus |grep -v grep |awk '{print $2}' |xargs kill -9

停止prometheus进程并启动。

nohup /usr/local/prometheus/prometheus --config.file=/usr/local/prometheus/prometheus.yml &

接下来在grafana导入linux主机详情监控面板

我选择了这个面板

修改面板添加env变量并修改这两个查询语句

此时可以直观看到这台机的资源使用率，后续将继续完善监控系统添加报警功能。


http://www.ppmy.cn/ops/149507.html

相关文章

C++实现设计模式---抽象工厂模式 (Abstract Factory)

C++实现设计模式---抽象工厂模式 (Abstract Factory)

抽象工厂模式 (Abstract Factory) 抽象工厂模式 是一种创建型设计模式&#xff0c;提供一个接口&#xff0c;用于创建一组相关或互相依赖的对象&#xff0c;而无需指定它们的具体类。 意图 提供一个创建一组相关对象的接口&#xff0c;而无需指定它们的具体类。解决产品对象之…
阅读更多...
（概率论）无偏估计

（概率论）无偏估计

参考文章&#xff1a;(15 封私信 / 51 条消息) 什么是无偏估计&#xff1f; - 知乎 (zhihu.com) 首先&#xff0c;第一个回答中&#xff0c;马同学图解数学讲解得很形象&#xff0c; 我的概括是&#xff1a;“注意&#xff0c;有一个总体的均值u。然后&#xff0c;如果抽样n个&…
阅读更多...
理解Apache Spark中的宽窄依赖

理解Apache Spark中的宽窄依赖

在Apache Spark中&#xff0c;宽窄依赖是理解其运行原理和RDD&#xff08;弹性分布式数据集&#xff09;数据结构的关键概念&#xff0c;以下是具体分析&#xff1a; 从Spark运行原理角度 宽依赖&#xff1a;宽依赖意味着一个父RDD的分区会被多个子RDD分区使用&#xff0c;通…
阅读更多...
计算机网络-数据链路层（交换机相关知识）

计算机网络-数据链路层（交换机相关知识）

2.5交换机 2.5.1集线器和交换机的区别 使用集线器和双绞线的星型网络 使用集线器的以太网在逻辑上仍然是一个总线网&#xff0c;在各站共享总线资源&#xff0c;使用的还是CSMA/CD协议&#xff1b; 集线器只工作在物理层&#xff0c;他的每个接口仅简单的转发bit&#xff0c;…
阅读更多...
【Spring Boot 应用开发】-04 自动配置-数据源

【Spring Boot 应用开发】-04 自动配置-数据源

深入讲解 Spring Boot 自动配置中的数据源配置 为了更好地理解 Spring Boot 中的自动配置机制&#xff0c;我们以数据源配置机制为例&#xff0c;按照以下顺序进行讲解&#xff1a; 不使用任何框架来连接数据源的方式使用 Spring MVC 连接数据源的方式使用 Spring Boot 自动配…
阅读更多...
OpenCoze 安全性及国产化替代剖析

OpenCoze 安全性及国产化替代剖析

OpenCoze 作为一款具有潜力的开源企业 ERP MES 系统&#xff0c;其在安全性设计以及国产化替代策略上有着独特的考量&#xff0c;以满足企业在复杂多变的数字化环境中的需求。 一、安全性设计 &#xff08;一&#xff09;用户认证与授权 动态令牌认证&#xff1a;OpenCoze …
阅读更多...
详解用大模型超拟人语音做桌面AI宠物/机器人的个性化能力

详解用大模型超拟人语音做桌面AI宠物/机器人的个性化能力

前言 本文基于前面已经落地的CSK6大模型语音视觉开发板的配套示例功能来进行讲解&#xff0c;超拟人交互效果可以参考视频&#xff1a; 超拟人语音极速回复演示视频 目前聆思平台的超拟人模板实现了快速响应、声纹识别、知识库问答、兜底闲聊、超拟人TTS等功能&#xff0c;具体…
阅读更多...
linux开发的一些问题

linux开发的一些问题

1.linux由于目前的开发环境问题,是在10.00.00.213上完成编译,在10.00.00.52上启动和调试xds,它们之间的文件互传可以使用xftp 2.在10.00.00.213编译的时候,首先需要设置环境变量,然后也需要及时更新对应的代码. 编辑10.00.00.213上的linux时,使用的时mobaXterm,启动时要设置自定…
阅读更多...
最新文章

Copyright @ 2022~2023