Prometheus 显卡指标采集

说明本文介绍如何采集服务器显卡相关的数据以英伟达安装扩展Prometheus 采集到的数据都是通过安装扩展来实现的采集英伟达显卡数据需要安装下面这个扩展下载地址https://github.com/utkuozdemir/nvidia_gpu_exporter/releases选择对应的版本我的是 CentOS 7下载下面这个上传到服务器上解压如下创建一个service服务将应用的启停用systemctl管理vim/etc/systemd/system/nvidia_gpu_exporter.service内容如下注意路径需更换成自己的[Unit]Descriptionnvidia_gpu_exporterDocumentationhttps://github.com/NVIDIA/dcgm-exporterAfternetwork.target[Service]TypesimpleUserrootExecStart/usr/local/dev/prometheus/nvidia_gpu_exporter_1.15.1/nvidia_gpu_exporterRestartalwaysRestartSec3TimeoutStartSec30StandardOutputjournalconsoleStandardErrorjournalconsole[Install]WantedBymulti-user.target启动敲下面的命令重新加载系统服务systemctl daemon-reload启动扩展服务systemctl restart nvidia_gpu_exporter查看服务状态systemctl status nvidia_gpu_exporter如下该服务占用的端口是9835浏览器访问http://IP:9835/metrics可见采集数据表示服务运行正常接下来可以在 Prometheus 的配置中加上该数据源配置补充一些显卡之类的告警规则或者配合 Grafana 创建一些显卡之类的面板ID14574 或 ID25547