💫《博主主頁》:
? ? ? ? ? ?🔎?CSDN主頁
? ? ? ? ? ?🔎?IF Club社區主頁
🔥《擅長領域》:擅長阿里云AnalyticDB for MySQL(分布式數據倉庫)、Oracle、MySQL、Linux、prometheus監控;并對SQLserver、NoSQL(MongoDB)有了解
💖如果覺得文章對你有所幫助,歡迎點贊收藏加關注💖
? ? 【周末充電??+摸魚🐟】剛研究完MySQL的行格式,技術人的周末果然離不開學習與放松的完美平衡!今天這篇文章咱們繼續分享—— 使用Prometheus+Grafana打造專業的Redis監控系統 ,不僅能實時采集關鍵指標,還能配置炫酷可視化和智能告警,讓數據庫健康狀態一目了然!
? ? 文中會手把手部署redis_exporter、配置Prometheus抓取數據,再通過Grafana設計直觀的監控面板,也會分享幾個超實用的Redis告警規則,幫各位提前規避線上風險。話不多說,直接上操作,讓你的Redis享受24小時的監護!🚀
? ? ? ? ? ? ? ? ? ??
特別說明💥:
📌 開源儀表盤引用
- 本文采用的Redis數據庫監控儀表盤直接使用了Grafana官網開源項目(Dashboard ID: 763),非常感謝原作者(oliver006)的無私分享。關于Grafana的所有配置步驟均基于該開源儀表盤并驗證通過,各位可一鍵導入快速搭建專業級的可視化監控。
? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
? 原創告警規則實現
關于告警部分為博主獨立開發完成,針對Redis數據庫實現了如下告警:
? Redis 實例不可用
? Redis 內存使用率過高
? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ??
🔗?Prometheus+Grafana監控Redis全流程
? ? ? ? ? ? ? ??
? ? ? ? ? ? ? ? ?
prometheus+Grafana全系列文章(實時更新🔥):
序號 文章 1 【prometheus+Grafana篇】Prometheus與Grafana:深入了解監控架構與數據可視化分析平臺-CSDN博客 2 【prometheus+Grafana篇】從零開始:Linux 7.6 上二進制安裝 Prometheus、Grafana 和 Node Exporter_grafana二進制部署-CSDN博客 3 【prometheus+Grafana篇】Prometheus告警規則參數全解析 + Alertmanager實現多平臺告警(含電子郵件/企業微信群/飛書群/釘釘群接受方式)_grafana做飛書機器人報警-CSDN博客 4 【prometheus+Grafana篇】基于Prometheus+Grafana實現Linux操作系統的監控與可視化-CSDN博客 5 【prometheus+Grafana篇】基于Prometheus+Grafana實現windows操作系統的監控與可視化_grafana 監控 windows-CSDN博客 6 【prometheus+Grafana篇】基于Prometheus+Grafana實現Oracle數據庫的監控與可視化-CSDN博客 7 【prometheus+Grafana篇】基于Prometheus+Grafana實現MySQL數據庫的監控與可視化-CSDN博客 8 【prometheus+Grafana篇】基于Prometheus+Grafana實現MongoDB數據庫的監控與可視化-CSDN博客 9 【prometheus+Grafana篇】基于Prometheus+Grafana實現Redis數據庫的監控與可視化-CSDN博客
? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
目錄
一、在Redis 6379實例上的操作
二、安裝redis_exporter(redis_exporter:是prometheus的一個插件,抓取和收集redis數據庫的各種運行指標用于分析。redis_exporter插件是GitHub開源組織提供的,通過GitHub官網下載redis_exporter)
1)下載redis_exporter安裝包,選擇download,然后點擊“Exporters and integrations”,選擇redis exporter
2)跳轉到了gitHub,點擊redis_exporter的版本集,選擇最新的redis_exporter下載
3)目前redis_exporter最新版本為1.67.0
4)解壓二進制redis_exporter包
5)移動并重命名redis_exporter解壓出來的目錄
6)創建prometheus用戶
7)賦權
8)寫入linux啟動服務項
9)登錄redis_exporter界面管理,默認端口為9121
三、將當前redis 6379實例加入到prometheus監控,并通過Grafana展示
1)將reids_exporter的信息加入到prometheus監控的配置文件prometheus.yml中
2)配置告警規則文件
3)檢查配置文件
4)prometheus.yml文件添加了信息,所以重啟prometheus進程或者重新加載配置文件(二選一)
5)在prometheus查看是否可以看到監控信息
6)登錄Grafana界面管理,將當前主機的監控信息做展示
一、下載一個儀表盤:Grafana官網“http://www.grafana.com”—Dashboard templates,然后選擇一個下載量高的自己喜歡的redis_exporter(redis監控)
二、將儀表盤添加到Grafana上:Dashboards—New—Import—點擊“Upload dashboard JSON file”
三、儀表盤展示:Dashboards—查看到已經定義好的儀表盤,并且數據源是prometheus監控,點擊進去
? ? ? ? ? ? ? ? ? ? ? ??
監控Redis信息如下:
主機名 | IP地址 | 配置 | 系統 | 描述 |
Redis | 10.2.1.117 | 4C 8G | Red Hat Linux 7.9 | 安裝redis_exporter對這臺服務器進行監控 |
redis_exporter:默認端口9121。抓取和收集Redis數據庫的各種運行指標用于分析
? ? ? ? ??
一、在Redis 6379實例上的操作
? ? 在 Redis?3.x/4.x/5.x中,沒有內置的用戶權限管理功能,也就是沒有數據庫用戶這個概念。在 Redis 6.x 或更高版本中支持了用戶權限管理功能,才能為數據庫創建用戶
? ? ? ? ? ? ? ? ??
二、安裝redis_exporter(redis_exporter:是prometheus的一個插件,抓取和收集redis數據庫的各種運行指標用于分析。redis_exporter插件是GitHub開源組織提供的,通過GitHub官網下載redis_exporter)
1)下載redis_exporter安裝包,選擇download,然后點擊“Exporters and integrations”,選擇redis exporter
?
?
?
? ? ? ? ? ? ? ?
2)跳轉到了gitHub,點擊redis_exporter的版本集,選擇最新的redis_exporter下載
?
? ? ? ? ? ? ? ?
PS:也可以直接在gitHub官網下載
一、通過gitHub(官網地址:https://github.com/)下載redis_exporter安裝包,在gitHub搜索“redis_exporter”。因為是開源,所以大家都是有時間才會開發,所以選擇一個最近更新的
?
二、點擊redis_exporter的版本集,選擇最新的redis_exporter下載
? ? ? ? ? ? ? ? ??
3)目前redis_exporter最新版本為1.67.0
? ? ? ? ? ?
4)解壓二進制redis_exporter包
[root@Redis ~]# tar -zxvf redis_exporter-v1.65.0.linux-amd64.tar.gz
? ? ? ? ? ?
5)移動并重命名redis_exporter解壓出來的目錄
[root@Redis ~]# mkdir -p /opt/prometheus [root@Redis ~]# mv redis_exporter-v1.65.0.linux-amd64 /opt/prometheus/ [root@Redis ~]# mv /opt/prometheus/redis_exporter-v1.65.0.linux-amd64 /opt/prometheus/redis_exporter
? ? ? ? ? ??
6)創建prometheus用戶
[root@Redis ~]# groupadd prometheus [root@Redis ~]# useradd -g prometheus -M -s /usr/sbin/nologin prometheus ---創建一個名為prometheus的系統賬號,該賬號沒有家目錄并且不能登錄Shell。這種設置適用于需要運行服務或任務而不需要用戶交互的情況。 -M:不為用戶創建家目錄。對于系統服務賬號來說,通常不需要家目錄,因此使用 -M 可以跳過家目錄的創建步驟。 -s /usr/sbin/nologin:指定用戶登錄時使用的Shell。將用戶prometheus的登錄Shell設置為/usr/sbin/nologin。nologin Shell的作用是阻止用戶登錄系統,但允許該用戶擁有有效的系統賬號。這通常用于服務賬號,因為它們不需要交互式Shell訪問,僅用于執行特定服務或任務。[root@Redis ~]# passwd prometheus [root@Redis ~]# id prometheus
? ? ? ? ??
7)賦權
[root@Redis ~]# chown -R prometheus:prometheus /opt/prometheus/redis_exporter
? ? ? ? ? ??
8)寫入linux啟動服務項
[root@Redis ~]# cd /usr/lib/systemd/system [root@Redis ~]# vi redis6379_exporter.service [Unit] Description=redis_exporter After=network.target[Service] Type=simple User=prometheus Group=prometheus Restart=on-failure ExecStart=/opt/prometheus/redis_exporter/redis_exporter -redis.addr "redis://10.2.1.117:6379" -redis.password eXql3MDpww --web.listen-address=0.0.0.0:9121[Install] WantedBy=multi-user.target [root@Redis ~]# systemctl daemon-reload [root@Redis ~]# systemctl start redis6379_exporter.service [root@Redis ~]# systemctl enable redis6379_exporter.service [root@Redis ~]# systemctl status redis6379_exporter.service
###-redis.addr:要抓取的Redis實例的地址(默認“redis://localhost:6379")
###-redis.password:指定連接redis的密碼。在 Redis?3.x/4.x/5.x中,沒有內置的用戶權限管理功能,也就是沒有數據庫用戶這個概念。在 Redis 6.x 或更高版本中支持了用戶權限管理功能,才能為數據庫創建用戶
###--web.listen-address=<address>:<port>:指定服務端口。Redis的抓取默認通過9121端口訪問redis_exporter管理界面,可以修改成其他端口用于訪問redis_exporter管理界面(如果沒有修改端口的需求可以不設置這個參數)。此參數只能在redis_exporter命令啟動時指定,不可以在配置文件prometheus.yml中指定。如果服務器上有多個實例,比如還有6380實例,那么需要再寫一個linux啟動項,并且通過-redis.addr參數指定redis數據源
? ? ? ? ? ? ? ??
9)登錄redis_exporter界面管理,默認端口為9121
http://10.2.1.117:9121/metrics
? ? ? ? ? ? ? ? ? ?
三、將當前redis 6379實例加入到prometheus監控,并通過Grafana展示
注意:如下操作是在安裝了prometheus和Grafana的主機上進行操作
? ? ? ? ? ? ?
1)將reids_exporter的信息加入到prometheus監控的配置文件prometheus.yml中
[root@prometheus ~]# vi /opt/prometheus/prometheus.yml 在scrape_configs下面新增如下內容:# redis_exporter配置 - job_name: "Redis監控" ###job_name 用來唯一標識一個監控任務。在同一個 prometheus.yml 文件中,不同的 scrape_config可以有不同的job_name,以便 Prometheus 能夠區分和管理不同的監控目標和配置,用來將不同的監控目標分組。單位為監控redis數據庫設置一個獨立的job_namescrape_interval: 15s ###指定這個job_name每隔多久從每個目標(如 Exporter、應用端點)拉取一次指標數據。優先級:會覆蓋全局的 global:scrape_interval(如果存在)。file_sd_configs:- files:- /data/prometheus/conf.d/redis_targets.json # redis需要監控的實例都單獨寫在了redis_targets.json文件中,是為了避免prometheus.yml內容過多,看起來更簡潔[root@prometheus ~]# vi /data/prometheus/conf.d/redis_targets.json ###因為使用的是16974 json模版,16974模版沒有定義太多的選項,所以只定義目標(targets)、實例信息(instance)即可 [{"targets": [ "10.2.1.117:9121" ],"labels": { "instance": "Redis數據庫(IP:10.2.1.117,端口:6379)" }} ]
? ? ? ? ? ? ? ? ?
2)配置告警規則文件
? ? 除了如下告警規則之外,還需要單獨配置一個Targets目標不可達(up)的相關規則,因為up 是一個布爾值指標,表示 Prometheus 是否能夠成功地 scrape(抓取)到指定的目標(targets)數據,用于判斷目標node-exporter相關進程是否在目標主機存活。關于up的規則文件參考:【prometheus+Grafana篇】從零開始:Linux 7.6 上二進制安裝 Prometheus、Grafana 和 Node Exporter_grafana二進制安裝-CSDN博客
[root@prometheus ~]# cd /opt/prometheus/rules/ ###在prometheus.yml文件中定義了告警規則文件rule_files參數 [root@prometheus rules]# vi redis_alerts.yml
? ? ? ? ?
3)檢查配置文件
[root@prometheus ~]# cd /opt/prometheus/ [root@prometheus ~]# ./promtool check config prometheus.yml ###用于檢查 Prometheus 配置文件(prometheus.yml)的語法和格式是否正確。
執行這條命令會執行以下操作:
- 驗證配置文件的語法:檢查 prometheus.yml 文件是否符合 Prometheus 配置格式規范。
- 檢測潛在的錯誤或警告:如果配置文件中存在拼寫錯誤、格式問題、無效的配置項等問題,它會提供相關的錯誤信息或警告。比如告警規則寫的不對,就會有提示
- 輸出有用的診斷信息:如果配置文件存在問題,promtool 會輸出詳細的錯誤信息。
? ? ? ? ? ??
4)prometheus.yml文件添加了信息,所以重啟prometheus進程或者重新加載配置文件(二選一)
#重載:前提是在prometheus.service啟動服務項中加了--web.enable-lifecycle參數:--web.enable-lifecycle:###啟用Prometheus的生命周期接口,允許通過HTTP請求來動態重新加載配置等操作。這對于在運行時更新配置或執行其他管理操作非常有用,當修改了prometheus的配置后,可以通過curl命令來重新加載配置文件,而不需要重啟prometheus(推薦方式)
[root@prometheus ~]# curl -X POST http://localhost:9090/-/reload
#重啟
[root@prometheus ~]# systemctl restart prometheus.service
? ? ? ? ? ? ? ? ?
5)在prometheus查看是否可以看到監控信息
網址:http://110.120.100.21:9090
菜單欄:Status—Targets
? ? ? ? ? ?
6)登錄Grafana界面管理,將當前主機的監控信息做展示
地址:http://110.120.100.21:3000
默認用戶:admin
默認密碼:admin
? ? ? ?
一、下載一個儀表盤:Grafana官網“http://www.grafana.com”—Dashboard templates,然后選擇一個下載量高的自己喜歡的redis_exporter(redis監控)
注意:不需要再增加數據源了。因為在第一次搭建prometheus+Grafana的時候就已經加好了,在添加數據源時,有個配置項是Connection,這里添加的是prometheus的地址,指的是prometheus監控服務器的地址,而不是node-exporter的地址
? ? ? ? ? ? ?
以763為例,涵蓋Redis多個維度的指標項
?? ? ? ? ? ??
二、將儀表盤添加到Grafana上:Dashboards—New—Import—點擊“Upload dashboard JSON file”
Name:定義名稱,最好定義為主機ip加用途
Prometheus:選擇prometheus源
....
然后import
? ? ? ? ? ?
三、儀表盤展示:Dashboards—查看到已經定義好的儀表盤,并且數據源是prometheus監控,點擊進去
儀表盤Name:大族機房Redis數據庫監控
數據源Name:prometheus監控
instance:這里其實就是當時已經在配置prometheus.yml時,定義的instance,也就是說Grafana會自動識別到
? ? 部署完成,歡迎取用。下期將帶來其他數據庫的監控實戰,敬請期待!持續學習,共同進步,我們下次見!🚀
??