【prometheus+Grafana篇】基于Prometheus+Grafana实现Redis数据库的监控与可视化

💫《博主主页》:

           🔎 CSDN主页

           🔎 IF Club社区主页

🔥《擅长领域》:擅长阿里云AnalyticDB for MySQL(分布式数据仓库)、Oracle、MySQL、Linux、prometheus监控;并对SQLserver、NoSQL(MongoDB)有了解

💖如果觉得文章对你有所帮助,欢迎点赞收藏加关注💖

    【周末充电⚡️+摸鱼🐟】刚研究完MySQL的行格式,技术人的周末果然离不开学习与放松的完美平衡!今天这篇文章咱们继续分享—— 使用Prometheus+Grafana打造专业的Redis监控系统 ,不仅能实时采集关键指标,还能配置炫酷可视化和智能告警,让数据库健康状态一目了然!

    文中会手把手部署redis_exporter、配置Prometheus抓取数据,再通过Grafana设计直观的监控面板,也会分享几个超实用的Redis告警规则,帮各位提前规避线上风险。话不多说,直接上操作,让你的Redis享受24小时的监护!🚀

                    

特别说明💥:

📌 开源仪表盘引用

  • 本文采用的Redis数据库监控仪表盘直接使用了Grafana官网开源项目(Dashboard ID: 763),非常感谢原作者(oliver006)的无私分享。关于Grafana的所有配置步骤均基于该开源仪表盘并验证通过,各位可一键导入快速搭建专业级的可视化监控。

                                                         

⚡ 原创告警规则实现

  • 关于告警部分为博主独立开发完成,针对Redis数据库实现了如下告警:

    • ✅ Redis 实例不可用

    • ✅ Redis 内存使用率过高

                                                  

🔗 Prometheus+Grafana监控Redis全流程

                

                 

prometheus+Grafana全系列文章(实时更新🔥):

序号文章
1【prometheus+Grafana篇】Prometheus与Grafana:深入了解监控架构与数据可视化分析平台-CSDN博客
2【prometheus+Grafana篇】从零开始:Linux 7.6 上二进制安装 Prometheus、Grafana 和 Node Exporter_grafana二进制部署-CSDN博客
3【prometheus+Grafana篇】Prometheus告警规则参数全解析 + Alertmanager实现多平台告警(含电子邮件/企业微信群/飞书群/钉钉群接受方式)_grafana做飞书机器人报警-CSDN博客
4【prometheus+Grafana篇】基于Prometheus+Grafana实现Linux操作系统的监控与可视化-CSDN博客
5【prometheus+Grafana篇】基于Prometheus+Grafana实现windows操作系统的监控与可视化_grafana 监控 windows-CSDN博客
6【prometheus+Grafana篇】基于Prometheus+Grafana实现Oracle数据库的监控与可视化-CSDN博客
7【prometheus+Grafana篇】基于Prometheus+Grafana实现MySQL数据库的监控与可视化-CSDN博客
8【prometheus+Grafana篇】基于Prometheus+Grafana实现MongoDB数据库的监控与可视化-CSDN博客
9【prometheus+Grafana篇】基于Prometheus+Grafana实现Redis数据库的监控与可视化-CSDN博客

                                             

目录

一、在Redis 6379实例上的操作

二、安装redis_exporter(redis_exporter:是prometheus的一个插件,抓取和收集redis数据库的各种运行指标用于分析。redis_exporter插件是GitHub开源组织提供的,通过GitHub官网下载redis_exporter)

1)下载redis_exporter安装包,选择download,然后点击“Exporters and integrations”,选择redis exporter

2)跳转到了gitHub,点击redis_exporter的版本集,选择最新的redis_exporter下载

3)目前redis_exporter最新版本为1.67.0

4)解压二进制redis_exporter包

5)移动并重命名redis_exporter解压出来的目录

6)创建prometheus用户

7)赋权

8)写入linux启动服务项

9)登录redis_exporter界面管理,默认端口为9121

三、将当前redis 6379实例加入到prometheus监控,并通过Grafana展示

1)将reids_exporter的信息加入到prometheus监控的配置文件prometheus.yml中

2)配置告警规则文件

3)检查配置文件

4)prometheus.yml文件添加了信息,所以重启prometheus进程或者重新加载配置文件(二选一)

5)在prometheus查看是否可以看到监控信息

6)登录Grafana界面管理,将当前主机的监控信息做展示

一、下载一个仪表盘:Grafana官网“http://www.grafana.com”—Dashboard templates,然后选择一个下载量高的自己喜欢的redis_exporter(redis监控)

二、将仪表盘添加到Grafana上:Dashboards—New—Import—点击“Upload dashboard JSON file”

三、仪表盘展示:Dashboards—查看到已经定义好的仪表盘,并且数据源是prometheus监控,点击进去


                        

监控Redis信息如下:

主机名

IP地址

配置

系统

描述

Redis

10.2.1.117

4C 8G

Red Hat Linux 7.9

安装redis_exporter对这台服务器进行监控

redis_exporter:默认端口9121。抓取和收集Redis数据库的各种运行指标用于分析

          

一、在Redis 6379实例上的操作

    在 Redis 3.x/4.x/5.x,没有内置的用户权限管理功能,也就是没有数据库用户这个概念。在 Redis 6.x 或更高版本中支持了用户权限管理功能,才能为数据库创建用户

                  

二、安装redis_exporter(redis_exporter:是prometheus的一个插件,抓取和收集redis数据库的各种运行指标用于分析。redis_exporter插件是GitHub开源组织提供的,通过GitHub官网下载redis_exporter

1)下载redis_exporter安装包,选择download,然后点击“Exporters and integrations”,选择redis exporter

               

2)跳转到了gitHub,点击redis_exporter的版本集,选择最新的redis_exporter下载

               

PS:也可以直接在gitHub官网下载

一、通过gitHub(官网地址:https://github.com/)下载redis_exporter安装包,在gitHub搜索“redis_exporter”。因为是开源,所以大家都是有时间才会开发,所以选择一个最近更新的

二、点击redis_exporter的版本集,选择最新的redis_exporter下载

                  

3)目前redis_exporter最新版本为1.67.0

           

4)解压二进制redis_exporter包

[root@Redis ~]# tar -zxvf redis_exporter-v1.65.0.linux-amd64.tar.gz

           

5)移动并重命名redis_exporter解压出来的目录

[root@Redis ~]# mkdir -p /opt/prometheus
[root@Redis ~]# mv redis_exporter-v1.65.0.linux-amd64 /opt/prometheus/
[root@Redis ~]# mv /opt/prometheus/redis_exporter-v1.65.0.linux-amd64 /opt/prometheus/redis_exporter

            

6)创建prometheus用户

[root@Redis ~]# groupadd prometheus
[root@Redis ~]# useradd -g prometheus -M -s /usr/sbin/nologin prometheus     ---创建一个名为prometheus的系统账号,该账号没有家目录并且不能登录Shell。这种设置适用于需要运行服务或任务而不需要用户交互的情况。
-M:不为用户创建家目录。对于系统服务账号来说,通常不需要家目录,因此使用 -M 可以跳过家目录的创建步骤。
-s /usr/sbin/nologin:指定用户登录时使用的Shell。将用户prometheus的登录Shell设置为/usr/sbin/nologin。nologin Shell的作用是阻止用户登录系统,但允许该用户拥有有效的系统账号。这通常用于服务账号,因为它们不需要交互式Shell访问,仅用于执行特定服务或任务。[root@Redis ~]# passwd prometheus
[root@Redis ~]# id prometheus

          

7)赋权

[root@Redis ~]# chown -R prometheus:prometheus /opt/prometheus/redis_exporter

            

8)写入linux启动服务项

[root@Redis ~]# cd /usr/lib/systemd/system
[root@Redis ~]# vi redis6379_exporter.service
[Unit]
Description=redis_exporter
After=network.target[Service]
Type=simple
User=prometheus
Group=prometheus
Restart=on-failure
ExecStart=/opt/prometheus/redis_exporter/redis_exporter -redis.addr "redis://10.2.1.117:6379" -redis.password eXql3MDpww --web.listen-address=0.0.0.0:9121[Install]
WantedBy=multi-user.target
[root@Redis ~]# systemctl daemon-reload
[root@Redis ~]# systemctl start redis6379_exporter.service
[root@Redis ~]# systemctl enable redis6379_exporter.service
[root@Redis ~]# systemctl status redis6379_exporter.service

###-redis.addr:要抓取的Redis实例的地址(默认“redis://localhost:6379")

###-redis.password:指定连接redis的密码。在 Redis 3.x/4.x/5.x中,没有内置的用户权限管理功能,也就是没有数据库用户这个概念。在 Redis 6.x 或更高版本中支持了用户权限管理功能,才能为数据库创建用户

###--web.listen-address=<address>:<port>:指定服务端口。Redis的抓取默认通过9121端口访问redis_exporter管理界面,可以修改成其他端口用于访问redis_exporter管理界面(如果没有修改端口的需求可以不设置这个参数)。此参数只能在redis_exporter命令启动时指定,不可以在配置文件prometheus.yml中指定。如果服务器上有多个实例,比如还有6380实例,那么需要再写一个linux启动项,并且通过-redis.addr参数指定redis数据源

                

9)登录redis_exporter界面管理,默认端口为9121

http://10.2.1.117:9121/metrics

                   

三、将当前redis 6379实例加入到prometheus监控,并通过Grafana展示

注意:如下操作是在安装了prometheus和Grafana的主机上进行操作

             

1)将reids_exporter的信息加入到prometheus监控的配置文件prometheus.yml中

[root@prometheus ~]# vi /opt/prometheus/prometheus.yml     
在scrape_configs下面新增如下内容:# redis_exporter配置              - job_name: "Redis监控"              ###job_name 用来唯一标识一个监控任务。在同一个 prometheus.yml 文件中,不同的 scrape_config可以有不同的job_name,以便 Prometheus 能够区分和管理不同的监控目标和配置,用来将不同的监控目标分组。单位为监控redis数据库设置一个独立的job_namescrape_interval: 15s               ###指定这个job_name每隔多久从每个目标(如 Exporter、应用端点)拉取一次指标数据。优先级:会覆盖全局的 global:scrape_interval(如果存在)。file_sd_configs:- files:- /data/prometheus/conf.d/redis_targets.json            # redis需要监控的实例都单独写在了redis_targets.json文件中,是为了避免prometheus.yml内容过多,看起来更简洁[root@prometheus ~]# vi /data/prometheus/conf.d/redis_targets.json        ###因为使用的是16974 json模版,16974模版没有定义太多的选项,所以只定义目标(targets)、实例信息(instance)即可
[{"targets": [ "10.2.1.117:9121" ],"labels": { "instance": "Redis数据库(IP:10.2.1.117,端口:6379)" }}
]

                 

2)配置告警规则文件

    除了如下告警规则之外,还需要单独配置一个Targets目标不可达(up)的相关规则,因为up 是一个布尔值指标,表示 Prometheus 是否能够成功地 scrape(抓取)到指定的目标(targets)数据,用于判断目标node-exporter相关进程是否在目标主机存活。关于up的规则文件参考:【prometheus+Grafana篇】从零开始:Linux 7.6 上二进制安装 Prometheus、Grafana 和 Node Exporter_grafana二进制安装-CSDN博客

[root@prometheus ~]# cd /opt/prometheus/rules/    ###在prometheus.yml文件中定义了告警规则文件rule_files参数
[root@prometheus rules]# vi redis_alerts.yml 

         

3)检查配置文件

[root@prometheus ~]# cd /opt/prometheus/
[root@prometheus ~]# ./promtool check config prometheus.yml      ###用于检查 Prometheus 配置文件(prometheus.yml)的语法和格式是否正确。

执行这条命令会执行以下操作:

  1. 验证配置文件的语法:检查 prometheus.yml 文件是否符合 Prometheus 配置格式规范。
  2. 检测潜在的错误或警告:如果配置文件中存在拼写错误、格式问题、无效的配置项等问题,它会提供相关的错误信息或警告。比如告警规则写的不对,就会有提示
  3. 输出有用的诊断信息:如果配置文件存在问题,promtool 会输出详细的错误信息。

            

4)prometheus.yml文件添加了信息,所以重启prometheus进程或者重新加载配置文件(二选一)

#重载:前提是在prometheus.service启动服务项中加了--web.enable-lifecycle参数:--web.enable-lifecycle:###启用Prometheus的生命周期接口,允许通过HTTP请求来动态重新加载配置等操作。这对于在运行时更新配置或执行其他管理操作非常有用,当修改了prometheus的配置后,可以通过curl命令来重新加载配置文件,而不需要重启prometheus(推荐方式)

[root@prometheus ~]# curl -X POST http://localhost:9090/-/reload

#重启

[root@prometheus ~]# systemctl restart prometheus.service

                 

5)在prometheus查看是否可以看到监控信息

网址:http://110.120.100.21:9090

菜单栏:Status—Targets

           

6)登录Grafana界面管理,将当前主机的监控信息做展示

地址:http://110.120.100.21:3000

默认用户:admin

默认密码:admin

       

一、下载一个仪表盘:Grafana官网“http://www.grafana.com”—Dashboard templates,然后选择一个下载量高的自己喜欢的redis_exporter(redis监控)

注意:不需要再增加数据源了。因为在第一次搭建prometheus+Grafana的时候就已经加好了,在添加数据源时,有个配置项是Connection,这里添加的是prometheus的地址,指的是prometheus监控服务器的地址,而不是node-exporter的地址

             

以763为例,涵盖Redis多个维度的指标项

             

二、将仪表盘添加到Grafana上:Dashboards—New—Import—点击“Upload dashboard JSON file”

Name:定义名称,最好定义为主机ip加用途

Prometheus:选择prometheus源

....

然后import

           

三、仪表盘展示:Dashboards—查看到已经定义好的仪表盘,并且数据源是prometheus监控,点击进去

仪表盘Name:大族机房Redis数据库监控

数据源Name:prometheus监控

instance:这里其实就是当时已经在配置prometheus.yml时,定义的instance,也就是说Grafana会自动识别到


    部署完成,欢迎取用。下期将带来其他数据库的监控实战,敬请期待!持续学习,共同进步,我们下次见!🚀

  

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.pswp.cn/pingmian/84450.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

R语言速释制剂QBD解决方案之四

本文是《Quality by Design for ANDAs: An Example for Immediate-Release Dosage Forms》速释制剂混合和润滑工艺研究的R语言解决方案。 原料粒径分布与混合次数对混合均一性的影响 由于acetriptan 的溶解度低&#xff0c;acetriptan 需要粉碎以提高生物利用度。粉碎后的原料…

用python玩转大语言模型——从 RNN 到文本生成大语言模型的奇幻之旅

用python玩转大语言模型——从 RNN 到文本生成大语言模型的奇幻之旅 第一部分:RNN原理及其结构(魔法师的记忆水晶球) 1.1 经典RNN结构(时光旅行者的备忘录) 核心概念 时间循环:RNN通过隐藏状态h在时间步之间传递信息,形成闭环结构参数共享:每个时间步使用相同的权重…

数据结构(9)排序

一、常见排序算法 排序在生活中无处不在&#xff0c;上学这么多年班级排名啥的总有吧&#xff0c;不可能一次都没见过&#xff1b;打游戏有的排行榜不也是有排序的思想在里面&#xff0c;排序倒不是什么特殊的数据结构&#xff0c;但是是非常重要的算法思想&#xff0c;所以在初…

量子计算导论课程设计 之 PennyLane环境搭建

文章目录 具体配置conda 虚拟环境配置Pennylane 正所谓&#xff0c;磨刀不误砍柴工&#xff0c;想要进行量子计算导论的课程设计&#xff0c;首先就是搭建好平台&#xff0c;推荐大家就是本地搭建&#xff0c;那么下面有三种选择 QiskitTensorFlow QuantumPennylane 具体配置…

nginx ./nginx -s reload 不生效

问题 nginx ./nginx -s reload 不生效 解决 不是改opt/nginx下的配置文件是改/usr/local/nginx下的配置文件改之前做好备份

建造者模式深度解析与实战应用

作者简介 我是摘星&#xff0c;一名全栈开发者&#xff0c;专注 Java后端开发、AI工程化 与 云计算架构 领域&#xff0c;擅长Python技术栈。热衷于探索前沿技术&#xff0c;包括大模型应用、云原生解决方案及自动化工具开发。日常深耕技术实践&#xff0c;乐于分享实战经验与…

VScode - 我的常用插件01 - 主题插件Noctis

导言 Noctis 是一款为 Visual Studio Code 提供的主题插件&#xff0c;主打高对比度、护眼、美观。它有多种配色风格&#xff0c;适合不同的开发者审美和工作场景。 一、安装Noctis 二、设置颜色主题 三、测试主题 如上所示&#xff0c;有11种主题背景可以选择。这里&#xff…

【IQA技术专题】图像质量评价IQA技术和应用综述(万字长文!!)

专题介绍 图像质量评价&#xff08;Image Quality Assessment, IQA&#xff09;是图像处理、计算机视觉和多媒体通信等领域的关键技术之一。IQA不仅被用于学术研究&#xff0c;更在影像相关行业内实现了完整的商业化应用&#xff0c;涉及影视、智能手机、专业相机、安防监控、…

突然虚拟机磁盘只剩下几十K

第一步&#xff1a;查找哪些文件大于 100M find / -size 100M 第二步&#xff1a;删除掉无用的 log 发现&#xff0c;磁盘剩余空间并没有变大 假如一个文件正在被使用&#xff0c;你删除之后也是不会释放存储空间的。需要关闭相应的服务才能释放。

黑马教程强化day2-1

目录 一、Set集合1.Set集合特点2.Set集合分类3.hashSet底层原理&#xff1a;(基于哈希表存储数据的&#xff09;代码演示 5.hashSet集合元素的去重操作&#xff08;有些情况搞不动&#xff09;代码演示 6.LinkedHashSet的底层原理&#xff08;不常用&#xff0c;所以没有代码演…

【实习总结】C++ 通过pugi::xml库对xml文件进行操作

目录 相关背景 pugi::xml简概 将配置信息写入xml文件 读取xml文件中的配置信息 相关背景 当我们需要将某些配置信息写入项目目录下的xml文件&#xff0c;或者再程序启动时&#xff0c;加载项目下已有的的配置信息&#xff08;.xml&#xff09;&#xff0c;此时&#xff0c;我…

Linux文件回收机制:安全删除文件不怕误删

Linux文件回收机制&#xff1a;安全删除文件不怕误删 文章目录 Linux文件回收机制&#xff1a;安全删除文件不怕误删一、Linux默认没有“回收站”&#xff1f;二、打造你自己的Linux回收站1. 建立回收站目录2. 创建软删除命令remove3. 定时清理回收站4. 替换rm命令5. 完整脚本 …

数据结构排序

目录 1、插入排序 2、希尔排序 3、堆排序 4、直接选择排序 5、快排 6、归并排序 补&#xff1a;计数排序 1、插入排序 void InsertSort(int* arr, int n) {int i 0;for (int i 0; i 1 < n; i){int end i;int tmp arr[end 1];while (end > 0){if (arr[end] &…

Spring声明式事务生效是有条件滴!

在日常工作中&#xff0c;经常使用Transactional 注解进行事务的声明&#xff0c;但如果发现事务未生效&#xff0c;可以从下面几个方面进行排查。 常见失效场景总结 场景原因解决方案内部方法调用绕过了Spring代理注入自身或使用AopContextprivate方法AOP无法增强改为public方…

Code Composer Studio快捷键

文本编辑 编辑、查找、替换功能快捷键 功能快捷键撤销CutZ重做CutY剪切CtrlX复制CtrlC粘贴CtrlV删除Delete全选CtrlA代码块选中AltShiftA查找、替换Ctrl F查找下一个匹配的字符串CtrlK查找上一个匹配的字符串CtrlShiftK查看接口注释&#xff08;文档&#xff09;F2查看函数帮…

从认识AI开始-----生成对抗网络(GAN):通过博弈机制,引导生成

前言 生成对抗网络&#xff08;GAN&#xff09;是lan J. Goodfellow团队在2014年提出的生成架构&#xff0c; 该架构自诞生起&#xff0c;就产生了很多的话题&#xff0c;更是被称为生成对抗网络是“新世纪以来机器学习领域内最有趣的想法”。如今&#xff0c;基于生成对抗网络…

限流算法java实现

参考教程&#xff1a;2小时吃透4种分布式限流算法 1.计数器限流 public class CounterLimiter {// 开始时间private static long startTime System.currentTimeMillis();// 时间间隔&#xff0c;单位为msprivate long interval 1000L;// 限制访问次数private int limitCount…

Maven 构建性能优化深度剖析:原理、策略与实践

&#x1f9d1; 博主简介&#xff1a;CSDN博客专家&#xff0c;历代文学网&#xff08;PC端可以访问&#xff1a;https://literature.sinhy.com/#/?__c1000&#xff0c;移动端可微信小程序搜索“历代文学”&#xff09;总架构师&#xff0c;15年工作经验&#xff0c;精通Java编…

JS手写代码篇---手写深拷贝

17、深拷贝 深拷贝与浅拷贝最大的不同就是对象的属性是嵌套对象&#xff0c;会新建一个对象 步骤&#xff1a; 判断是否为对象判断是否为i数组或者对象&#xff0c;给新的有个容器遍历循环&#xff0c;如果是对象要遍历循环&#xff0c;采用递归 function deepCopy(obj){// …

【react实战】如何实现监听窗口大小变化

在日常开发场景中&#xff0c;监听窗口变化是一个比较常见又很重要的业务功能&#xff0c;其实实现起来也很简单&#xff0c;今天就来记录一下具体的实现以及注意事项。 实现思路 在 React 中&#xff0c;可以通过监听 window 的 resize 事件来检测可视区域&#xff08;viewp…