SpringCloud - 整合MQ实现消息总线服务

一、背景介绍

每当修改配置文件内容,如果需要客户端也同步更新,就需要手动调用/refresh接口,以便客户端能获取到最新的配置内容。

当客户端越来越多的时候,通过人工进行处理显然非常鸡肋。有没有一种更加高效的办法,当手动调用其中一个客户端的/refresh接口,其它的客户端也自动更新?

在 Spring Cloud 体系里,有一个叫做 Spring Cloud Bus 模块,也被业界称为消息总线。它可以将分布式系统内的节点以消息代理方式连接起来,开发者可以通过消息代理服务向其它节点传输数据的变更,例如配置文件的更改,也可以用于收集节点监控数据。其中常用的消息代理服务有 RabbitMQ 和 Kafka。

换言之,我们可以借助 Spring Cloud Bus 模块来实现上文介绍的诉求,引入 Spring Cloud Bus 模块后,客户端获取远程配置文件的方式,可以用如下流程图来描述。
在这里插入图片描述

熟悉 MQ 服务的可能一眼就看出来了,其原理就是借助 MQ 服务的发布与订阅功能向其它节点进行广播数据,从而实现客户端自动刷新配置功能。

其交互流程可以用如下内容来概括。

1.当外部请求调用客户端 A 的/refresh接口后,除了主动刷新配置意外,还会通过 Spring Cloud Bus 模块,将刷新配置接口的指令数据发送到 MQ 服务器
2.MQ 服务器会将指令数据通过 Spring Cloud Bus 模块推送给其它客户端
3.客户端 B、C 接收到最新的消息指令后,主动调用刷新配置服务,获取最新的配置内容
下面我们通过具体的例子,结合之前介绍的知识,看看如何利用 Spring Cloud Bus 实现客户端配置文件自动刷新的效果。

二、方案实践

在此,我们采用 RabbitMQ 服务器来搭建消息总线,因此需要事先准备一台可用的 RabbitMQ 服务器,具体的安装教程之前有所介绍,大家也可以百度搜索一下,具体的安装过程就不再重复撰述。

2.1、添加依赖
根据eureka-config-client复制一个服务消费者工程,命名为eureka-config-client-bus,并在pom.xml中引入spring-cloud-starter-bus-amqp依赖包,示例如下:

<dependency><groupId>org.springframework.cloud</groupId><artifactId>spring-cloud-starter-bus-amqp</artifactId>
</dependency>

2.2、添加配置文件
接着,在bootstrap.properties配置文件中添加消息代理相关的属性信息,示例如下:

# 配置rabbitmq服务器地址
spring.rabbitmq.host=127.0.0.1
spring.rabbitmq.port=5672
spring.rabbitmq.username=guest
spring.rabbitmq.password=guest

2.3、服务测试
然后,依次将eureka-server、eureka-config-server、eureka-config-client-bus (分别在不同的端口上,比如9022、9023) 服务启动起来。访问 eureka 可视化页面,如果服务都正常,可以看到类似于如下的界面。
在这里插入图片描述

将远程仓库配置文件中的blog.name=hahaha修改成blog.name=hahaha123456,以便测试客户端配置文件是否能自动更新。

接着,向其中一个客户端发送一个/bus/refresh的 POST 请求。

需要注意的是,这里的路径是/bus/refresh,而不是/refresh

在这里插入图片描述

最后,在浏览器中重新访问另一个客户端读取配置文件的接口,不意外的话,客户端获取的是最新的配置信息。

说明客户端已经成功读取到最新的配置内容。

查看客户端的日志,也会看到类似于如下的信息。

Received remote refresh request. Keys refreshed [config.client.version, blog.name]

2.4、WebHook
可能有人会发出一个疑问,不可能每次修改仓库的配置文件,自己都需要手动调用/bus/refresh接口吧。

实际上,GIT 里面有个 WebHooks 功能,每次 push 代码后,我们可以利用它给远程 HTTP URL 发送一个 POST 请求,以此省去手动调用的工作。

在这里插入图片描述

操作非常简单,只需要将其中一个客户端/bus/refresh接口地址添加进去即可。需要注意的是,这里的 HTTP URL 必须是一个能请求通过的公网地址哈!

三、升级版

在以上的方案中,虽然我们利用消息总线实现了手动刷新一个客户端的配置文件更新,其它客户端也同步跟着一起刷新的目的,但在实际的实践过程中,发现还是有一些不便的地方。

例如客户端因为业务的快速迭代会频繁的发布服务,同时也会根据服务的并发量适度的增减服务实例数量,这种情况下,客户端的 IP 和端口会经常发生变动,每次人工运维起来会很繁琐。

因此,我们可以将上面的交互流程改变一下,由服务配置中心通过 Spring Cloud Bus 模块向客户端发送重刷配置文件的指令。

整个流程,可以用如下图来描述。
在这里插入图片描述

因为服务配置中心基本上很少会去迭代,客户端的 IP 和端口发生变动的可能性较小,由它向客户端推送消息,运维的工作量可以显著的下降。

改造的流程也很简单,只需要两步即可!

3.1、添加依赖
与上文类似,根据eureka-config-server复制一个服务消费者工程,命名为eureka-config-server-bus,并在pom.xml中引入spring-cloud-starter-bus-amqp依赖包,示例如下:

<dependencies><dependency><groupId>org.springframework.cloud</groupId><artifactId>spring-cloud-starter-eureka</artifactId></dependency><dependency><groupId>org.springframework.cloud</groupId><artifactId>spring-cloud-config-server</artifactId></dependency><dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-web</artifactId></dependency><dependency><groupId>org.springframework.cloud</groupId><artifactId>spring-cloud-starter-bus-amqp</artifactId></dependency>
</dependencies>

3.2、添加配置文件
接着,在application.properties中添加消息代理服务相关的属性,示例如下:

spring.application.name=eureka-config-server
server.port=9020# 配置git仓库地址
spring.cloud.config.server.git.uri=https://gitee.com/pzblogs/config-demo
spring.cloud.config.server.git.username=
spring.cloud.config.server.git.password=# 设置与Eureka Server交互的地址,多个地址可使用【,】分隔
eureka.client.serviceUrl.defaultZone=http://localhost:8001/eureka/# 关闭安全认证
management.security.enabled=false# 配置rabbitmq服务器地址
spring.rabbitmq.host=127.0.0.1
spring.rabbitmq.port=5672
spring.rabbitmq.username=guest
spring.rabbitmq.password=guest

3.3、服务测试
然后,依次将eureka-server、eureka-config-server-bus、eureka-config-client-bus服务启动起来。

接着,修改仓库中的配置文件内容,完成之后,以 POST 方式调用服务配置中心的刷新配置接口,例如http://localhost:9020/bus/refresh。

最后,在浏览器访问客户端http://localhost:9023/hello,不意外的话,能看到最新的信息。

四、小结

最后总结一下,当我们手动更新某个仓库配置文件的时候,想要实现所有客户端同时也自动更新配置,可以利用消息总线来实现节点之间数据的同步变更操作。

如果想要用 Kafka 来做消息代理服务,实现思路也类似,将bus-amqp换成bus-kafka,示例子如下

<dependency><groupId>org.springframework.cloud</groupId><artifactId>spring-cloud-starter-bus-kafka</artifactId>
</dependency>

最后在配置文件中添加 Kafka 相关服务地址配置参数即可。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.pswp.cn/news/906650.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

测试W5500的第3步_使用ioLibrary库创建TCPServer

W5500是一款具有8个Socket的网络芯片&#xff0c;支持TCP Server模式&#xff0c;最多可同时连接8个客户端。本文介绍了基于STM32F10x和W5500的TCP Server实现&#xff0c;包括SPI初始化、W5500复位、网络参数配置、Socket状态管理等功能&#xff0c;适用于需要多客户端连接的嵌…

Web攻防-SQL注入数据库类型用户权限架构分层符号干扰利用过程发现思路

知识点&#xff1a; 1、Web攻防-SQL注入-产生原理&应用因素 2、Web攻防-SQL注入-各类数据库类型利用 演示案例-WEB攻防-SQL注入-数据库类型&架构分层&符号干扰 一、数据库知识 1、数据库名&#xff0c;表名&#xff0c;列名&#xff0c;数据 2、自带数据库&…

手机合集(不定期更新)

一、华为手机&#xff1a; 1.华为手机自助维修的方法&#xff1a; https://blog.csdn.net/humors221/article/details/145946128 2.华为手机实用功能介绍&#xff1a; https://blog.csdn.net/humors221/article/details/132514011 3.华为手机清理大数据的方法&#xff1a;…

移动安全Android——ROOT检测绕过

工具准备 Magisk GitHub - topjohnwu/Magisk: The Magic Mask for Android ZygisckNext GitHub - Dr-TSNG/ZygiskNext at v1.2.8 Shamiko Releases LSPosed/LSPosed.github.io 安卓ROOT教程 Magisk 安装教程 - Magisk 中文网 问题 大多数手机在ROOT状态下会出现APP闪…

Python高效网络爬虫开发指南

Python 网络爬虫入门与实战 一、引言 随着互联网数据的爆炸性增长&#xff0c;获取和分析这些数据变得越来越重要。网络爬虫作为数据采集的重要工具&#xff0c;在这其中扮演了不可或缺的角色。 二、环境搭建 首先我们需要安装Python环境以及一些必要的库&#xff1a; req…

wireshark: Display Filter Reference

https://www.wireshark.org/docs/dfref/// 这个里面的扩展功能还是很强大&#xff0c;可以帮着问题分析。支持大量的自定义化的字段读取功能&#xff0c;支持很多的协议。 https://www.wireshark.org/docs/dfref///f/frame.html frame.time_delta Time delta from previous ca…

dify创建银行客服系统例子

传统的银行客服系统&#xff0c;通常以会话管理的方式实现&#xff0c;配置繁琐复杂&#xff0c;固定且不灵活。如&#xff1a; 智能体的出现&#xff0c;为实现银行客服系统提供了想象空间&#xff0c;可以集知识库和业务流程为一体实现灵活可控的智能客服系统&#xff0c;即能…

前端函数防抖(Debounce)完整讲解 - 从原理、应用到完整实现

&#x1f337; 古之立大事者&#xff0c;不惟有超世之才&#xff0c;亦必有坚忍不拔之志 &#x1f390; 个人CSND主页——Micro麦可乐的博客 &#x1f425;《Docker实操教程》专栏以最新的Centos版本为基础进行Docker实操教程&#xff0c;入门到实战 &#x1f33a;《RabbitMQ》…

服务接口鉴权与内部认证:自定义注解与AOP实现的企业级实践

本文深入解析企业级系统中接口安全管控的核心需求&#xff0c;提出基于Spring AOP与自定义注解的轻量级鉴权方案。通过解构注解元数据定义、切面拦截逻辑、上下文传递机制等关键技术环节&#xff0c;系统阐述零侵入式鉴权体系的构建路径。结合金融支付网关、多租户SaaS平台、物…

26考研|高等代数:线性变换

前言 线性变换这一章节是考频较高的一部分&#xff0c;此部分涉及考点较多&#xff0c;涉及的考题也较多&#xff0c;学习线性变换时&#xff0c;应该注意搭建线性变换与矩阵之间的联系&#xff0c;掌握如何利用矩阵表示一个线性变换结构&#xff0c;同时介绍了最简单的线性变…

电磁兼容(EMC)仿真(精编版)

写在前面 本系列文章主要讲解电磁兼容(EMC)仿真的相关知识,希望能帮助更多的同学认识和了解电磁兼容(EMC)仿真。 若有相关问题,欢迎评论沟通,共同进步。(*^▽^*) 随着产品复杂性和密集度的提高以及设计周期的不断缩短,在设计周期的后期解决电磁兼容性(EMC)问题变得…

解决:dpkg: error: dpkg frontend lock is locked by another process

1、等待其他进程完成 如果后台有其他包管理操作&#xff08;如自动更新、软件安装等&#xff09;&#xff0c;等待几分钟再重试。 可以通过以下命令查看是否有相关进程&#xff1a; ps aux | grep -E apt|apt-get|dpkg 2、强制终止占用锁的进程 如果确认没有其他包管理操作&…

LVGL(lv_textarea文本框控件)

文章目录 一、lv_textarea 是什么&#xff1f;二、基本用法1. 创建 lv_textarea 对象2. 设置提示文字&#xff08;占位符&#xff09;3. 设置最大长度4. 设置密码模式&#xff08;显示为\*号&#xff09;5. 获取和设置内容6. 配合虚拟键盘使用&#xff08;常用于触摸屏&#xf…

【Java高阶面经:数据库篇】18、分布式事务:如何在分库分表中实现高性能与一致性?

一、分布式事务核心挑战:分库分表下的一致性困境 在分布式系统架构中,分库分表通过将数据分散存储提升了扩展性和性能,但却打破了传统单库事务的边界,使得分布式事务成为保障数据一致性的核心难题。其挑战主要体现在以下三方面: 1.1 ACID特性的分布式撕裂 原子性(Atomi…

【云呐】房地产企业固定资产如何管理

房产类固定资产如办公楼、门面房、宿舍楼、库房等&#xff0c;价值高、使用年限长、权属复杂、变更流程多&#xff0c;是企业最为关键的资产类型之一。管理房产类资产不仅要“看得到”&#xff0c;更要“管得住”。 房产资产管理应从权属明确开始。固定资产管理系统支持房产资产…

oracle数据库生成awr报告,排查数据库服务器CPU100%,系统卡顿,慢sql,根据sqlid查询关键信息,如会话SID,客户端机器名

AWR报告简介 AWR是Oracle 10g版本推出的特性,全称叫做 Automatic Workload Repository 全自动负载信息库 。Oracle启动后,会有后台进程定时采集并保存系统快照信息,也可以手工创建快照。AWR通过对比两个时间点的快照信息,生成该时间段的AWR报告,帮助DBA或开发人员了解 Ora…

kafka吞吐量提升总结

前言 原本自以为阅读了很久kafka的源码&#xff0c;对于kafka的了解已经深入到一定程度了&#xff0c;后面在某大厂的面试中&#xff0c;面试官询问我&#xff0c;如果需要提升kafka的性能&#xff0c;应该怎么做&#xff0c;我发现我能答上来的点非常的少&#xff0c;也暴露了…

鸿蒙 HarmonyOS NEXT 系统 Preference 首选项使用全解析

鸿蒙HarmonyOS系统Preference首选项使用全解析 大家好&#xff0c;我是威哥。在鸿蒙应用开发里&#xff0c;用户偏好设置的管理是极为重要的一环。HarmonyOS为我们提供了Preference组件&#xff0c;它能让我们轻松实现应用设置界面&#xff0c;对用户首选项进行高效管理。接下…

xdc约束学习

对clk的约束 //约束clk为 125M Hz create_clock -period 8.000 -name gt_refclk1_p -waveform {0.000 4.000} [get_ports gt_refclk1_p] 伪时钟路径&#xff0c;用于两个时钟域之间数据的交互 单边性&#xff08;unateness&#xff09;对于时序很重要&#xff0c;因为它指定的…

在 Ubuntu 虚拟机中实现 HTML 表单与 C 语言 HTTP 服务器交互

一、环境说明 系统&#xff1a;Ubuntu 虚拟机&#xff08;已安装基本开发工具&#xff0c;如 GCC&#xff09;目标&#xff1a;通过 C 语言服务器托管 HTML 表单页面&#xff0c;并实现数据提交交互 二、核心文件准备 1. 创建 HTML 表单页面&#xff08;xunfei.html&#xf…