RabbitMQ 教程 - 远程过程调用 (RPC)
远程过程调用 (RPC)
(使用 Spring AMQP)
先决条件
本教程假设 RabbitMQ 已 安装 并在 localhost 上的 标准端口 (5672) 上运行。如果您使用不同的主机、端口或凭据,则需要调整连接设置。
哪里寻求帮助
如果您在学习本教程时遇到困难,可以通过 GitHub Discussions 或 RabbitMQ 社区 Discord 联系我们。
在第二个教程中,我们学习了如何使用工作队列在多个工作进程之间分发耗时的任务。
但是,如果我们需要在远程计算机上运行一个函数并等待结果呢?嗯,那又是另一回事了。这种模式通常被称为远程过程调用或RPC。
在本教程中,我们将使用 RabbitMQ 来构建一个 RPC 系统:一个客户端和一个可扩展的 RPC 服务器。由于我们没有什么值得分发的耗时任务,我们将创建一个返回斐波那契数的虚拟 RPC 服务。
客户端接口
为了说明 RPC 服务如何使用,我们将把我们的配置文件的名称从“Sender”和“Receiver”更改为“Client”和“Server”。当我们调用服务器时,我们将获得调用时传递的参数的斐波那契数列。
Integer response = (Integer) template.convertSendAndReceive
(exchange.getName(), "rpc", start++);
System.out.println(" [.] Got '" + response + "'");
关于 RPC 的说明
尽管 RPC 在计算领域是一种相当普遍的模式,但它经常受到批评。当程序员不知道函数调用是本地的还是慢速的 RPC 时,就会出现问题。这样的混淆会导致系统不可预测,并增加调试的复杂性。滥用的 RPC 可能导致难以维护的意大利面条式代码,而不是简化软件。
牢记这一点,请考虑以下建议:
- 确保明确哪些函数调用是本地的,哪些是远程的。
- 记录你的系统。明确组件之间的依赖关系。
- 处理错误情况。当 RPC 服务器长时间关闭时,客户端应该如何反应?
如果不确定,请避免使用 RPC。如果可能,你应该使用异步管道——而不是 RPC 类的阻塞,结果会异步推送到下一个计算阶段。
回调队列
RabbitMQ 中的请求-响应模式涉及服务器和客户端之间的直接交互。客户端发送请求消息,服务器用响应消息进行回复。为了接收响应,我们需要在请求中发送一个“回调”队列地址。当我们使用上面的 convertSendAndReceive() 方法时,Spring AMQP 的 RabbitTemplate 会为我们处理回调队列。在使用 RabbitTemplate 时,无需进行任何其他设置。有关详细说明,请参阅请求/响应消息。
消息属性
AMQP 0-9-1 协议预定义了一组 14 个消息属性。大多数属性很少使用,除了以下几点:
deliveryMode:将消息标记为持久(值为2)或瞬时(任何其他值)。您可能还记得第二个教程中的此属性。contentType:用于描述编码的 mime 类型。例如,对于常用的 JSON 编码,最好将此属性设置为:application/json。replyTo:通常用于命名回调队列。correlationId:用于将 RPC 响应与请求相关联。
相关 ID
Spring AMQP 允许您专注于您正在使用的消息样式,并隐藏支持此样式所需的消息管道细节。例如,通常本地客户端会为每个 RPC 请求创建一个回调队列。这效率很低,因此另一种选择是为每个客户端创建一个回调队列。
这会引发一个新问题,即收到队列中的响应后,不清楚响应属于哪个请求。这时就会用到 correlationId 属性。Spring AMQP 会为每个请求自动设置一个唯一值。此外,它还会处理将响应与正确的 correlationID 匹配的细节。
Spring AMQP 使 RPC 样式更容易的一个原因是因为有时您可能希望忽略回调队列中的未知消息,而不是因错误而失败。这是因为服务器端可能存在竞态条件。尽管不太可能,但 RPC 服务器有可能在我们发送答案后,但在发送请求的确认消息之前就已崩溃。如果发生这种情况,重新启动的 RPC 服务器将再次处理该请求。Spring AMQP 客户端可以优雅地处理重复响应,并且 RPC 最好是幂等的。
总结
我们的 RPC 将按如下方式工作:
Tut6Config将设置一个新的DirectExchange和一个客户端- 客户端将利用
convertSendAndReceive方法,传递交换名称、路由键和消息。 - 请求被发送到一个 RPC 队列
tut.rpc。 - RPC 工作进程(又名:服务器)在该队列上等待请求。当出现请求时,它会执行任务,并使用
replyTo字段中的队列将包含结果的消息发回给客户端。 - 客户端在回调队列上等待数据。当消息出现时,它会检查
correlationId属性。如果它与请求中的值匹配,它会将响应返回给应用程序。同样,这一切都是通过RabbitTemplate自动完成的。
总而言之
斐波那契任务是一个 @RabbitListener,定义如下:
public int fib(int n) {
return n == 0 ? 0 : n == 1 ? 1 : (fib(n - 1) + fib(n - 2));
}
我们声明了我们的斐波那契函数。它假定输入仅为有效的正整数。(不要期望它能处理大数字,而且这可能是你能找到的最慢的递归实现)。
我们的 Tut6Config 类的代码如下:
import org.springframework.amqp.core.Binding;
import org.springframework.amqp.core.BindingBuilder;
import org.springframework.amqp.core.DirectExchange;
import org.springframework.amqp.core.Queue;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;
import org.springframework.context.annotation.Profile;
@Profile({"tut6","rpc"})
@Configuration
public class Tut6Config {
@Profile("client")
private static class ClientConfig {
@Bean
public DirectExchange exchange() {
return new DirectExchange("tut.rpc");
}
@Bean
public Tut6Client client() {
return new Tut6Client();
}
}
@Profile("server")
private static class ServerConfig {
@Bean
public Queue queue() {
return new Queue("tut.rpc.requests");
}
@Bean
public DirectExchange exchange() {
return new DirectExchange("tut.rpc");
}
@Bean
public Binding binding(DirectExchange exchange,
Queue queue) {
return BindingBuilder.bind(queue)
.to(exchange)
.with("rpc");
}
@Bean
public Tut6Server server() {
return new Tut6Server();
}
}
}
它将我们的配置文件设置为 tut6 或 rpc。它还设置了一个带有 2 个 bean 的 client 配置文件:我们正在使用的 DirectExchange 和 Tut6Client 本身。我们还配置了一个带有 3 个 bean 的 server 配置文件:tut.rpc.requests 队列、DirectExchange(与客户端的交换匹配)以及从队列到交换的、带有 rpc 路由键的绑定。
服务器代码相当直接。
- 像往常一样,我们开始用
@RabbitListener注释我们的接收者方法,并定义它正在监听的队列。 - 我们的斐波那契方法使用 payload 参数调用 fib() 并返回结果。
我们的 RPC 服务器 Tut6Server.java 的代码
package org.springframework.amqp.tutorials.tut6;
import org.springframework.amqp.rabbit.annotation.RabbitListener;
public class Tut6Server {
@RabbitListener(queues = "tut.rpc.requests")
// @SendTo("tut.rpc.replies") used when the
// client doesn't set replyTo.
public int fibonacci(int n) {
System.out.println(" [x] Received request for " + n);
int result = fib(n);
System.out.println(" [.] Returned " + result);
return result;
}
public int fib(int n) {
return n == 0 ? 0 : n == 1 ? 1 : (fib(n - 1) + fib(n - 2));
}
}
客户端代码 Tut6Client 和服务器一样简单。
- 我们自动注入
RabbitTemplate和Tut6Config中定义的DirectExchangebean。 - 我们使用交换名称、路由键和消息作为参数调用
template.convertSendAndReceive。 - 我们打印结果。
发起客户端请求非常简单。
import org.springframework.amqp.core.DirectExchange;
import org.springframework.amqp.rabbit.core.RabbitTemplate;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.scheduling.annotation.Scheduled;
public class Tut6Client {
@Autowired
private RabbitTemplate template;
@Autowired
private DirectExchange exchange;
int start = 0;
@Scheduled(fixedDelay = 1000, initialDelay = 500)
public void send() {
System.out.println(" [x] Requesting fib(" + start + ")");
Integer response = (Integer) template.convertSendAndReceive
(exchange.getName(), "rpc", start++);
System.out.println(" [.] Got '" + response + "'");
}
}
使用第一个教程中定义的项目设置以及 start.spring.io 和 Spring Initializr,运行时环境的准备与其他教程相同。
./mvnw clean package
我们可以通过以下方式启动服务器:
java -jar target/rabbitmq-tutorials.jar \
--spring.profiles.active=rpc,server \
--tutorial.client.duration=60000
要请求一个斐波那契数,请运行客户端:
java -jar target/rabbitmq-tutorials.jar \
--spring.profiles.active=rpc,client
这里提出的设计并不是 RPC 服务唯一可能的实现方式,但它具有一些重要的优点:
- 如果 RPC 服务器太慢,您可以通过运行另一个服务器来扩展。尝试在新控制台中运行第二个
RPCServer。 - 在客户端,RPC 需要通过一个方法发送和接收一条消息。不需要像
queueDeclare这样的同步调用。因此,RPC 客户端对于单个 RPC 请求只需要一次网络往返。
我们的代码仍然非常简单,并且没有试图解决更复杂(但重要)的问题,例如:
- 如果没有任何服务器正在运行,客户端应该如何反应?
- 客户端是否应该为 RPC 设置某种超时?
- 如果服务器发生故障并引发异常,是否应将其转发给客户端?
- 在处理之前,保护免受无效传入消息(例如检查边界、类型)。
如果你想进行实验,可能会发现管理 UI 对于查看队列很有用。