路由
依赖
为了使用路由(Routing),你需要将以下依赖添加到你的项目中:
1. <!-- Maven -->
2. <dependency>
3. <groupId>com.typesafe.akka</groupId>
4. <artifactId>akka-actor_2.12</artifactId>
5. <version>2.5.21</version>
6. </dependency>
8. <!-- Gradle -->
9. dependencies {
10. compile group: 'com.typesafe.akka', name: 'akka-actor_2.12', version: '2.5.21'
11. }
13. <!-- sbt -->
14. libraryDependencies += "com.typesafe.akka" %% "akka-actor" % "2.5.21"
简介
消息可以通过路由(router)发送,以有效地将它们路由到目标 Actor,即其路由器(routees)。Router可以在 Actor 内部或外部使用,你可以自己管理路由器,也可以使用具有配置功能的自包含路由 Actor。
根据应用程序的需要,可以使用不同的路由策略。Akka 提供了一些非常有用的路由策略。但是,正如你将在本章中看到的,也可以创建自己的。
一个简单的路由
下面的示例说明如何使用Router,并从 Actor 内部管理路由器。
1. static final class Work implements Serializable {
2. private static final long serialVersionUID = 1L;
3. public final String payload;
5. public Work(String payload) {
6. this.payload = payload;
7. }
8. }
10. static class Master extends AbstractActor {
12. Router router;
14. {
15. List<Routee> routees = new ArrayList<Routee>();
16. for (int i = 0; i < 5; i++) {
17. ActorRef r = getContext().actorOf(Props.create(Worker.class));
18. getContext().watch(r);
19. routees.add(new ActorRefRoutee(r));
20. }
21. router = new Router(new RoundRobinRoutingLogic(), routees);
22. }
24. @Override
25. public Receive createReceive() {
26. return receiveBuilder()
27. .match(
28. Work.class,
29. message -> {
30. router.route(message, getSender());
31. })
32. .match(
33. Terminated.class,
34. message -> {
35. router = router.removeRoutee(message.actor());
36. ActorRef r = getContext().actorOf(Props.create(Worker.class));
37. getContext().watch(r);
38. router = router.addRoutee(new ActorRefRoutee(r));
39. })
40. .build();
41. }
42. }
我们创建一个Router,并指定它在将消息路由到路由器时应该使用RoundRobinRoutingLogic。
Akka 附带的路由逻辑包括:
akka.routing.RoundRobinRoutingLogicakka.routing.RandomRoutingLogicakka.routing.SmallestMailboxRoutingLogicakka.routing.BroadcastRoutingLogicakka.routing.ScatterGatherFirstCompletedRoutingLogicakka.routing.TailChoppingRoutingLogicakka.routing.ConsistentHashingRoutingLogic
我们创建路由器作为普通的子 Actor 包裹在ActorRefRoutee之中。我们watch路由器,以便在它们被终止时能够替换它们。
通过路由发送消息是通过router方法完成的,正如上面示例中的Work消息一样。
Router是不可变的,RoutingLogic是线程安全的;这意味着它们也可以在 Actor 之外使用。
- 注释:一般来说,发送到路由的任何消息都将发送到路由器,但有一个例外。特殊的「Broadcast 消息」将发送到路由中的所有路由器。因此,当你将「BalancingPool」用于「特殊处理的消息」中描述的路由器时,不要使用
Broadcast消息。
路由器 Actor
路由也可以被创建为一个独立的 Actor,管理路由器本身,并从配置中加载路由逻辑和其他设置。
这种类型的路由 Actor 有两种不同的风格:
- 池(
Pool)- 路由器创建作为子 Actor 的路由器,并在它们终止时将它们从路由中删除。 - 组(
Group)- 路由器 Actor 在外部创建到路由的路由器,路由使用 Actor 选择将消息发送到指定路径,而不监视终止。
路由 Actor 的设置可以通过配置或编程方式定义。为了让 Actor 使用外部可配置的路由,必须使用FromConfig的props包装器来表示 Actor 接受来自配置的路由设置。这与远程部署相反,远程部署不需要这样的标记支持。如果 Actor 的属性没有包装在FromConfig中,那么它将忽略部署配置的路由部分。
你通过路由器 Actor 向路由发送消息,方式与普通 Actor 相同,即通过其ActorRef。路由 Actor 在不更改原始发件人的情况下将消息转发到其路由器。当路由器回复路由的消息时,回复将发送到原始发件人,而不是发送给路由 Actor。
- 注释:一般来说,发送到路由的任何消息都会发送到路由器,但也有一些例外。这些信息记录在下面的「特殊处理的消息」部分中。
池
下面的代码和配置片段演示了如何创建将消息转发到五个Worker路由器的「round-robin」路由。路由器将被创建为路由的子级。
1. akka.actor.deployment {
2. /parent/router1 {
3. router = round-robin-pool
4. nr-of-instances = 5
5. }
6. }
1. ActorRef router1 =
2. getContext().actorOf(FromConfig.getInstance().props(Props.create(Worker.class)), "router1");
这里是相同的例子,但是路由器配置是以编程方式提供的,而不是从配置中提供的。
1. ActorRef router2 =
2. getContext().actorOf(new RoundRobinPool(5).props(Props.create(Worker.class)), "router2");
远程部署的路由器
除了能够将本地 Actor 创建为路由器之外,还可以指示路由将其创建的子级部署到一组远程主机上。路由器将以循环方式部署。为了远程部署路由器,请将路由配置包装在RemoteRouterConfig中,并附加要部署到的节点的远程地址。远程部署要求类路径中包含akka-remote模块。
1. Address[] addresses = {
2. new Address("akka.tcp", "remotesys", "otherhost", 1234),
3. AddressFromURIString.parse("akka.tcp://othersys@anotherhost:1234")
4. };
5. ActorRef routerRemote =
6. system.actorOf(
7. new RemoteRouterConfig(new RoundRobinPool(5), addresses)
8. .props(Props.create(Echo.class)));
发送者
默认情况下,当路由器发送消息时,它将「隐式地将自己设置为发送者」。
1. getSender().tell("reply", getSelf());
然而,将路由器设置为发送者通常很有用。例如,如果要隐藏路由后面的路由器的详细信息,可能需要将路由设置为发送者。下面的代码段显示了如何将父路由设置为发送者。
1. getSender().tell("reply", getContext().getParent());
监督
由池路由创建的路由器将被创建为路由的子级。因此,路由也是子 Actor 的监督者。
路由 Actor 的监督策略可以配置为具有Pool的supervisorStrategy属性。如果没有配置,路由默认为“总是升级”策略。这意味着错误将被传递给路由器的监督者进行处理。路由器的监督者将决定如何处理任何错误。
注意路由的监督者会将此错误视为路由本身的错误。因此,停止或重新启动的指令将导致路由本身停止或重新启动。反过来,路由将导致其子路由器停止并重新启动。
应该提到的是,路由的重新启动行为已经被覆盖,因此重新启动时,在重新创建子 Actor 的同时,仍然会保留池中相同数量的 Actor。
这意味着,如果你没有指定路由或其父路由器的supervisorStrategy,则路由器中的故障将升级到路由器的父路由器,默认情况下,该路由器将重新启动所有路由器(它使用Escalate,并且在重新启动期间不会停止路由器)。原因是要使默认的行为添加.withRouter到子级的定义不会更改应用于子级的监视策略。这可能是一个效率低下的问题,你可以通过在定义路由时指定策略来避免。
设置策略的过程如下:
1. final SupervisorStrategy strategy =
2. new OneForOneStrategy(
3. 5,
4. Duration.ofMinutes(1),
5. Collections.<Class<? extends Throwable>>singletonList(Exception.class));
6. final ActorRef router =
7. system.actorOf(
8. new RoundRobinPool(5).withSupervisorStrategy(strategy).props(Props.create(Echo.class)));
组
有时,与其让路由 Actor 创建其路由器,不如单独创建路由器并将其提供给路由供其使用。你可以通过将路由器的路径传递给路由的配置来实现这一点。消息将与ActorSelection一起发送到这些路径,「通配符」可以并且将产生与显式使用ActorSelection相同的语义。
下面的示例演示了如何通过向路由提供三个路由器 Actor 的路径字符串来创建路由。
1. akka.actor.deployment {
2. /parent/router3 {
3. router = round-robin-group
4. routees.paths = ["/user/workers/w1", "/user/workers/w2", "/user/workers/w3"]
5. }
6. }
1. ActorRef router3 = getContext().actorOf(FromConfig.getInstance().props(), "router3");
这里是相同的例子,但是路由器配置是以编程方式提供的,而不是从配置中提供的。
1. List<String> paths = Arrays.asList("/user/workers/w1", "/user/workers/w2", "/user/workers/w3");
2. ActorRef router4 = getContext().actorOf(new RoundRobinGroup(paths).props(), "router4");
路由器 Actor 是从路由外部创建的:
1. system.actorOf(Props.create(Workers.class), "workers");
1. static class Workers extends AbstractActor {
2. @Override
3. public void preStart() {
4. getContext().actorOf(Props.create(Worker.class), "w1");
5. getContext().actorOf(Props.create(Worker.class), "w2");
6. getContext().actorOf(Props.create(Worker.class), "w3");
7. }
8. // ...
路径可能包含远程主机上运行的 Actor 的协议和地址信息。远程处理要求类路径中包含akka-remote模块。
1. akka.actor.deployment {
2. /parent/remoteGroup {
3. router = round-robin-group
4. routees.paths = [
5. "akka.tcp://app@10.0.0.1:2552/user/workers/w1",
6. "akka.tcp://app@10.0.0.2:2552/user/workers/w1",
7. "akka.tcp://app@10.0.0.3:2552/user/workers/w1"]
8. }
9. }
路由的使用方法
在本节中,我们将描述如何创建不同类型的路由 Actor。
本节中的路由 Actor 是从名为parent的顶级 Actor 中创建的。请注意,配置中的部署路径以/parent/开头,后跟路由 Actor 的名称。
1. system.actorOf(Props.create(Parent.class), "parent");
RoundRobinPool 和 RoundRobinGroup
以「round-robin」方式路由到它的路由器。
在配置文件中定义RoundRobinPool:
1. akka.actor.deployment {
2. /parent/router1 {
3. router = round-robin-pool
4. nr-of-instances = 5
5. }
6. }
1. ActorRef router1 =
2. getContext().actorOf(FromConfig.getInstance().props(Props.create(Worker.class)), "router1");
在代码中定义RoundRobinPool:
1. ActorRef router2 =
2. getContext().actorOf(new RoundRobinPool(5).props(Props.create(Worker.class)), "router2");
在配置文件中定义RoundRobinGroup:
1. akka.actor.deployment {
2. /parent/router3 {
3. router = round-robin-group
4. routees.paths = ["/user/workers/w1", "/user/workers/w2", "/user/workers/w3"]
5. }
6. }
1. ActorRef router3 = getContext().actorOf(FromConfig.getInstance().props(), "router3");
在代码中定义RoundRobinGroup:
1. List<String> paths = Arrays.asList("/user/workers/w1", "/user/workers/w2", "/user/workers/w3");
2. ActorRef router4 = getContext().actorOf(new RoundRobinGroup(paths).props(), "router4");
RandomPool 和 RandomGroup
此路由类型为每条消息随机选择的一个路由器类型。
在配置文件中定义RandomPool:
1. akka.actor.deployment {
2. /parent/router5 {
3. router = random-pool
4. nr-of-instances = 5
5. }
6. }
1. ActorRef router5 =
2. getContext().actorOf(FromConfig.getInstance().props(Props.create(Worker.class)), "router5");
在代码中定义RandomPool:
1. ActorRef router6 =
2. getContext().actorOf(new RandomPool(5).props(Props.create(Worker.class)), "router6");
在配置文件中定义RandomGroup:
1. akka.actor.deployment {
2. /parent/router7 {
3. router = random-group
4. routees.paths = ["/user/workers/w1", "/user/workers/w2", "/user/workers/w3"]
5. }
6. }
1. ActorRef router7 = getContext().actorOf(FromConfig.getInstance().props(), "router7");
在代码中定义RandomGroup:
1. List<String> paths = Arrays.asList("/user/workers/w1", "/user/workers/w2", "/user/workers/w3");
2. ActorRef router8 = getContext().actorOf(new RandomGroup(paths).props(), "router8");
BalancingPool
一种将工作从繁忙的路由器重新分配到空闲的路由器的路由。所有路由共享同一个邮箱。
- 注释 1:
BalancingPool的特性是,它的路由器没有真正不同的身份,它们有不同的名称,但在大多数情况下,与它们交互不会以正常的 Actor 结束。因此,你不能将其用于需要状态保留在路由中的工作流,在这种情况下,你必须在消息中包含整个状态。使用「SmallestMailboxPool」,你可以拥有一个垂直扩展的服务,该服务可以在回复原始客户端之前以状态方式与后端的其他服务交互。另一个优点是,它不像BalancingPool那样对消息队列的实现进行限制。 - 注释 2:在路由使用「BalancingPool」时,不要使用「Broadcast 消息」,详情见「特殊处理的消息」中的描述。
在配置文件中定义BalancingPool:
1. akka.actor.deployment {
2. /parent/router9 {
3. router = balancing-pool
4. nr-of-instances = 5
5. }
6. }
1. ActorRef router9 =
2. getContext().actorOf(FromConfig.getInstance().props(Props.create(Worker.class)), "router9");
在代码中定义BalancingPool:
1. ActorRef router10 =
2. getContext().actorOf(new BalancingPool(5).props(Props.create(Worker.class)), "router10");
添加配置的平衡调度器,该平衡调度器由池使用,可配置在路由部署配置的pool-dispatcher部分。
1. akka.actor.deployment {
2. /parent/router9b {
3. router = balancing-pool
4. nr-of-instances = 5
5. pool-dispatcher {
6. attempt-teamwork = off
7. }
8. }
9. }
BalancingPool自动为其路由使用一个特殊的BalancingDispatcher,并且会忽略在路由Props对象上设置的任何调度器。这是为了通过所有路由器共享同一个邮箱来实现平衡语义。
虽然无法更改路由使用的调度器,但可以对使用的执行器进行微调。默认情况下,将使用fork-join-dispatcher,并可以按照「调度器」中的说明进行配置。在期望路由器执行阻塞操作的情况下,用一个thread-pool-executor替换它可能很有用,该执行器显式地提示分配的线程数:
1. akka.actor.deployment {
2. /parent/router10b {
3. router = balancing-pool
4. nr-of-instances = 5
5. pool-dispatcher {
6. executor = "thread-pool-executor"
8. # allocate exactly 5 threads for this pool
9. thread-pool-executor {
10. core-pool-size-min = 5
11. core-pool-size-max = 5
12. }
13. }
14. }
15. }
在默认的无界邮箱不太适合的情况下,也可以更改平衡调度器使用的mailbox。无论是否需要管理每个消息的优先级,都可能出现这样的场景。因此,可以实现优先级邮箱并配置调度器:
1. akka.actor.deployment {
2. /parent/router10c {
3. router = balancing-pool
4. nr-of-instances = 5
5. pool-dispatcher {
6. mailbox = myapp.myprioritymailbox
7. }
8. }
9. }
- 注释:请记住,
BalancingDispatcher需要一个消息队列,该队列对于多个并发消费者必须是线程安全的。因此,对于支持自定义邮箱的消息队列,这种调度器必须实现akka.dispatch.MultipleConsumerSemantics。请参阅有关如何在「邮箱」中实现自定义邮箱的详细信息。
特别地,在BalancingPool没有Group变量。
SmallestMailboxPool
它是一个试图发送到邮箱中邮件最少的非挂起子路由器的路由。选择顺序如下:
- 选择邮箱为空的任何空闲路由(不处理邮件)
- 选择任何邮箱为空的路由
- 选择邮箱中挂起邮件最少的路由
- 选择任何远程路由器,远程 Actor 被认为是最低优先级,因为它们的邮箱大小是未知的
在配置文件中定义SmallestMailboxPool:
1. akka.actor.deployment {
2. /parent/router11 {
3. router = smallest-mailbox-pool
4. nr-of-instances = 5
5. }
6. }
1. ActorRef router11 =
2. getContext()
3. .actorOf(FromConfig.getInstance().props(Props.create(Worker.class)), "router11");
在代码中定义SmallestMailboxPool:
1. ActorRef router12 =
2. getContext()
3. .actorOf(new SmallestMailboxPool(5).props(Props.create(Worker.class)), "router12");
在SmallestMailboxPool中没有Group变量,因为邮箱的大小和 Actor 的内部调度状态实际上在路由路径中不可用。
BroadcastPool 和 BroadcastGroup
广播路由(broadcast router)把它接收到的信息转发给它的所有路由器。
在配置文件中定义BroadcastPool:
1. akka.actor.deployment {
2. /parent/router13 {
3. router = broadcast-pool
4. nr-of-instances = 5
5. }
6. }
1. ActorRef router13 =
2. getContext()
3. .actorOf(FromConfig.getInstance().props(Props.create(Worker.class)), "router13");
在代码中定义BroadcastPool:
1. ActorRef router14 =
2. getContext().actorOf(new BroadcastPool(5).props(Props.create(Worker.class)), "router14");
在配置文件中定义BroadcastGroup:
1. akka.actor.deployment {
2. /parent/router15 {
3. router = broadcast-group
4. routees.paths = ["/user/workers/w1", "/user/workers/w2", "/user/workers/w3"]
5. }
6. }
1. ActorRef router15 = getContext().actorOf(FromConfig.getInstance().props(), "router15");
在代码中定义BroadcastGroup:
1. List<String> paths = Arrays.asList("/user/workers/w1", "/user/workers/w2", "/user/workers/w3");
2. ActorRef router16 = getContext().actorOf(new BroadcastGroup(paths).props(), "router16");
- 注释:广播路由总是向它们的路由器广播每一条消息。如果你不想广播每一条消息,那么你可以使用非广播路由,并根据需要使用「Broadcast 消息」。
ScatterGatherFirstCompletedPool 和 ScatterGatherFirstCompletedGroup
ScatterGatherFirstCompletedRouter将消息发送到其所有路由器,然后等待它得到的第一个回复。此结果将被发送回原始发件人,而其他答复将被丢弃。
它期望在配置的持续时间内至少有一个回复,否则它将以akka.actor.Status.Failure中的akka.pattern.AskTimeoutException进行回复。
在配置文件中定义ScatterGatherFirstCompletedPool:
1. akka.actor.deployment {
2. /parent/router17 {
3. router = scatter-gather-pool
4. nr-of-instances = 5
5. within = 10 seconds
6. }
7. }
1. ActorRef router17 =
2. getContext()
3. .actorOf(FromConfig.getInstance().props(Props.create(Worker.class)), "router17");
在代码中定义ScatterGatherFirstCompletedPool:
1. Duration within = Duration.ofSeconds(10);
2. ActorRef router18 =
3. getContext()
4. .actorOf(
5. new ScatterGatherFirstCompletedPool(5, within).props(Props.create(Worker.class)),
6. "router18");
在配置文件中定义ScatterGatherFirstCompletedGroup:
1. akka.actor.deployment {
2. /parent/router19 {
3. router = scatter-gather-group
4. routees.paths = ["/user/workers/w1", "/user/workers/w2", "/user/workers/w3"]
5. within = 10 seconds
6. }
7. }
1. ActorRef router19 = getContext().actorOf(FromConfig.getInstance().props(), "router19");
在代码中定义ScatterGatherFirstCompletedGroup:
1. List<String> paths = Arrays.asList("/user/workers/w1", "/user/workers/w2", "/user/workers/w3");
2. Duration within2 = Duration.ofSeconds(10);
3. ActorRef router20 =
4. getContext()
5. .actorOf(new ScatterGatherFirstCompletedGroup(paths, within2).props(), "router20");
TailChoppingPool 和 TailChoppingGroup
TailChoppingRouter首先将消息发送到一个随机选择的路由器,然后在一个小延迟后发送到第二个路由器(从剩余的路由器随机选择)等。它等待第一个回复,然后返回并转发给原始发送者,而其他答复将被丢弃。
此路由器的目标是通过对多个路由器执行冗余查询来减少延迟,前提是其他 Actor 之一的响应速度可能仍然比初始 Actor 快。
彼得·贝利斯在一篇博文中很好地描述了这种优化:「通过多余的工作来加速分布式查询」。
在配置文件中定义TailChoppingPool:
1. akka.actor.deployment {
2. /parent/router21 {
3. router = tail-chopping-pool
4. nr-of-instances = 5
5. within = 10 seconds
6. tail-chopping-router.interval = 20 milliseconds
7. }
8. }
1. ActorRef router21 =
2. getContext()
3. .actorOf(FromConfig.getInstance().props(Props.create(Worker.class)), "router21");
在代码中定义TailChoppingPool:
1. Duration within3 = Duration.ofSeconds(10);
2. Duration interval = Duration.ofMillis(20);
3. ActorRef router22 =
4. getContext()
5. .actorOf(
6. new TailChoppingPool(5, within3, interval).props(Props.create(Worker.class)),
7. "router22");
在配置文件中定义TailChoppingGroup:
1. akka.actor.deployment {
2. /parent/router23 {
3. router = tail-chopping-group
4. routees.paths = ["/user/workers/w1", "/user/workers/w2", "/user/workers/w3"]
5. within = 10 seconds
6. tail-chopping-router.interval = 20 milliseconds
7. }
8. }
1. ActorRef router23 = getContext().actorOf(FromConfig.getInstance().props(), "router23");
在代码中定义TailChoppingGroup:
1. List<String> paths = Arrays.asList("/user/workers/w1", "/user/workers/w2", "/user/workers/w3");
2. Duration within4 = Duration.ofSeconds(10);
3. Duration interval2 = Duration.ofMillis(20);
4. ActorRef router24 =
5. getContext().actorOf(new TailChoppingGroup(paths, within4, interval2).props(), "router24");
ConsistentHashingPool 和 ConsistentHashingGroup
ConsistentHashingPool使用「一致性哈希」根据发送的消息选择路由。「这篇文章」详细描述了如何实现一致性哈希。
有 3 种方法定义一致性哈希键要使用的数据。
- 你可以使用路由的
withHashMapper定义将传入消息映射到其一致的哈希键。这使发送方的决策透明。 - 消息可以实现
akka.routing.ConsistentHashingRouter.ConsistentHashable。键是消息的一部分,它便于与消息一起定义。 - 消息可以包装到
akka.routing.ConsistentHashingRouter.ConsistentHashableEnvelope,以定义用于一致性哈希键的数据。发送者知道要使用的键。
这些定义一致性哈希键的方法可以同时用于一个路由。首先尝试使用withHashMapper。
代码示例:
1. static class Cache extends AbstractActor {
2. Map<String, String> cache = new HashMap<String, String>();
4. @Override
5. public Receive createReceive() {
6. return receiveBuilder()
7. .match(
8. Entry.class,
9. entry -> {
10. cache.put(entry.key, entry.value);
11. })
12. .match(
13. Get.class,
14. get -> {
15. Object value = cache.get(get.key);
16. getSender().tell(value == null ? NOT_FOUND : value, getSelf());
17. })
18. .match(
19. Evict.class,
20. evict -> {
21. cache.remove(evict.key);
22. })
23. .build();
24. }
25. }
27. static final class Evict implements Serializable {
28. private static final long serialVersionUID = 1L;
29. public final String key;
31. public Evict(String key) {
32. this.key = key;
33. }
34. }
36. static final class Get implements Serializable, ConsistentHashable {
37. private static final long serialVersionUID = 1L;
38. public final String key;
40. public Get(String key) {
41. this.key = key;
42. }
44. public Object consistentHashKey() {
45. return key;
46. }
47. }
49. static final class Entry implements Serializable {
50. private static final long serialVersionUID = 1L;
51. public final String key;
52. public final String value;
54. public Entry(String key, String value) {
55. this.key = key;
56. this.value = value;
57. }
58. }
60. static final String NOT_FOUND = "NOT_FOUND";
1. final ConsistentHashMapper hashMapper =
2. new ConsistentHashMapper() {
3. @Override
4. public Object hashKey(Object message) {
5. if (message instanceof Evict) {
6. return ((Evict) message).key;
7. } else {
8. return null;
9. }
10. }
11. };
13. ActorRef cache =
14. system.actorOf(
15. new ConsistentHashingPool(10)
16. .withHashMapper(hashMapper)
17. .props(Props.create(Cache.class)),
18. "cache");
20. cache.tell(new ConsistentHashableEnvelope(new Entry("hello", "HELLO"), "hello"), getRef());
21. cache.tell(new ConsistentHashableEnvelope(new Entry("hi", "HI"), "hi"), getRef());
23. cache.tell(new Get("hello"), getRef());
24. expectMsgEquals("HELLO");
26. cache.tell(new Get("hi"), getRef());
27. expectMsgEquals("HI");
29. cache.tell(new Evict("hi"), getRef());
30. cache.tell(new Get("hi"), getRef());
31. expectMsgEquals(NOT_FOUND);
在上面的示例中,你可以看到Get消息实现ConsistentHashable本身,而Entry消息包装在ConsistentHashableEnvelope中。Evict消息由hashMapping部分函数处理。
在配置文件中定义ConsistentHashingPool:
1. akka.actor.deployment {
2. /parent/router25 {
3. router = consistent-hashing-pool
4. nr-of-instances = 5
5. virtual-nodes-factor = 10
6. }
7. }
1. ActorRef router25 =
2. getContext()
3. .actorOf(FromConfig.getInstance().props(Props.create(Worker.class)), "router25");
在代码中定义ConsistentHashingPool:
1. ActorRef router26 =
2. getContext()
3. .actorOf(new ConsistentHashingPool(5).props(Props.create(Worker.class)), "router26");
在配置文件中定义ConsistentHashingGroup:
1. akka.actor.deployment {
2. /parent/router27 {
3. router = consistent-hashing-group
4. routees.paths = ["/user/workers/w1", "/user/workers/w2", "/user/workers/w3"]
5. virtual-nodes-factor = 10
6. }
7. }
1. ActorRef router27 = getContext().actorOf(FromConfig.getInstance().props(), "router27");
在代码中定义ConsistentHashingGroup:
1. List<String> paths = Arrays.asList("/user/workers/w1", "/user/workers/w2", "/user/workers/w3");
2. ActorRef router28 = getContext().actorOf(new ConsistentHashingGroup(paths).props(), "router28");
virtual-nodes-factor是在一致性哈希节点环中使用的每个路由器的虚拟节点数,以使分布更均匀。
特殊处理的消息
大多数发送给路由 Actor 的消息将根据路由的路由逻辑进行转发。但是,有几种类型的消息具有特殊的行为。
请注意,这些特殊消息(Broadcast消息除外)仅由独立的路由 Actor 处理,而不是由「一个简单的路由」中描述的akka.routing.Router组件处理。
Broadcast 消息
Broadcast消息可用于向路由的所有路由器发送消息。当路由接收到Broadcast消息时,它将把该消息的有效负载广播到所有路由器,而不管该路由通常是如何路由其消息的。
下面的示例显示了如何使用Broadcast消息向路由的每个路由器发送非常重要的消息。
1. router.tell(new Broadcast("Watch out for Davy Jones' locker"), getTestActor());
在本例中,路由接收Broadcast消息,提取其有效载荷(“当心戴维·琼斯的储物柜”),然后将有效载荷发送到路由中的所有路由器。由每个路由器 Actor 来处理接收到的有效负载消息。
- 注释:在路由使用
BalancingPool时,不要使用Broadcast消息。BalancingPool上的路由器共享同一个邮箱实例,因此某些路由器可能会多次收到Broadcast消息,而其他路由器则不会收到Broadcast消息。
PoisonPill 消息
PoisonPill消息对所有 Actor 都有特殊的处理,包括路由。当任何 Actor 收到PoisonPill消息时,该 Actor 将被停止。有关详细信息,请参阅「PoisonPill」文档。
1. router.tell(PoisonPill.getInstance(), getTestActor());
对于通常将消息传递给路由器的路由来说,重要的是要认识到只有路由才能处理PoisonPill消息。发送到路由的PoisonPill消息不会发送到路由器。
但是,发送到路由器的PoisonPill消息可能仍然会影响其路由,因为它会停止路由,当路由停止时,它也会停止其子路由。停止子级是正常的 Actor 行为。路由将停止它作为子级创建的路由器。每个子级将处理其当前消息,然后停止。这可能会导致一些消息未处理。有关详细信息,请参阅「停止 Actor」的文档。
如果你希望停止路由及其路由器,但你希望路由器首先处理当前邮箱中的所有消息,则不应向路由发送PoisonPill消息。代替地,你应该在Broadcast消息中包装一个PoisonPill消息,这样每个路由器都将收到PoisonPill消息。请注意,这将停止所有路由器,即使这些路由器不是路由的子代,也就是说,即使是以编程方式提供给路由的路由器也会被停止。
1. router.tell(new Broadcast(PoisonPill.getInstance()), getTestActor());
使用上面显示的代码,每个路由器都将收到一条PoisonPill消息。每一个路由器将继续正常处理其信息,最终处理PoisonPill,这将导致路由停止。所有路由器停止后,路由将自动停止,除非它是动态路由,例如使用大小调整器(resizer)。
- 注释:Brendan W McAdams 的「优秀博客」发布了分布式 Akka 工作负载,随后又详细讨论了如何使用
PoisonPill消息关闭路由和路由器。
Kill 消息
Kill消息是另一种具有特殊处理功能的消息类型。有关 Actor 如何处理Kill消息的一般信息,请参阅「」文档。
当Kill消息发送到路由时,路由会在内部处理消息,而不会将其发送到路由器。路由将抛出ActorKilledException并失败。然后,它将被恢复、重新启动或终止,这取决于它是如何被监督的。
作为路由器子代的路由器也将被挂起,并受应用于路由的监督指令的影响。不是路由器子代的路由器,即那些在路由外部创建的路由器,将不会受到影响。
1. router.tell(Kill.getInstance(), getTestActor());
与PoisonPill消息一样,间接杀掉路由及其子代(碰巧是路由器)和直接杀掉路由器(其中一些可能不是子代)之间存在区别。要直接杀掉路由器,路由应该发送一个封装在Broadcast消息中的Kill消息。
1. router.tell(new Broadcast(Kill.getInstance()), getTestActor());
管理消息
- 将
akka.routing.GetRoutees发送到路由 Actor 将使其在akka.routing.Routees消息中返回当前使用的路由器。 - 将
akka.routing.AddRoutee发送到路由 Actor 将把该路由器添加到其路由器集合中。 - 将
akka.routing.RemoveRoutee发送到路由 Actor 将其路由器集合中删除该路由器。 - 将
akka.routing.AdjustPoolSize发送到池路由 Actor 将向其路由器集合中添加或删除该数量的路由器。
这些管理消息可能在其他消息之后处理,因此,如果你立即发送AddRoutee,然后再发送普通消息,则不能保证在路由普通消息时已更改了路由器。如果你需要知道何时应用了更改,你可以发送AddRoutee,然后发送GetRoutees,当你收到Routees回复时,你将知道前面的更改已经应用。
可动态调整大小的池
所有池都可以与固定数量的路由器一起使用,或者使用调整大小策略动态调整路由器的数量。
有两种类型的大小调整器:默认Resizer和OptimalSizeExploringResizer。
默认 Resizer
默认的大小调整器(resizer)根据压力向上和向下调整池大小,由池中繁忙路由器的百分比度量。如果压力高于某个阈值,则会增大池的大小;如果压力低于某个阈值,则会减小池的大小。两个阈值都是可配置的。
配置文件中定义具有默认大小调整器的池:
1. akka.actor.deployment {
2. /parent/router29 {
3. router = round-robin-pool
4. resizer {
5. lower-bound = 2
6. upper-bound = 15
7. messages-per-resize = 100
8. }
9. }
10. }
1. ActorRef router29 =
2. getContext()
3. .actorOf(FromConfig.getInstance().props(Props.create(Worker.class)), "router29");
在「配置」的akka.actor.deployment.default.resizer部分,其中还描述了其他几个可用的配置选项。
在代码中定义具有默认大小调整器的池:
1. DefaultResizer resizer = new DefaultResizer(2, 15);
2. ActorRef router30 =
3. getContext()
4. .actorOf(
5. new RoundRobinPool(5).withResizer(resizer).props(Props.create(Worker.class)),
6. "router30");
值得指出的是,如果你在配置文件中定义了路由,那么将使用该值而不是任何以编程方式发送的参数。
最佳大小探索调整器
OptimalSizeExploringResizer将池的大小调整为提供最大消息吞吐量的最佳大小。
当你期望池大小对性能函数为凸函数时,此大小调整器工作得最好。例如,当你有一个 CPU 绑定的任务时,最佳大小与 CPU 核心的数量绑定在一起。当你的任务是 IO 绑定的时候,最佳大小将绑定到与该 IO 服务的最佳并发连接数绑定在一起。例如,一个 4 节点的弹性搜索集群可以以最佳速度处理 4 到 8 个并发请求。
它通过跟踪每个池大小的消息吞吐量并定期执行以下三个调整大小的操作(一次一个)来实现这一点:
- 如果一段时间内没有看到所有的路由器都被充分利用,那么就缩小规模。
- 探索附近的随机池大小,尝试收集吞吐量指标。
- 通过更好的(比任何其他附近大小)吞吐量指标优化到附近的池大小。
当池被充分利用时(即所有的路由都很忙),它在探索和优化之间随机选择。当池在一段时间内未被充分利用时,它将把池缩小到上次看到的最大利用率乘以可配置比率。
通过不断的探索和优化,调整器最终会调整到最佳大小并保持在附近。当最佳大小改变时,它将开始走向一个新的最佳大小。
它保存了一个性能日志,所以它是有状态的,并且比默认的大小调整器有更大的内存占用。内存使用是O(n),其中n是允许的大小数,即上界和下界。
在配置文件中定义具有OptimalSizeExploringResizer的池:
1. akka.actor.deployment {
2. /parent/router31 {
3. router = round-robin-pool
4. optimal-size-exploring-resizer {
5. enabled = on
6. action-interval = 5s
7. downsize-after-underutilized-for = 72h
8. }
9. }
10. }
1. ActorRef router31 =
2. getContext()
3. .actorOf(FromConfig.getInstance().props(Props.create(Worker.class)), "router31");
在「配置」的akka.actor.deployment.default.optimal-size-exploring-resizer部分,其中还描述了其他几个可用的配置选项。
- 注释:调整大小是通过向 Actor 池发送消息触发的,但它不是同步完成的;而是将消息发送到 “head”
RouterActor以执行大小更改。因此,你不能依赖调整大小来在所有其他路由器都忙时立即创建新的工作线程,因为刚发送的消息将排队到繁忙 Actor 的邮箱中。要解决此问题,请将池配置为使用平衡调度器,有关详细信息,请参阅「配置调度器」。
Akka 内的路由设计
表面上,路由看起来像普通的 Actor,但实际上它们的实现方式不同。路由的设计是非常有效的接收信息,并将它们快速传递到路由器。
正常的 Actor 可以用于路由消息,但是 Actor 的单线程处理可能成为瓶颈。通过对允许并发路由的常规消息处理管道进行优化,路由器可以实现更高的吞吐量。这是通过将路由器的路由逻辑直接嵌入到其ActorRef而不是路由 Actor 来实现的。发送到路由ActorRef的消息可以立即路由到路由器,完全绕过单线程路由 Actor。
这样做的代价是,路由代码的内部比使用普通 Actor 实现路由器更复杂。幸运的是,路由 API 的使用者看不到所有这些复杂性。但是,在实现自己的路由时需要注意一些事情。
自定义路由
如果你找不到 Akka 提供的足够满足你需求的路由,你可以创建自己的路由。为了滚动(roll)你自己的路由,你必须满足本节中解释的某些标准。
在创建自己的路由之前,你应该考虑一个具有类似路由行为的普通 Actor 是否可以像一个完整的路由一样完成这项工作。如上所述,路由比普通 Actor 的主要优势在于其更高的性能。但它们的实现比一般 Actor 要复杂一些。因此,如果应用程序中可以接受较低的最大吞吐量,那么你可能希望坚持使用传统的 Actor。然而,本节假定你希望获得最大的性能,因此演示了如何创建自己的路由。
本例中创建的路由会将每个消息复制到其他的一些目的地。
从路由逻辑开始:
1. static class RedundancyRoutingLogic implements RoutingLogic {
2. private final int nbrCopies;
4. public RedundancyRoutingLogic(int nbrCopies) {
5. this.nbrCopies = nbrCopies;
6. }
8. RoundRobinRoutingLogic roundRobin = new RoundRobinRoutingLogic();
10. @Override
11. public Routee select(Object message, IndexedSeq<Routee> routees) {
12. List<Routee> targets = new ArrayList<Routee>();
13. for (int i = 0; i < nbrCopies; i++) {
14. targets.add(roundRobin.select(message, routees));
15. }
16. return new SeveralRoutees(targets);
17. }
18. }
将为每个消息调用select,在本例中,通过循环选择几个目的地,重用现有的RoundRobinRoutingLogic,并将结果包装到SeveralRoutees实例中。SeveralRoutees将消息发送到所有提供的路由。
路由逻辑的实现必须是线程安全的,因为它可能在 Actor 之外使用。
路由逻辑的单元测试:
1. static final class TestRoutee implements Routee {
2. public final int n;
4. public TestRoutee(int n) {
5. this.n = n;
6. }
8. @Override
9. public void send(Object message, ActorRef sender) {}
11. @Override
12. public int hashCode() {
13. return n;
14. }
16. @Override
17. public boolean equals(Object obj) {
18. return (obj instanceof TestRoutee) && n == ((TestRoutee) obj).n;
19. }
20. }
22. RedundancyRoutingLogic logic = new RedundancyRoutingLogic(3);
24. List<Routee> routeeList = new ArrayList<Routee>();
25. for (int n = 1; n <= 7; n++) {
26. routeeList.add(new TestRoutee(n));
27. }
28. IndexedSeq<Routee> routees = immutableIndexedSeq(routeeList);
30. SeveralRoutees r1 = (SeveralRoutees) logic.select("msg", routees);
31. assertEquals(r1.getRoutees().get(0), routeeList.get(0));
32. assertEquals(r1.getRoutees().get(1), routeeList.get(1));
33. assertEquals(r1.getRoutees().get(2), routeeList.get(2));
35. SeveralRoutees r2 = (SeveralRoutees) logic.select("msg", routees);
36. assertEquals(r2.getRoutees().get(0), routeeList.get(3));
37. assertEquals(r2.getRoutees().get(1), routeeList.get(4));
38. assertEquals(r2.getRoutees().get(2), routeeList.get(5));
40. SeveralRoutees r3 = (SeveralRoutees) logic.select("msg", routees);
41. assertEquals(r3.getRoutees().get(0), routeeList.get(6));
42. assertEquals(r3.getRoutees().get(1), routeeList.get(0));
43. assertEquals(r3.getRoutees().get(2), routeeList.get(1));
你可以在这里停下来,使用一个akka.routing.Router中提供的RedundancyRoutingLogic,如「一个简单的路由」中所述。
让我们继续,把它变成一个独立的、可配置的路由 Actor。
创建一个扩展自Pool、Group或CustomRouterConfig的类,该类是路由逻辑的工厂,并保存路由的配置。在这里,我们使用Group。
1. import java.util.List;
3. import akka.actor.ActorSystem;
4. import akka.dispatch.Dispatchers;
5. import akka.routing.Router;
7. import com.typesafe.config.Config;
9. import akka.routing.GroupBase;
10. import static jdocs.routing.CustomRouterDocTest.RedundancyRoutingLogic;
12. public class RedundancyGroup extends GroupBase {
13. private final List<String> paths;
14. private final int nbrCopies;
16. public RedundancyGroup(List<String> paths, int nbrCopies) {
17. this.paths = paths;
18. this.nbrCopies = nbrCopies;
19. }
21. public RedundancyGroup(Config config) {
22. this(config.getStringList("routees.paths"), config.getInt("nbr-copies"));
23. }
25. @Override
26. public java.lang.Iterable<String> getPaths(ActorSystem system) {
27. return paths;
28. }
30. @Override
31. public Router createRouter(ActorSystem system) {
32. return new Router(new RedundancyRoutingLogic(nbrCopies));
33. }
35. @Override
36. public String routerDispatcher() {
37. return Dispatchers.DefaultDispatcherId();
38. }
39. }
使用它,和使用 Akka 提供的路由 Actor 一样:
1. for (int n = 1; n <= 10; n++) {
2. system.actorOf(Props.create(Storage.class), "s" + n);
3. }
5. List<String> paths = new ArrayList<String>();
6. for (int n = 1; n <= 10; n++) {
7. paths.add("/user/s" + n);
8. }
10. ActorRef redundancy1 = system.actorOf(new RedundancyGroup(paths, 3).props(), "redundancy1");
11. redundancy1.tell("important", getTestActor());
注意,我们在RedundancyGroup中添加了一个接受配置参数的构造函数。这使得在配置文件中定义它成为可能。
1. akka.actor.deployment {
2. /redundancy2 {
3. router = "jdocs.routing.RedundancyGroup"
4. routees.paths = ["/user/s1", "/user/s2", "/user/s3"]
5. nbr-copies = 5
6. }
7. }
注意router属性中的完全限定类名。router类必须扩展akka.routing.RouterConfig(Pool、Group或CustomRouterConfig),并具有带着一个com.typesafe.config.Config参数的构造函数。配置文件中的deployment部分会传递给构造函数。
配置调度器
池中已创建子级的调度器将从Props中获取,如「调度器」中所述。
为了便于定义池路由的调度器,你可以在配置文件的deployment部分内联定义调度器。
1. akka.actor.deployment {
2. /poolWithDispatcher {
3. router = random-pool
4. nr-of-instances = 5
5. pool-dispatcher {
6. fork-join-executor.parallelism-min = 5
7. fork-join-executor.parallelism-max = 5
8. }
9. }
10. }
这是唯一需要为池启用专用调度器做的事情。
- 注释:如果你使用一组 Actor 并路由到他们的路径,那么他们仍将使用在其
Props中为他们配置的相同调度器,在创建之后就不能更改 Actor 的调度器了。
“head” 路由不能总是在同一个调度器上运行,因为它不处理同一类型的消息,因此这个特殊的 Actor 不使用Props中配置的调度器,而是从RouterConfig中获取routerDispatcher,这默认为 Actor 系统的默认调度。所有标准路由都允许在其构造函数或工厂方法中设置此属性,自定义路由必须以适当的方式实现该方法。
1. Props props =
2. // “head” router actor will run on "router-dispatcher" dispatcher
3. // Worker routees will run on "pool-dispatcher" dispatcher
4. new RandomPool(5).withDispatcher("router-dispatcher").props(Props.create(Worker.class));
5. ActorRef router = system.actorOf(props, "poolWithDispatcher");
- 注释:不允许将
routerDispatcher配置为akka.dispatch.BalancingDispatcherConfigurator配置器,因为用于特殊路由器 Actor 的消息不能由任何其他 Actor 处理。
英文原文链接:Routing.
