配置¶
默认情况下,你在向DI容器中注册CAP服务的时候指定此配置。
services.AddCap(config=> {
// config.XXX
});
其中 services
代表的是 IServiceCollection
接口对象,它位于 Microsoft.Extensions.DependencyInjection
下面。
什么是最低配置?¶
最简单的回答就是,至少你要配置一个传输器和一个存储,如果你想快速开始你可以使用下面的配置:
services.AddCap(config =>
{
config.UseInMemoryMessageQueue(); //需要引用 Savorboard.CAP.InMemoryMessageQueue 包
config.UseInMemoryStorage();
});
有关具体的传输器配置和存储配置,你可以查看 Transports 章节和 Persistent 章节中具体组件提供的配置项。
订阅者中的配置¶
订阅者使用 [CapSubscribe]
这个Attribute来标记成为一个订阅者,订阅者可以位于 ASP.NET Core 的 Controller 或 Service 中。
当你在声明 [CapSubscribe]
时候,可以通过指定以下参数来改变订阅者的行为。
Name¶
string, 必须项
通过指定 Name
参数来订阅消息,其对应发布消息时通过 Publish("Name") 指定的名称。
该名称在不同的 Broker 有不同的对应项。
- 在 RabbitMQ 中对应 Routing Key。
- 在 Kafka 中对应 Topic。
- 在 AzureServiceBus 中对应 Subject。
- 在 NATS 中对应 Subject。
- 在 RedisStrems 中对应 Stream.
Group¶
string, 可选项
通过指定 Group
参数来使订阅者位于单独的消费者组中,消费者组的概念类似于 Kafka 中的消费者组。如果不指定此参数将使用当前程序集名称(DefaultGroupName
)作为默认值。
相同 Name
的订阅者设置为**不同的**组时,他们都会收到消息。相反如果相同 Name
的订阅者设置**相同的**组时,只有一个会收到消息。
不同 Name
的订阅者设置为**不同的**组时,也是有意义的,他们可以拥有独立的线程来执行。相反如果不同 Name
的订阅者设置**相同的**组时,他们将共享消费线程。
Group 在不同的 Broker 有不同的对应项。
- 在 RabbitMQ 中对应 Queue。
- 在 Kafka 中对应 Consumer Group。
- 在 AzureServiceBus 中对应 Subscription Name。
- 在 NATS 中对应 Queue Group。
- 在 RedisStrems 中对应 Consuemr Group.
GroupConcurrent¶
byte, 可选项
通过指定 GroupConcurrent
参数的值来设置订阅者并行执行的并行度。并行执行意味着其需要位于独立线程中,因此如果你没有指定 Group
参数,则 CAP 将会以 Name
的值自动创建一个 Group。
注意
如果你有多个订阅者都设置为了相同的 Group,并且也给订阅者都设置了 GroupConcurrent
的值,则只会有(第)一个设置的值生效。
本设置只对新消息生效,重试的消息不受并行度限制。
自定义配置项¶
在 AddCap
中 CapOptions
对象是用来存储配置相关信息,默认情况下它们都具有一些默认值,有些时候你可能需要自定义。
DefaultGroupName¶
默认值:cap.queue.{程序集名称}
默认的消费者组的名字,在不同的 Transports 中对应不同的名字,可以通过自定义此值来自定义不同 Transports 中的名字,以便于查看。
映射
在 RabbitMQ 中映射到 Queue Names。
在 Apache Kafka 中映射到 Consumer Group Id。
在 Azure Service Bus 中映射到 Subscription Name。
在 NATS 中映射到 Queue Group Name.
在 Redis Streams 中映射到 Consumer Group.
GroupNamePrefix¶
默认值:Null
为订阅 Group 统一添加前缀。 https://github.com/dotnetcore/CAP/pull/780
TopicNamePrefix¶
默认值: Null
为 Topic 统一添加前缀。 https://github.com/dotnetcore/CAP/pull/780
Version¶
默认值:v1
用于给消息指定版本来隔离不同版本服务的消息,常用于A/B测试或者多服务版本的场景。以下是其应用场景:
业务快速迭代,需要向前兼容
由于业务的快速迭代,在各个服务集成的过程中,消息的数据结构并不是固定不变的,有些时候我们为了适应新引入的需求,会添加或者修改一些数据结构。如果你是一套全新的系统这没有什么问题,但是如果你的系统已经部署到生产环境了并且正在服务客户,这就会导致新的功能在上线的时候和旧的数据结构发生不兼容,那么这些改变可能会导致出现严重的问题,要想解决这个问题,只能把消息队列和持久化的消息全部清空,然后才能启动应用程序,这对于生产环境来说显然是致命的。
多个版本的服务端
有些时候,App的服务端需要提供多套接口,来支持不同版本的App,这些不同版本的App相同的接口和服务端交互的数据结构可能是不一样的,所以通常情况下服务端提供不用的路由地址来适配不同版本的App调用。
不同实例,使用相同的持久化表/集合
希望多个不同实例的程序可以公用相同的数据库,在 2.4 之前的版本,我们可以通过指定不同的表名来隔离不同实例的数据库表,即在CAP配置的时候通过配置不同的表名前缀来实现。
查看博客来了解更多关于 Version 的信息: https://www.cnblogs.com/savorboard/p/cap-2-4.html
FailedRetryInterval¶
默认值:60 秒
在消息发送的时候,如果发送失败,CAP将会对消息进行重试,此配置项用来配置每次重试的间隔时间。
在消息消费的过程中,如果消费失败,CAP将会对消息进行重试消费,此配置项用来配置每次重试的间隔时间。
重试 & 间隔
在默认情况下,重试将在发送和消费消息失败的 FallbackWindowLookbackSeconds(4分钟后) 开始,这是为了避免设置消息状态延迟导致可能出现的问题。
发送和消费消息的过程中失败会立即重试 3 次,在 3 次以后将进入重试轮询,此时 FailedRetryInterval 配置才会生效。
多实例并发重试
我们在7.1.0版本中引入了基于数据库的分布式锁以应对在多个实例下对数据库重试的并发数据获取问题,你需要显式配置 UseStorageLock
为 true。
UseStorageLock¶
默认值: false
如果设置为true,我们将使用基于数据库的分布式锁以应对重试进程在多个实例下对数据库数据的并发获取问题。这将会在数据库生成 cap.lock 表。
ConsumerThreadCount¶
默认值:1
消费者线程并行处理消息的线程数,当这个值大于1时,将不能保证消息执行的顺序。
CollectorCleaningInterval¶
默认值:300 秒
收集器删除已经过期消息的时间间隔。
FailedRetryCount¶
默认值:50
重试的最大次数。当达到此设置值时,将不会再继续重试,通过改变此参数来设置重试的最大次数。
FallbackWindowLookbackSeconds¶
默认值:240 秒
配置重试处理器拾取 Scheduled
或 Failed
状态消息的回退时间窗。
FailedThresholdCallback¶
默认值:NULL
类型:Action<FailedInfo>
重试阈值的失败回调。当重试达到 FailedRetryCount 设置的值的时候,将调用此 Action 回调,你可以通过指定此回调来接收失败达到最大的通知,以做出人工介入。例如发送邮件或者短信。
SucceedMessageExpiredAfter¶
默认值:24*3600 秒(1天后)
成功消息的过期时间(秒)。 当消息发送或者消费成功时候,在时间达到 SucceedMessageExpiredAfter
秒时候将会从 Persistent 中删除,你可以通过指定此值来设置过期的时间。
FailedMessageExpiredAfter¶
默认值:15*24*3600 秒(15天后)
失败消息的过期时间(秒)。 当消息发送或者消费失败时候,在时间达到 FailedMessageExpiredAfter
秒时候将会从 Persistent 中删除,你可以通过指定此值来设置过期的时间。
[已移除] UseDispatchingPerGroup¶
默认值: false
版本 8.2.0 中移除,已是默认行为。
默认情况下,CAP会将所有消费者组的消息都先放置到内存同一个Channel中,然后线性处理。
如果设置为 true,则每个消费者组都会根据 ConsumerThreadCount
设置的值创建单独的线程进行处理。
在同时配合使用 EnableConsumerPrefetch
时,请参考 issue #1399 以清晰其预期行为。
[已过时] EnableConsumerPrefetch¶
默认值: false, 在 7.0 版本之前默认行为 true
该配置项已被重命名为 EnableSubscriberParallelExecute
,请使用新选项。
EnableSubscriberParallelExecute¶
默认值: false
如果设置为 true
,CAP将提前从Broker拉取一批消息置于内存缓冲区,然后执行订阅方法;当订阅方法执行完成后,拉取下一批消息至于缓冲区然后执行。
注意事项
设置为 true 可能会产生一些问题,当订阅方法执行过慢耗时太久时,会导致重试线程拾取到还未执行的的消息。重试线程默认拾取4分钟前(FallbackWindowLookbackSeconds 配置项)的消息,也就是说如果消费端积压了超过4分钟(FallbackWindowLookbackSeconds 配置项)的消息就会被重新拾取到再次执行
SubscriberParallelExecuteThreadCount¶
Default:
Environment.ProcessorCount
当启用 EnableSubscriberParallelExecute
时, 可通过此参数执行并行处理的线程数,默认值为处理器个数。
SubscriberParallelExecuteBufferFactor¶
Default: 1
当启用 EnableSubscriberParallelExecute
时, 通过此参数设置缓冲区和线程数的因子系数,也就是缓冲区大小等于 SubscriberParallelExecuteThreadCount
乘 SubscriberParallelExecuteBufferFactor
.
EnablePublishParallelSend¶
默认值: false
默认情况下,发送的消息都先放置到内存同一个Channel中,然后线性处理。 如果设置为 true,则发送消息的任务将由.NET线程池并行处理,这会大大提高发送的速度。