分区 Service Bus 队列和主题

编辑人员注释: 本文章由 Windows Azure Service Bus 团队的二级项目经理 Ruppert Koch 撰写。

上周,Microsoft 发布了 Azure SDK 2.2 和 Service Bus SDK 2.2。这两种 SDK 都具有新的 Service Bus 功能,即分区实体。利用这些 SDK(或通过在您的 HTTP 请求中指定 api-version=2013-10),可以在 Azure Service Bus 上创建和使用分区队列与主题,从而改进可靠性。与此同时,您还会发现,大多数用例中的最大消息吞吐量有所提高。

分区队列和主题是什么?

传统的队列或主题由单个消息代理进行处理并存储在一个消息贮存区中,而分区队列或主题由多个消息代理进行处理并存储在多个消息贮存区中。这意味着某个分区队列或主题的总吞吐量不再受单个消息代理或消息贮存区性能的限制。此外,一旦某个消息贮存区暂时中断,也不会导致任何一个分区队列或主题不可用。

简而言之,分区队列或主题的工作原理如下:每个分区队列或主题均由多个片段组成。每个片段存储在不同的消息贮存区中,并且由不同的消息代理进行处理。当一个消息发送到某个分区队列或主题时,Service Bus 会将该消息分配给其中一个片段。这一分配过程由 Service Bus 或发送方指定的分区键随机完成。如果客户端要从分区队列或分区主题的订阅接收某个消息,Service Bus 将检查所有片段中的消息。如果找到此类消息,它将挑选其中一个并将其传递给接收方。

启用分区

有三种方法来创建分区队列或主题。第一种方法是从您的应用程序创建队列或主题。启用分区,方法是将 QueueDescription.EnablePartitioningTopicDescription.EnablePartitioning 属性设置为 true。这些标志必须在创建队列或主题时设置。不能对现有的队列或主题更改此属性。

或者,也可以在 Visual Studio 中创建分区队列或主题。我们在 New Queue 对话框和 New Topic 对话框中添加了一个新复选框 Enable Partitioning

第三种方法是通过 Windows Azure 门户。此功能需要等到下一次门户更新时才能使用,计划于几天后推出该更新。

请注意,当前 Azure Service Bus 的容量限制为每个命名空间仅容纳 100 个分区队列或主题。此外,分区队列和主题仅在 Azure Service Bus 中受支持,但在适用于 Windows Server的 Service Bus 1.1 中不可用。

分区键的使用

当消息在分区队列或主题中队列时,Service Bus 将检查是否存在分区键。如果找到分区键,它将基于该键选择片段。如果未找到分区键,它将基于内部算法选择片段。

使用分区键

在某些情况下(如会话或事务),需要将消息存储在某一片段中。在所有此类情况下,均需使用分区键。使用相同分区键的所有消息会分配给同一片段。

根据具体情况,可以使用不同的消息属性作为分区键:

SessionId。如果某个消息设置了 SessionId 属性,Service Bus 将使用 SessionId 属性作为分区键。这样,属于同一会话的所有消息均将分配给同一片段,并且由同一个消息代理进行处理。这样,Service Bus 就可以保障消息顺序以及会话状态的一致性。

PartitionKey。如果某个消息设置了 PartitionKey 属性但未设置 SessionId 属性,Service Bus 将使用 PartitionKey 属性作为分区键。使用 PartitionKey 属性可以发送非会话的事务性消息。该分区键确保在一个事务内发送的所有消息均由同一个消息代理进行处理。

MessageId。当队列或主题的 RequiresDuplicationDetection 属性设置为 true 时,如果 SessionId 或 PartitionKey 属性未设置,则使用 MessageId 属性作为分区键。这可以确保同一个消息的所有副本均由同一个消息代理进行处理,从而使 Service Bus 可以检测和消除重复消息。

不使用分区键

如果没有分区键,Service Bus 采用轮循方式将消息分发给分区队列或主题的所有片段。如果所选片段不可用,Service Bus 会将消息分配给其他片段。这样,尽管一个消息贮存区暂时不可用,发送操作仍会成功。

如您所见,分区键可以将消息固定到某个特定的片段。如果此片段所在的消息贮存区不可用,Service Bus 将返回错误。如果没有分区键,Service Bus 则可以挑选不同的片段,操作将成功。因此,除非必要,否则建议您不要提供分区键。

使用带有分区实体的事务

对于在事务中发送的消息,必须指定分区键。此分区键可以是 SessionId、PartitionKey 或 MessageId。对于同一事务中发送的所有消息,必须指定相同的分区键。

可以使用以下代码向分区队列发送事务性消息:

如果您需要向会话感知队列或主题发送事务性消息,该消息必须已经设置 SessionId 属性。如上所述,SessionId 属性可作为分区键。如果同时还设置了 PartitionKey 属性,其值必须与 SessionId 属性相同。

与普通队列或主题不同的是,不能使用一个事务将多个消息发送到不同会话。

其他信息

有关分区队列和主题的更多详细信息,请访问 https://msdn.microsoft.com/en-us/library/dn520246.aspx,并查阅 Service Bus 分区队列示例

 

本文翻译自:

https://blogs.msdn.com/b/windowsazure/archive/2013/10/29/partitioned-service-bus-queues-and-topics.aspx