查询 Azure 表中最新项目的最快方法？

Question

我有一个 Azure 表，客户在其中发布消息，单个表中可能有数百万条消息。我想找到获取最近 10 分钟内发布的消息的最快方法（这是我刷新网页的频率）。由于只有分区键被索引，所以我考虑了使用日期和日期的想法。消息作为分区键发布的时间，例如 ISO8601 日期格式的字符串，如“2009-06-15T13:45:30.0900000”

示例伪代码：

var message = "Hello word!";
var messagePartitionKey = DateTime.Now.ToString("o");
var messageEntity = new MessageEntity(messagePartitionKey, message);
dataSource.Insert(messageEntity);

，然后像这样查询过去 10 分钟内发布的消息（再次未经测试的伪代码）：

// Get the date and time 10 minutes ago
var tenMinutesAgo = DateTime.Now.Subtract(new TimeSpan(0, 10, 0)).ToString("o");

// Query for the latest messages
var latestMessages = (from t in
   context.Messages
   where t.PartitionKey.CompareTo(tenMinutesAgo) <= 0
   select t
   )

但这会被索引很好地接受吗？还是会导致全表扫描？有人有更好的主意吗？我知道每个表项上都有一个时间戳，但它没有索引，所以对于我的目的来说它太慢了。

Answer 1

我认为你的基本想法是正确的。您设计的查询应该与您希望的一样高效。但我可以提供一些改进。

不要使用 DateTime.Now，而是使用 Date.UtcNow。据我了解，实例无论如何都设置为使用 Utc 时间作为基础，但这只是确保您将苹果与苹果进行比较，并且您可以在显示它们时可靠地将时间转换回您想要的任何时区。

与其将时间存储为 .ToString("o") 将时间转换为刻度并存储，您最终会遇到更少的格式问题（有时您会在最后得到时区规范） ，有时不是）。此外，如果您始终希望查看从最新到最旧排序的这些消息，您可以从最大刻度数中减去刻度数，例如

var messagePartitionKey = (DateTime.MaxValue.Ticks - _contactDate.Ticks).ToString("d19");

指定行键也是一个好主意。虽然两条消息在完全相同的时间发布的可能性极小，但这并非不可能。如果你没有明显的行键，那么只需将其设置为 Guid 即可。

Answer 2

Table 的主键是 PartitionKey 和 RowKey 的组合（形成聚集索引）。

在您的情况下，只需使用 RowKey 而不是 ParitionKey（为此提供一个常量值）。

您还可以遵循诊断方法，例如每十分钟创建一个新的分区键。但这种方法主要是针对归档/清除等需求，

Answer 3

我建议执行类似于 Diagnostics API 使用 WADPerformanceCountersTable 执行的操作。 PartitionKey 将多个时间戳分组到单个项目中。即：它将所有时间戳四舍五入为最近的几分钟（例如，最近的 5 分钟）。这样，您就没有有限数量的分区键，但仍然可以对它们进行范围查询。

因此，例如，您可以有一个 PartitionKey 映射到每个时间戳，四舍五入为 00:00、00:05、00:10、00:15 等，然后转换为 Ticks

Answer 4

• 根据我的理解，使用精确等于“=”的分区键比使用“<”要快得多或“大于”>。
• 如果我们能够获得适合您的条件的分区键和行键的唯一组合，请确保付出更多努力。
• 还要确保减少分区键值的唯一组合，以避免出现更多分区。