非索引数据最快的 SQL 查询

Question

我正在针对 SQL Server 2005 数据库构建一些自定义报告。该数据库属于我们运行的第三方管理应用程序。我提取的数据不是该网站的主要目的，因此除了时间戳列之外，数据大部分都没有索引。目前，只涉及一张表——一张大约有 7 亿行的表。因此，当我对它运行一个只返回 50 行的查询时，它必须轮询所有 7 亿行。

我希望加快速度，但不想对添加到 WHERE 子句的每一列建立索引 - 我不知道添加这么多索引最终会大大提高速度（或者我是这样）错误的？）。因此，我很好奇如果我无法向表中添加任何新索引，最佳实践是什么！

存储过程似乎不是最合适的。索引视图可能是最好的主意？想法？

这是表架构：

DeviceGuid (PK, uniqueidentifier, not null)
DeviceID (int, not null)
WindowsEventID (PK, int, not null) (indexed)
EventLog (varchar(64), not null)
EventSource (varchar(64), not null)
EventID (int, not null)
Severity (int, not null)
Description (nvarchar(max), not null)
TimeOfEvent (PK, datetime, not null) (indexed)
OccurrenceNbr (int, not null)

这是一个示例查询：

SELECT COUNT(*) AS NumOcc, EventID, EventLog, EventSource, Severity, TimeOfEvent, Description
FROM WindowsEvent
WHERE DeviceID='34818'
    AND Severity=1
    AND TimeOfEvent >= DATEADD(hh, DATEDIFF(hh, GETDATE(), GETUTCDATE()), '2010/10/27 12:00:00 AM')
    AND TimeOfEvent <= DATEADD(hh, DATEDIFF(hh, GETDATE(), GETUTCDATE()), '2010/11/3 12:00:00 AM')
    AND EventID<>34113
    AND EventID<>34114
    AND EventID<>34112
    AND EventID<>57755
    AND EventSource<>'AutoImportSvc.exe'
    AND EventLog='Application'
GROUP BY EventID, EventLog, EventSource, Severity, Description
ORDER BY NumOcc DESC

也许查询很糟糕......它在 4.5 分钟内返回 53 行。

Answer 1

这里的最终解决方案是针对索引字段运行查询，然后在运行查询的应用程序中过滤它们。两个字段最终包含足够相似的信息，我可以根据一个索引进行查询并获得与我想要的数据非常接近的近似值。我循环返回并从结果列表中删除了所有不匹配的实体。花费的时间少得多！

Answer 2

如果您的查询不使用任何索引，那将非常糟糕。您不需要在每一列上都有索引，但您需要在右列上有一个索引。鉴于 TimeOfEvent 已被索引，它可能不太适合您的需求。

右列将取决于数据的分布。最好的索引可能是提供最高选择性的索引（即，当您知道索引的键值时，它会返回最少的行）。如果您知道提供最佳选择性的列，则可以尝试在其上建立索引。

为了帮助确定最佳索引，您可以使用 SSMS 中的显示估计执行计划。这将帮助您了解将使用哪个索引。添加索引后，您可以运行查询并使用执行计划评估结果。当然，观察经过的时间也会有帮助。

Answer 3

使用双 row_number 技巧尝试此方法：

SELECT  RN_Desc as NumOcc, *
FROM    (
        SELECT  row_number() Over(partition by EventId order by EventLog, EventSource, Severity, Description) as RN_Asc,
                row_number() Over(partition by EventId order by EventLog desc, EventSource desc, Severity desc, Description desc) as RN_Desc,
                *
        FROM    WindowsEvent 
        WHERE   DeviceID='34818' 
                AND Severity=1 
                AND TimeOfEvent >= DATEADD(hh, DATEDIFF(hh, GETDATE(), GETUTCDATE()), '2010/10/27 12:00:00 AM') 
                AND TimeOfEvent <= DATEADD(hh, DATEDIFF(hh, GETDATE(), GETUTCDATE()), '2010/11/3 12:00:00 AM') 
                AND EventID<>34113 
                AND EventID<>34114 
                AND EventID<>34112 
                AND EventID<>57755 
                AND EventSource<>'AutoImportSvc.exe' 
                AND EventLog='Application' 
        ) t
WHERE   RN_Asc = 1 
ORDER BY NumOcc DESC 

使用此方法，引擎不需要执行任何聚合，只需通过表一次即可。
如果它不起作用，请尝试使用行号的部分顺序和分区以获得正确的分组。

Answer 4

这很简单，但我会尝试将索引值作为第一个测试