我有一个维护系统性能数据的表,每条记录都是对某个重要方法的调用,由方法名称、持续时间和令牌组成,每个对系统的请求都被赋予一个唯一的令牌,因此所有具有相同令牌的记录都是相同的请求,例如:
CallName Duration Token
----------- ----------- -----------
GetData 121 12345
Process 800 12345
SaveData 87 12345
GetData 97 ABCDE
Process 652 ABCDE
SaveData 101 ABCDE我对按令牌和CallName分组的聚合数据感兴趣,例如:
-- The total duration of each request, in descending order
SELECT Token, SUM(Duration) FROM Requests GROUP BY Token ORDER BY SUM(Duration) DESC
-- The average duration of each call, in descending order
SELECT CallName, AVG(Duration) FROM Requests GROUP BY CallName ORDER BY AVG(Duration) DESC现在,这个表可能非常大,我只会对每个查询的前几条记录感兴趣,所以我已经为这两个查询实现了分页。问题在于,由于这些查询涉及聚合函数,所以SQL server最终会执行表扫描。
其他人肯定也有过这个问题吗?
这里我真正需要的是一个按令牌分组的SUM(工期)的“索引”,即一个表,我可以这样做:
SELECT Token, SumToken FROM RequestTokens ORDER BY SumToken DESC触发器是迄今为止我想出的最好的解决方案,但我已经看到这是一个死锁/一致性的噩梦!:-S
发布于 2009-09-21 14:01:04
基于聚合的视图(甚至可能是索引视图)如何?我对索引视图做了很多工作,但本文讨论了如何将它们用于AVG()这样的复杂聚合。也许它会让你走上正确的方向。
http://msdn.microsoft.com/en-us/library/aa933148%28SQL.80%29.aspx
发布于 2009-09-21 13:49:55
首先,令牌列上的索引不是足够的吗?这样,给定令牌值,SQL查询优化器将只扫描索引中包含您感兴趣的行的部分。将其作为一个聚集索引,您将获得最佳的性能。
接下来,您如何知道您对聚合感兴趣的令牌值?没有列出日期时间(或时间戳)列,令牌值似乎是随机分配的(相对于某种形式的升序值),因此我猜想您知道在发出查询之前要聚合的令牌值--在其中索引应该做您想做的事情。如果值未知,但以某种方式上升,则可以使用许多策略首先确定最新的X令牌值,一旦得到/这些令牌,就返回到部分表扫描。
发布于 2009-09-22 14:13:35
既然我对这件事有了更好的理解,我就再试一试。这是一个常见的报告问题,它会导致数据仓库解决方案,比如:您可以添加包含预聚合数据的第二个表吗?这确实是非规范化/冗余数据..。但它似乎是明确和明确的,并服务于企业的需要。这个想法有几个缺点:
如果数据只输入一次,是否可以修改数据输入例程以同时添加聚合行。如果随着时间的推移,它会慢慢地流进来,你将需要反复出现的过程来“清理事情”。我在一般原则上避免触发;它们在这里可能会有所帮助,但它们也可以根据使用模式和数据之间的相互关系来绑定您的系统。
数据必须是最新的吗?聚合数据是否与详细数据不同步,如果是的话,会持续多长时间?您可以设置一个SQL代理作业,它每天/小时/5分钟运行,扫描最近的条目并更新聚合表。(添加索引的“最后输入”列,这些更新可能是快速的。)折中是你的数据将被关闭的时间。(但是那个datetime列可以表示“向上通过”数据是准确的。也许你没有让聚合数据在那个时间点之后可用?)
如果数据输入后不改变(没有更新,没有删除,没有迟到的行),这就可以工作--但是如果您必须随着时间的推移维护更新,并且聚合的数据更改必须在输入数据的同时可用,那么维护它可能是一个噩梦。
https://stackoverflow.com/questions/1454555
复制相似问题