我有一个基准测试应用程序来测试我编写的一些API的性能。在这个基准测试应用程序中,我基本上是使用QueryPerformanceCounter并通过调用API前后的QPC值的差值除以频率来获得定时。但是,如果我从不同的驱动器运行应用程序(在同一组Dlls上运行相同的可执行文件),则基准测试的结果似乎会有所不同。另外,在特定的驱动器上,第一次运行应用程序,关闭应用程序并再次运行它会产生不同的基准测试结果。有人能解释一下这种行为吗?我是不是漏掉了什么?
一些更有用的信息:
其行为如下:运行应用程序,关闭它并再次重新运行它,基准测试结果似乎在第二次运行时有所改进,此后保持不变。在从C驱动器运行的情况下,这种行为更加突出。我还想提到,我的基准应用程序可以选择重新运行/重新测试某个特定的API,而不必关闭该应用程序。我知道这涉及到了跳槽,但我不明白的是,在应用程序的第一次运行时,当你多次运行一个API而没有关闭应用程序时,性能在几次运行后就会稳定下来,然后当您关闭并重新运行相同的测试时,性能似乎会得到改善。
另外,当从不同的驱动器运行时,您如何考虑性能的变化?
信息更新
我做了一个ngen,现在来自同一位置的不同运行之间的性能差异消失了。也就是说,如果我打开基准程序,运行它一次,关闭它并从相同的位置重新运行它,它会显示相同的值。
但我现在遇到了另一个问题。当我从D驱动器启动应用程序并运行几次(在相同的基准测试程序中重复几次app ),然后从第三次迭代开始,所有app的性能似乎都下降了20%左右。然后,如果关闭并重新启动应用程序并运行它,对于前2次迭代,它会给出正确的值(与从C获得的值相同),那么性能也会超出这个值。在从C驱动器运行时,看不到此行为。从C驱动器来看,无论你跑了多少次,它都是相当一致的。
我使用大型双数组来测试我的API性能。我担心GC会在测试之间起作用,所以在每个测试之前和之后,我都会明确地调用GC.Collect() & GC.WaitForPendingFinalizers()。所以我认为这和GC没有任何关系。
我试着使用AQ时间来知道从第三次迭代开始发生了什么,但有趣的是,当我使用AQ时间分析运行应用程序时,性能根本没有下降。
性能计数器不暗示任何有趣的IO活动。
谢谢尼兰詹
发布于 2009-01-23 17:31:11
我认为这里有多种效果:
首先,在测试工具中多次运行相同的函数,每次运行相同的数据,可能会有所改进,因为:
如果测试工具中的函数每次运行的数据是不同的,这就可以解释为什么关闭和运行测试工具会再次提高结果:数据现在也将出现在磁盘缓存中,这并不是第一次。
最后,是的,即使两个“驱动器”位于同一个物理磁盘上,它们的性能也是不同的:从磁盘盘外部读取数据的速度比磁盘内部快。如果它们是不同的物理磁盘,那么性能上的差异似乎是很可能的。另外,一个磁盘可能比另一个磁盘更零散,导致较长的查找时间和较慢的数据传输速率。
发布于 2009-01-23 09:21:40
运行一个应用程序会将其可执行文件和其他文件从硬盘驱动器带到操作系统的磁盘缓存中(在RAM中)。如果它在不久之后再次运行,这些文件中的许多很可能仍然在缓存中。RAM比磁盘快得多。
当然,一个磁盘可能比另一个磁盘快。
发布于 2009-01-23 06:10:57
是。它叫及时编译。基本上,您的应用程序部署为MSIL (),并且在第一次运行它时,它会被转换为本机代码。
您可以始终运行NGen (请参阅上面的文章),或者在性能测试脚本中有一个热身期,在实际测试性能之前,它会在这个场景中运行几次。
https://stackoverflow.com/questions/472040
复制相似问题