我有一个本地数据库,里面有大约1 1GB的数据,我将其与我制作的金融市场分析软件一起使用。我从外部应用程序重复调用存储过程。此存储过程从MEMORY表中提取行,执行计算,然后将结果发送回应用程序。
每个查询从一个表中调用数据,该表位于一个设定大小的“窗口”内(例如,100,000 rows)。每次后续查询都会将窗口移位1行并计算结果。
在这种情况下,是否可以以一种有用的方式使用MySQL缓存?
为了提高速度,我目前只是MEMORY引擎,而不是MYISAM或InnoDB。
发布于 2011-05-25 21:14:08
根据您正在执行的聚合,可能的工作是选择所有结果并处理窗口客户端。
然后,客户端可以(用您的窗口大小替换1000 ):
这样,您不需要在每次读取下一个值时枚举所有1000个结果,从而将算法从O(n^2)更改为O(n)。
为了在读取时获得更好的效率,您可以使用由固定长度的循环缓冲区支持的队列来存储当前的结果窗口。这将允许您将缓冲区视为标准队列,但不需要在添加/删除项时重新洗牌支持数组中的元素。
https://stackoverflow.com/questions/6124702
复制相似问题