首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >访问、更新大型MYSQL表建议和指南

问访问、更新大型MYSQL表建议和指南
EN

Database Administration用户
提问于 2020-04-29 07:26:15
回答 1查看 35关注 0票数 2

我真的是在寻求一些指导或建议。我们已经建立了一个应用程序,它从冠状病毒开始就已经被定制了。对于一些我们从未解决过的问题,我们正在寻求一些建议。

事实上,我们遇到的问题是就业表。我们有1000's的办公室用户整天更新,创造和编辑工作。我们也有10's在现场的成千上万的应用程序连接到这张桌子上,阅读他们的旋转,然后更新,如果他们时钟进进出出。

我们已经推出了所有相关的指数,但我们仍开始看到经济放缓。有时,我们必须重新启动MYSQL。

经过几个小时的谷歌搜索,我们已经找到了很多大数据的解决方案,包括这里的解决方案,但是我们想问问社区他们是怎么想的或者下面的想法,或者有更好的方法吗?

构想1

随着系统的发展,我们得到更多的客户,这只会变得更糟。由于应用程序只能看到1天前和7天前,而rota表从一开始就存储了所有的rota历史,所以我们正在考虑创建一个精确的作业表复制表。该表将存储昨天开始和向前7天的所有rotas,使用cronjob删除旧数据,并每晚添加新数据。然后,应用程序将连接到这个表,获取作业列表,并在输入或退出时更新原始表。

如果用户昨天或7天内更新作业字段,我们将使用触发器来保持两个表的同步,或者通过代码进行更新,这样就更准确了?

这样,通过将应用程序指向新表,我们将读取负载从主要的rota表中移开。

我们的问题是,这是一个很好的方法,还是我们挖一个我们无法爬出的洞?

概念2

只需将一年多前的工作归档到另一个表。如果用户请求查看一年多前的作业,它只需查看另一个表。虽然我们喜欢这个解决方案,但我们可以看到它是一个滑动尺度。随着我们得到更多的客户,我们将不得不尽快开始存档,直到问题在几年后再次出现。

如果这些想法没有用,有没有人能提出其他建议呢?对表进行分区不是一分钟内的选项。

EN

回答 1

Database Administration用户

回答已采纳

发布于 2020-04-29 08:55:27

由于数据可见性仅为7+1日,并且将所有数据保存得更长,听起来您真正需要实现的是按天分区。这也将使它的数量级更容易和更快地清除您不再希望保留的数据。

对于归档,您可以使用第二个复制服务器,该服务器的分区保留时间更长。例如,主服务器只能保留8个每日分区,通过在分区删除前后切换sql_log_bin,可以忽略从复制日志中删除的分区。结果将是,主服务器上只有8天的数据,并且保持较小且快速,而存档副本则将所有分区保存更长的时间,至少多达8192个分区,这是对表上分区数量的限制。如果您真的需要永远保存这些数据,那么您将有20多年的时间来实现更多的进一步存档。;-)

除此之外--可能值得分享您的表定义和缓慢查询--总有可能有一种更有效的查询数据的方法或更好的索引方法,或者一种对需要处理数千行的查询进行预聚合的方法。

票数 1
EN
页面原文内容由Database Administration提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://dba.stackexchange.com/questions/266063

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档