数据处理/挖掘问题

Question

我开始在一个金融信息网站上工作(有点像谷歌财经或彭博社)。

我的网站需要显示实时货币，商品和股票价值。我知道如何做这个前端-wize，但我有一个后端数据存储问题(我已经有数据馈送API)：

你们会怎么做--你们会建立自己的数据库，并用某种后端工作者将所有数据保存在数据库中，然后将前端插入数据库，还是直接将前端插入API，而不挖掘数据？

挖掘数据可能有利于以后的参考(统计数据和API不允许的其他事情)，但如此大量的不断增长的信息是否可以存储在数据库中？这可行吗？我还应该考虑其他什么事情？

谢谢--任何意见都将不胜感激！

Answer 1

首先，我要干净利落地将前端与读取源API的代码分开。完成这些工作之后，我可以让读取源API的代码直接提供给前端，或者提供给数据库，或者两者兼而有之。

我是个数据库专家。我倾向于将API中的数据输入到数据库中，并将前端连接到数据库。但这真的取决于应用程序的需求。

让数据库变得简单而又便宜，让你改变主意。如果您(或任何人)后来决定不保留历史数据，只需在存储新数据后删除旧数据。如果您(或任何人)稍后决定保留所有历史数据，请不要删除旧数据。

馈送数据库还允许您对谁可以查看数据进行细粒度的控制，相对独立于他们的网络操作系统权限。这取决于应用程序，这可能是一件好事，也可能不是一件好事。