有没有可能用RED的‘PaaS在云上构建一个大数据应用程序?我正在研究如何在云上构建一个使用Hadoop ( HDFS ),Spark,一个Apache Mahout的Scala应用程序,但我找不到任何关于它的东西。我已经看到了HortonWorks的一些东西,但不清楚如何在openshift环境中安装它,以及如何在云too.Is中添加HDFS节点使用OpneShift?
这在亚马逊是可能的,但我的问题是:在OpenShift中是可能的吗?
发布于 2014-09-18 01:00:10
这真的取决于你最终想要实现的目标。我知道您提到过使用Scala在Openshift上构建一个大数据应用程序,但是该应用程序最终会做什么呢?
我以前让Hadoop运行过,但是如果你想要一个更好的例子,请在这里查看这个快速入门,了解它是如何完成的,https://github.com/ryanj/flask-hbase-todos。我知道它不是scala,但这里有一篇很好的文章,它将向你展示如何组合一个scala应用程序https://www.openshift.com/blogs/building-distributed-and-event-driven-applications-in-java-or-scala-with-akka-on-openshift。
发布于 2014-09-22 17:40:40
应用程序最终将做什么?:预测几个足球联赛的足球比赛结果,一个web应用程序(ruby)和统计计算和数据挖掘,使用Scala语言和apache框架(spark& mahout)进行计算。我们通过CSV文件获取信息,处理并保存在nosql db (Cassandra)中。所有这些都在云(OpenShift)上,这就是我们的想法。
我已经看过信息了,https://github.com/ryanj/flask-hbase-todos.I会试着用这种方式,但是用Scala。
https://stackoverflow.com/questions/25845876
复制相似问题