在AWS EMR上安装Druid

Question

刚刚开始探索Druid，我们还没有找到在AWS上安装Druid的博客链接，有没有机会在AWS EMR上安装Druid？如果是这样，如果有任何预先定义的云形成可以执行，这将对我在Druid上的研发有很大的帮助。

Answer 1

设置一个基本的单集群druid非常简单

• 使用单个节点主节点启动EMR，如r3.4xlarge
• download imply (附带druid和pivot)、https://docs.imply.io/on-prem/quickstart

tar -xzf imply-3.1.8.1.tar.gz cd imply-3.1.8.1
bin/supervise -c conf/supervise/quickstart.conf

如果您正在寻找一个完整的集群部署，EMR不是合适的工具。如果你了解EKS / kubernetes，我认为最简单的入门方法是使用Helm https://github.com/helm/charts/tree/master/incubator/druid。

另一种选择是寻找隐含云，他们也有关于Druid的可靠文档。德鲁伊自己的文档相当密集。我发现暗示对初学者来说更好。https://docs.imply.io/cloud/

尽管对于POC来说，单个具有200G存储的r3.4xlarge或i3.4xlarge已经足够好了

Answer 2

你找不到太多文档的最有可能的原因是这两个东西有不同的性质。

Druid意味着长寿和statefull，其中EMR hadoop变体意味着以一种更短暂的方式上下旋转。因此，这种组合有些笨拙。

考虑使用不同的hadoop发行版，如HDP。当然，如果需要，您可以轻松地将其部署在AWS上，或者如果您想要将基础设施成本降至最低，则可以将其部署在您自己的硬件上。

免责声明:我是HDP的分销商Cloudera的员工，HDP是目前Druid下最常见的hadoop平台。