在我的笔记本电脑上使用虚拟机安装多项式Hadoop集群

Question

我有一个windows 7笔记本电脑和，我需要在它上安装hadoop (mutlinode)集群。

我已经做好了以下准备- -

• 虚拟软件，即virtualbox和vmware播放器。
• 两个虚拟机，即 Ubuntu -用于Hadoop主和 Ubuntu - for (1X) Hadoop从机 是否有人在您的笔记本上使用虚拟机安装过这样的集群？

如果是，请帮助我安装它。

我搜索过google，但是我不知道如何使用VM在hadoop上配置这个多节点集群？

如何使用VMware或virtualbox在windows 7上运行两个Ubuntu？

我们应该使用相同的Ubuntu版本的VM映像还是使用不同版本的Ubuntu的vm映像？

Answer 1

是的，您可以使用ubuntu两个节点。我正在使用五个节点(1个主节点，4个数据节点)。如果你想在虚拟机软件中安装多个节点。只需从以下链接下载ubutnu：http://www.ubuntu.com/download/desktop并安装两台机器。并安装java和openssh。并从以下链接下载多项式的shell脚本：：https://github.com/tonyreddy/Apache-MultiNode-Insatallation-Shellscript

试试看..。祝你一切顺利.

Answer 2

因为您在笔记本上运行Hadoop，所以很明显，您这样做是为了学习、构建POC或功能调试。

不必经历安装和设置Hadoop和相关大数据软件的麻烦，只需安装预配置的伪分布式VM即可。

一些很好的选择是：

• 云QuickStart VM
• 霍顿工程沙箱

我已经在笔记本电脑上使用了Cloudera的VM很长一段时间了，它一直运行得很好。

Answer 3

Cloudera和Hortonworks是启动和运行的最快方法。

确保您的笔记本上安装了足够多的RAM，以便操作系统已经在运行，否则当您使用虚拟机时，您的笔记本电脑会突然重新启动。

让我举个例子-

如果您使用的是Windows 10，它需要3-5GB RAM才能正常工作，这意味着如果您在RAM中加载一个5GB大小的虚拟机，当它找不到足够的RAM操作时，Windows可能会崩溃。

您必须将RAM从8GB升级到12 8GB或最好的16 8GB，以便您的笔记本电脑顺利运行。

希望它能帮上忙