设置伪分布式/单节点设置Apache Hadoop 2.2

Question

我已经安装了Apache Hadoop2.2作为单节点集群。当我尝试执行图形示例时，它以错误"LocalJobRunner，你不能在主/从模式下运行，因为一次只有一个任务“结束。

我在浏览论坛时发现，我可以将mapred-site.xml更新为具有4个映射器。我试过了，但还是没有用。我遇到了另一个论坛，我可以将单节点设置更改为伪分布式模式，它解决了这个问题。

谁能让我知道，我需要更改哪些配置文件才能使单节点设置表现为伪分布式模式。

Answer 1

除了renZzz answer之外，您还需要检查是否可以ssh到本地主机，而不需要密码：

 $ ssh localhost

如果在没有密码的情况下无法ssh到localhost，请执行以下命令：

$ ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa
$ cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

以下链接可以帮助您- https://hadoop.apache.org/docs/current2/hadoop-project-dist/hadoop-common/SingleNodeSetup.html

Answer 2

在我的第一次设置中，我遵循了一些手册，但对于单节点设置来说，最好的无疑是pdf Apache Hadoop YARN_sample。我建议你一步一步地使用这本手册

Answer 3

giraph.SplitMasterWorker=false

您可以在giraph-site.xml中设置它，也可以通过命令行选项传递：

 -ca giraph.SplitMasterWorker=false

参考：https://www.mail-archive.com/user@giraph.apache.org/msg01631.html