hdfs配置

Question

我是个新手。尝试在我的实验室设置一个hdfs系统来服务我的数据(我不打算使用mapreduce)。

到目前为止，我已经阅读过，集群设置，但我仍然感到困惑。几个问题：

• 我需要第二次命名节点吗？
• 有两个文件，主人和奴隶。我真的需要这两个文件，尽管我只是想要hdfs？如果我需要的话，里面应该放什么？我假设我的主从和数据节点是奴隶？我需要从节点吗？
• namenode、备用namenode、datanode和client需要哪些配置文件？(我假设所有4项都需要core-site.xml )？另外，有人能提出一个好的配置模型吗？namenode、备用namenode、datanode和客户端的示例配置将非常有用。

我感到困惑，因为大多数文档似乎都假设我想使用map-还原，但事实并非如此。

Answer 1

要回答你的前两个问题1。不，如果你不在乎namenode是否崩溃，就不需要二级namenode。您需要使用hadoop命令start-dfs.sh从namenode启动datanode守护进程。如果不想使用第二个namenode，则不需要主文件。

关于您的第三个问题，有关于如何在http://www.hadoop-blog.com/2010/11/how-to-quickly-install-hadoop-020-in.html上安装小型hadoop集群的逐步文档。

请浏览它，您可以跳过有关JobTracker和任务跟踪器的步骤，这些步骤应该足以启动您的HDFS。