1回答
辅助名称节点功能
hadoop、hdfs
有人能解释一下从课本上摘取的黑体字到底是什么意思吗？“次级namenode的状态滞后于主节点的状态”意味着什么？提前感谢
浏览 3提问于2015-07-18得票数 2
回答已采纳
1回答
如何在windows上安装hadoop2.4.1
windows-7、cluster、hadoop、hdfs、apache-spark
我想在纱线模式下使用hadoop设置一个集群。我想使用spark进行映射-减少，并使用submit来部署我的应用程序。我想在cluster..can上工作，任何人都可以帮助我使用windows在集群中安装HADOOP。
浏览 0提问于2017-03-13得票数 0
1回答
猪在色调中不可见
apache-pig、cloudera-cdh、hue
我有一个hadoop集群。但猪编辑器在色调(3.7)中不可见：
我怎么才能修复它？
浏览 0提问于2018-01-16得票数 6
1回答
如何找到我的hadoop集群的集群id？
hadoop、amazon-web-services、amazon-s3
我希望将数据从AWS S3复制到我的hadoop集群。在研究复制数据的过程中，我发现了。在阅读有关它的文章时，我偶然发现了集群标识项。我从上读到了有关集群id的文章，但是无法确定如何获得hadoop集群的集群id。注意：--我使用的是HortonWorks2.2集群设置
浏览 1提问于2015-03-13得票数 2
回答已采纳
1回答
使Hadoop以Kerberos用户身份运行
hadoop、mapreduce、hdfs、kerberos
在Kerberos中有一个名为"foo“的用户，hadoop集群受到Kerberos的保护。我想让hadoop集群以"foo“的身份运行作业，我该怎么做？什么配置允许hadoop客户端指定kerberos用户帐户名运行，就像hadoop集群'kinit username‘然后运行mapreduce作业一样？仅供参考，hadoop 2.6.0
浏览 2提问于2015-11-03得票数 0
5回答
用Java往腾讯云服务器里的Hadoop写入数据时出现异常ipc.RemoteException？
云+校园、云服务器、java、hadoop
我用腾讯云的学生机在CentOS7的系统上搭建了Hadoop的伪分布式的环境，配置等都正常，datanode，namenode 等进程都正常开启，http的50070也都能正常访问，空间足够，然后用Windows\n".getBytes()); output.close();下面是Hadoop的logs文件夹中hadoop-ma-namenode-spring.log文件的报错
2018-04-19 19:22:42,078
浏览 4182提问于2018-04-19
1回答
如何将文件从HDFS复制到远程HDFS
hadoop、hdfs
我希望将文件从Hadoop集群复制到远程集群。我知道远程名称节点的IP和端口。hadoop -cp hdfs://MyNamespace/path/file hdfs://RemoteNamespace/path/file
但是，如果不配置hadoop_conf_di
浏览 1提问于2018-04-20得票数 0
回答已采纳
2回答
如何撤消hadoop -rmr？
hadoop、data-recovery
我意外地删除了hadoop集群上的一个大目录我怎么才能解开这个。我忘记了在删除所有内容之前，只有集群中的客户端节点的快照。如果我恢复到这个快照，会发生什么？我知道文件实际上并没有被删除/覆盖，而是访问内存中那个位置的能力。会恢复这个修复吗？
浏览 3提问于2016-04-03得票数 0
2回答
无法在amazon emr中使用apache flink
hadoop-yarn、emr、amazon-emr、apache-flink
我得到的错误信息是$ cd flink-0.9.0
$ .Diagnostics: File file:/home/hadoop/.flink/application_1439466798234_0008/flink-conf.yaml does not existjava.io.FileNotFoundException: File file:/home/hadoop/.flin
浏览 4提问于2015-08-13得票数 8
回答已采纳
2回答
动物园管理员和卡夫卡在Hadoop2.6集群中的位置
hadoop、apache-zookeeper、apache-kafka
Hadoop2.6使用Yarn作为下一代地图减少，同时也是集群管理器。对于集群管理服务，我们还需要使用Hadoop2.6中的ZooKeep2.6吗？我们怎么设置动物园管理员。如何为hadoop集群安装Kafka连接。什么是卡夫卡的消费者和生产者将数据发送到hadoop文件系统。我已经设置了Hadoop2.6单节点集群。接下来，我理解的方法是让动物园管理员和Kafka负责数据流到hadoop<
浏览 2提问于2015-07-27得票数 4
回答已采纳
1回答
上的Hadoop :如何添加外部软件
google-compute-engine、hortonworks-data-platform、google-hadoop
我需要在上建立一个Hadoop集群。对我来说还不清楚该怎么做。我脑海中浮现的选择是：
1)我创建了一个带有附加内容的自定义映像，并使用它部署hadoop集群，或者通过单击和部署。那能行吗？2)使用标准映像和带有bdutil的 (编辑现有映像)来执行所有sudo apt-get install xxx。这是一个可行的选择吗？选项1)基本上是我过去在AWS上运行Hadoop所必须做的事情，老实说，这是一个需要维护的痛苦。我对选项2)非常满意，我不确定butil是否允许这样做
浏览 1提问于2015-01-15得票数 0
回答已采纳
1回答
在群集上部署Mahout作业
hadoop、mapreduce、mahout
我是Hadoop/Mahout的新手，我理解这些概念，但我在将Mahout作业部署到已经设置的计算机集群时遇到了问题。我已经在一台计算机上使用了Mahout，但是我应该怎么做才能使它在已经形成的Hadoop集群上运行呢？我有一个安装了Hadoop 0.20.2和Mahout 0.9的集群，其中包含Hadoop 1.2.1。我应该复制什么jars才能运行包含Mahout调用的代码，或者我还应该做些什么才能让它在Hadoop<e
浏览 0提问于2014-10-29得票数 0
2回答
我必须手动启动GCloud上的Hadoop群集
hadoop、google-cloud-platform
几个月来，我一直在使用使用Google脚本创建的Hadoop集群。每次启动机器时，我都必须使用以下命令手动启动Hadoop：cd /home/hadoop/hadoop-install/sbin除了脚本，我还能怎么解决这个问题呢？(集群创建后的第一次引导总是自动启动Hadoop，为什么不总是这样呢
浏览 0提问于2015-12-14得票数 0
1回答
如何在一个集群中运行hadoop流作业并将输出写入其他集群？
hadoop、hadoop-streaming
我有两个hadoop集群和两个不同的ugi。我想在一个集群中运行hadoop作业，因为队列是空的，但是我还想输出到另一个集群，因为它的hdfs是空的，我该怎么做呢？在hadoop流作业中有没有像distcp一样的方法(我可以设置源ugi和目标ugi)？
非常感谢mutch
浏览 14提问于2018-08-24得票数 0
3回答
如何在Hadoop中的机器之间传输文件并使用Pig搜索字符串
hadoop、mapreduce、apache-pig、hdfs
我需要将这个文件从一台机器传输到hadoop集群机器。我想hadoop中没有scp命令(还是有？)如何将文件传输到hadoop机器？而且，一旦文件在我的hadoop集群上，我想搜索包含特定字符串的记录，比如“XYZTechnologies”。这是猪怎么做的？一些示例代码很好地给了我一个先导。我尝试了Jagaran的建议，得到了以下错误：
2012-03-18 04:12:55,
浏览 0提问于2012-03-16得票数 0
回答已采纳
2回答
Cascalog能否链接到外部Hadoop集群？
hadoop、cascalog
看起来对hadoop的依赖是在项目的project.clj文件中提供的，如下所示如果我必须包含对本地安装的Hadoop单节点集群或一些外部hadoop集群的依赖关系，我应该怎么做？如果它是本地的，我是否应该简单地将“hadoop的路径”放在"or
浏览 0提问于2013-09-23得票数 0
1回答
在Ambari集群上安装Hue
hadoop、hadoop-yarn、oozie、hue、ambari
我有一个Ambari集群来管理我的hadoop/spark作业。我想使用oozie编辑器来安排我的工作流程。色调是最流行、最易用的一种。如何在由Ambari管理的现有hadoop集群上安装hue。
浏览 0提问于2017-01-27得票数 0
1回答
当Secondary NameNode失败时，hadoop集群会发生什么。
Hadoop集群被认为是单点故障，因为所有的medata都是由NameNode存储的。如果次要名称节点失败，群集将失败或继续运行，那么辅助NameNode怎么办？
浏览 0提问于2014-01-15得票数 1
回答已采纳
1回答
为什么最新的Hadoop 2.2.0中没有包含'mapred-site.xml‘？
apache、hadoop、mapreduce、bigdata
最新版本的Hadoop提供了mapred-site.xml.template，我们需要使用它创建一个新的mapred-site.xml文件吗？任何与Hadoop 2.2.0相关的文档或解释的链接都将不胜感激。
浏览 0提问于2013-11-24得票数 13
回答已采纳
云服务器
ICP备案
对象存储
云点播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号