回答情况：
提问时间：
问题标签：
以下是场景 / \ 在reducer中，我想将数据写到不同的文件中，假设reducer看起来像这样 for line in sys.STDIN: create_type_1_file(line) create_type_2_file(line)
if(lin
浏览 2修改于2020-06-18得票数 0
我正在做一个关于Apache Spark的pluralsight课程，他们一度要求我们在Hadoop-streaming上设置一个依赖项。com.github.scala-incubator.io" %% "scala-io-file" % "0.4.3"
libraryDependencies += "org.apache.hadoop" %% "hadoop-streaming
浏览 13修改于2016-09-05得票数 2
回答已采纳
I was running $HADOOP_HOME/bin/hadoop jar $HADOOP_HOME/hadoop-streaming.jar \ -D stream.num.map.output.key.fields=4 \ -output myOutputDir \ -reducer org.apach
浏览 1提问于2011-09-28得票数 2
回答已采纳
我的map任务成功完成，我可以看到应用程序日志，但reducer仍处于挂起状态map 100.00% 200 0 0 200 0 0 / 40当我查看reduce任务时，我看到当我看到hadoop-hd
浏览 2修改于2011-11-01得票数 0
回答已采纳
当前版本的hadoop-streaming需要一个用于组合器的Java类，但我在某处读到我们可以使用如下所示的技巧：
hadoop jar .
浏览 0修改于2014-08-31得票数 2
回答已采纳
更新一下，我知道jar已经在那里了，在我尝试hadoop-streaming处理另一个失败的类文件后，我正在尝试这个，以便确定是否类文件本身或我使用它的方式有问题。
浏览 0修改于2017-05-23得票数 0
回答已采纳
或者我需要使用hadoop-streaming jar来运行java jar应用吗？
浏览 5修改于2020-01-21得票数 1
回答已采纳
一个叫做"hadoop-streaming“，另一个叫做”hadoop-tools-dist“。该错误显示以下内容：
项目'hadoop-streaming‘缺少所需的源文件夹：'C:/Users/User/hadoop/hadoop-yarn-project/hadoop-yarn/hadoop-yarn-server
浏览 1提问于2013-02-11得票数 0
回答已采纳
(运行良好)
使用groovy-hadoop运行一个groovy示例与使用文件(不确定如何运行这个示例)和hadoop-streaming有什么区别？为什么我们要用一种方法胜过其他方法。
浏览 2修改于2017-05-23得票数 2
回答已采纳
我需要编译这个类，并将其捆绑在用于hadoop-streaming的jar中，由于对Java的了解有限，这是一些挑战。
浏览 1修改于2018-11-26得票数 5
回答已采纳
uSt4KN1zwuIQpwDwa+J8IujOeQMpV5vRHmbuKZLasgs=Main class: None这是发送给hadoop集群的命令：Main class : None
Arguments : hadoop-streaming
浏览 0修改于2016-12-30得票数 5
我正在使用hadoop2.2hadoop jar share/hadoop/tools/sources/hadoop-streaming*.jar -mapper wordmapper.py
浏览 0提问于2014-07-02得票数 2
在那里我运行不同的mapreduce命令，比如 -D mapred.output.compression.codec
浏览 0提问于2017-01-12得票数 0
在Google file Platform中找到hadoop-streaming 1.2.1.jar jar文件的路径。
浏览 25提问于2019-11-04得票数 0
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号