首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >MapReduce分布式缓存

MapReduce分布式缓存
EN

Stack Overflow用户
提问于 2010-07-02 18:06:05
回答 1查看 1.1K关注 0票数 1

我正在使用以下命令向Hadoop的分布式缓存添加一个文件

代码语言:javascript
复制
     Configuration cng=new Configuration();
     JobConf conf = new JobConf(cng, Driver.class);
     DistributedCache.addCacheFile(new Path("DCache/Orders.txt").toUri(), cng);

其中,DCache/Orders.txt是HDFS中的文件。

当我尝试在mapper的configure方法中从缓存中检索这个文件时,使用:

代码语言:javascript
复制
    Path[] cacheFiles=DistributedCache.getLocalCacheFiles(conf);

我得到空指针。可能的错误是什么?

谢谢

EN

回答 1

Stack Overflow用户

发布于 2010-08-04 08:19:24

DistributedCache不能在单节点模式下工作,它只返回一个空指针。或者至少这是我在当前版本中的经验。

我认为url应该以hdfs标识符开头。

http://hadoop.apache.org/common/docs/current/mapred_tutorial.html#DistributedCache

票数 1
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/3164771

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档