在hadoop流中使用fopen

Question

当我使用hadoop流执行时，如何在本机应用程序中打开文件？

例如，我有如下代码：

​

int main(int argc, char** argv){
   FILE* fp = fopen(argv[1], "a+");
   ...
   fscanf(fp, "%d", val);
   ...
   fclose(fp);
}

​

如果可能的话，你可以建议任何其他的方法或相关的建议吗？

如果可能的话，有关于这个主题的文档吗？如何不为hadoop-streaming编程。

对不起，我的英语不好。

谢谢

Answer 1

当我使用Hadoop流执行时，如何在本机应用程序中打开文件？

HDFS通过WebHDFS和HttpFS为各种操作提供REST API。可以从所有语言实用地访问REST API。还要注意的是，这些语言还具有针对REST API轻松编程的库。