我是一个新的Clojure/Cascalog用户,试图迁移一些pig脚本,但我经常在repl中得到如下错误。
FlowException本地步骤失败cascading.flow.planner.FlowStepJob.blockOnJob (FlowStepJob.java:191)
"with-debug“提供了更多信息,但仍然没有问题的根本原因。对如何改进这一点有什么想法吗?
发布于 2012-10-17 23:00:43
我同意堆栈跟踪有时是非常无用的。我可以建议的一件事是编写单元测试:http://sritchie.github.com/2011/09/30/testing-cascalog-with-midje.html,它可以显着缩小您实际问题所在的范围。
如果您的查询适用于基本情况,但在大数据上失败,您可以添加一个陷阱,以查看是什么输入导致了失败:
(<- .... (:trap (hfs-textline "s3://.../errors" :sinkmode :replace)))https://stackoverflow.com/questions/12934243
复制相似问题