在cdsw中获取状态作业

Question

我在CDSW "Cloudera-Data-Science-Workbench“中有一些R和python脚本。我创建了一个外壳脚本来用curl -v -XPOST运行它。

如何从CDSW接口获取作业状态？

Answer 1

嗨，这个问题发布已经有一段时间了，但希望答案对某些人仍然有用:)

运行后：

curl -v -XPOST http://cdsw.example.com/api/v1/projects/<$USERNAME>/<$PROJECT_NAME>/jobs/<$JOB_ID>/start --user "API_KEY:" --header "Content-type: application/json"

您应该能够在输出中看到如下所示的URL：

http://cdsw.example.com/api/v1/projects/<$USERNAME>/<$PROJECT_NAME>/dashboards/<$ID>

因此，您可以使用它来检索作业状态，例如，使用jq通过管道传输状态(或者不使用它，这样您还可以看到输出中的状态以及返回的其他内容)：

curl -v http://cdsw.example.com/api/v1/projects/<$USERNAME>/<$PROJECT_NAME>/dashboards/<$ID> --user "API_KEY:" | jq '.status'