纱线:用applicationId获取容器

Question

我想列出用于特定MR job的容器正在运行的节点。

我只有application_id。

是否可以使用Hadoop和/或通过命令行来完成？

Answer 1

这可以使用yarn命令来完成。

1. 运行yarn applicationattempt -list <Application Id>以获取应用程序尝试id
2. 运行yarn container -list <Application Attempt Id>获取容器ids
3. 运行yarn container -status <Container Id>以获取任何特定容器的主机。

如果您希望在bash脚本中这样做，或者希望为一个拥有大量容器的应用程序获取每个主机，那么您可能希望解析出企图/容器id和主机，但这至少是一个开始。

Answer 2

您可以使用资源管理器UI找到它们。在现有应用程序中按ID查找应用程序，然后单击有ID的链接。您将看到您的应用程序统计数据。创建跟踪URL并单击“历史记录”链接。在那里，您将能够找到任务，在您的地图操作和重新渗透。您可以打开每个任务，查看分配给哪个节点的信息、多个尝试、每个任务和尝试的日志以及许多其他有用的信息。

要从命令行获取有关容器状态的信息，可以使用bash中的纱线容器-status命令。