数据节点之间的连通性

Question

是否有可能具有不具有互连的datanode。但是所有的datanode都可以与namenode通信。

例如:我的机器中有4个从虚拟机，2个本地虚拟机和2个网络虚拟机，我的机器是主虚拟机。网络虚拟机无法ping我的本地虚拟机。此条件在hadoop配置中是否有效。是否可以确保如果数据进入网络虚拟机，则只应在网络虚拟机之间进行复制。

Answer 1

在reduce阶段，通过http从对等节点收集所需的中间数据。这就是为什么需要在节点之间进行某种通信。如果实例不能，则可能存在错误。