如何使用两台计算机进行深度学习？

Question

我有一个带有GPU 940米的笔记本电脑和一个带有GPU GTX 980的台式机。两人都有能力用Pytorch或Tensorflow单独完成深度学习任务。

我怎样才能把这两者结合在一起进行深度学习呢？我必须通过服务器将它们连接到一起吗？

如果是，那么搜索教程的关键字是什么？

Answer 1

服务器只是另一台计算机。因此，您不需要一台才能在两台计算机之间建立一个网络。相反，你可以选择：

• 您可以购买一个开关，并将您的两台机器连接到交换机上。最便宜的开关不超过10美元，可以插上5到8个设备。请注意，您还必须有两个以太网电缆。首先，确保您的两台计算机都有一个网络适配器。
• 或者你可以买一个交叉电缆直接连接计算机，而不需要开关。虽然这种解决方案更便宜，但它的可伸缩性也是最小的。如果将来您想连接第三个设备，那么如果每个设备都只有一个网络适配器，您就不能这样做。
• 如果您有路由器，可能有一种方法可以通过以太网将两个设备连接到路由器，或者使用Wi。在这种情况下，你不需要购买任何额外的东西。

一旦您设置了本地网络，就可以启动探索分布式计算的能力。