使用Tango服务的Android Tensorflow

Question

我想知道是否有人使用Google尝试过Android (例如，在onFrameAvailable或onPointCloudAvailable之类的回调中)。我正在寻找任何可能性集成Tensorflow (例如分类模块)与谷歌探戈项目，在那里我不能访问相机使用Android API。请建议一下。

Answer 1

这实际上取决于您想要的TensorFlow项目的数据。

由于Tango能够尽可能快地获取帧和点云数据，所以它不会将其保存到内存中，因为它会在短时间内填充一GB的数据。尽管如此，下一个问题是，您是否想尝试在设备或另一台机器上远程运行TensorFlow。如果你想在设备上运行它，那么我觉得这远远超出了手机在处理当前技术方面所能处理的范围。

如果您想再次将其发送到另一台机器，则存在一个问题，即尝试实时或不实时地获得结果。如果您不需要实时，那么我建议您只将所有数据写入一个文件，或者以3D重构API已经为您提供的方式保存数据。如果您需要来回发送的快速数据，我知道这个NDK Websocket单库文件，它可以以合理的速率发送数据，并且当您需要发回什么东西时，也会得到TensorFlow发现的响应。使用一些更聪明的TCP/UDP网络技巧可以更好地优化这一点，但是如果您主要关注TensorFlow部件本身，那么我觉得这个想法在整体上是非常合适的。