如何对CNN进行预训练/选择以进行生物医学视频分析

Question

Data我正在尝试用一个相当专门的任务(流预测)来训练生物医学领域的模型。我的输入包括视频剪辑，我想预测一个单一的图像或视频。我有像素的地面真相，每帧的视频，但数量是非常有限的视频。然而，我确实有很多相关场景的未标记数据，这就是为什么我考虑转移学习/预培训的原因。

体系结构体系结构明智我正在考虑一个CNN，RNN组合，其中CNN为RNN提供输入帧的表示，以了解输入帧之间的时间关系。

​

现在我的问题是:我应该使用什么样的CNN，我应该对它进行什么预训练？由于我正在处理生物医学数据，我会假设图像网络以及大多数其他图像数据集并没有真正的帮助，因为图像内容是非常不同的。是否有任何数据集/任务/网络可用于此目的？

Answer 1

有些人推荐浅层自动编码器对网络进行预训练，如果没有太多的标记数据，但是有大量的未标记数据。可以参考Géron的书“与Scikit- Learning和TensorFlow一起动手机器学习”，但网上也有很多文章和教程。