是否可以使用PyTorch闪电螺栓在实例分段任务上微调SimCLR？

Question

我有一个高分辨率无人机图像的数据集，我已经将其拆分成大小为512x512的瓦片。这些瓷砖将通过描绘特定类型的植物进行注释，并以COCO格式存储。我想使用自监督学习，例如在tiles中进行分割。Pytorch Lightning bolts模块提供了已经预先训练好的自我监督模型，例如SimCLR。根据bolts module documentation的说法，应该可以使用螺栓在任何计算机视觉任务上微调SimCLR。

然而，我找到的唯一示例显示了SimCLR是如何在分类任务上进行微调的。一个finetune SimCLR (或另一个自监督模型)如何在实例分割任务上进行调整？

Answer 1

我认为可以，您可以使用SimCLR作为特征提取器和深度模型，例如基于从SimCLR获得的数据表示(而不是正常情况下的数据)的分割。