CapsNet生成对抗性网络

Question

我有一个很有趣的问题。一个月前，杰弗里·辛顿( Geoffrey )发布了他的CapsNet论文。这是神经网络栈可视化计算的一种全新方法。但我的问题是。是否可以使用CapsNet作为GAN。我只理解CapsNet的概念，但不理解技术限制。这有可能吗？

这听起来对我来说是个不错的研究领域：)

Answer 1

在GAN的编码器(鉴别器)中使用它们是绝对可能的，因为根据Hinton的原始论文，它被用于分类，这意味着它也适用于鉴别器，尽管适当的损失函数是一个研究课题。

我选择了GANs鉴别器中的胶囊网作为我的硕士论文的主题，我是现在正在研究模型。但是，我简化了路由算法，没有将DigitCaps值向量化(否则Keras代码变得复杂，尽管我不确定我所做的是否100%正确)。

Answer 2

是。在GAN中，可以使用CapsuleNet作为鉴别器。请参阅最近的一篇文章，其中声称这比使用CNN作为鉴别器有所改进：

CapsuleGAN:生成对抗性胶囊网络。Ayush Jaiswal，Wael AbdAlmageed，Yue，Premkumar Natarajan。arXiv:1802.06167

在他们测试的任务上，这一改进似乎是微不足道的。目前还不清楚如何使用CapsuleNet作为生成器，因此本文使用了一个基于CNN的发电机网络。