如何可视化图像的GIST特征

Question

我目前正在使用深度学习算法(通过使用GIST特性或CNN)开发一个图像分类应用程序。我需要帮助理解以下查询。

1. 我已经提取了图像(参考链接)的GIST特征。这些提取的特征将作为深度学习算法的输入，用于图像分类。有没有一种方法可以将提取的特征可视化在图像的顶部？
2. CNN还是GIST，哪个更适合图像分类？与CNN相比，GIST过时了吗？

谢谢你，KK

Answer 1

考虑到这两种代码都很简单(GIST + Network和Raw Pixel + Network)，您可以为给定的项目尝试三种方法。

1. GIST +密集层(GIST不是空间分布的)
2. 原始像素+ CNN +致密层
3. 原始像素+ CNN +密集+输入层2 (GIST) +密集

对于一些项目，GIST可以帮助，因为它是一个抽象的特性，CNN可能学习，也可能不会。

编辑：本论文比较GIST和CNN

关于：

有没有一种方法可以将提取的特征可视化在图像的顶部？

这可以通过方法3中的注意层来完成(CNN + GIST)。

CNN提供了空间分布(可视化所需的)，而将CNN的输出与GIST合并的密集层可以与注意力层一起使用。

可视化的纸